embulk-parser-poi_excel 0.1.8や0.1.9をインストールしても使えません。生成されたgemファイルの中が足りない（classpathディレクトリーしか存在しない）為、インストールしても正しく認識できないようです。
RubyGems上は0.1.8と0.1.9を非公開にしました。
どうも、Cygwin上でgradlewのgemタスクを実行すると正しいgemファイルが生成されないようです。（昔はこれで出来たはずなのに）
コマンドプロンプトからgemタスクを実行すると正しいgemファイルが生成されました。
というわけで、本来0.1.8として公開したかったバージョンは0.1.10で公開されています。