EmbulkでRubyのプラグインを作っているけどgemがLoadErrorになる

Question

はじめてEmbulkのプラグインを開発しています。embulk newコマンドで新しくプロジェクトを作成しました。

Faradayを使いたいので.gemspecに

spec.add_dependency 'faraday'

を追加してlib/embulk/plugin/hoge.rbに以下のように

require `faraday`

とやり、実行すると

Error: InputPlugin 'hoge' is not found.
(ENOENT) No such file or directory - faraday

になります。vendor/bundle/にもfaraday/があります。

どのようにしたらrequireをするようにできるでしょうか。よろしくお願いします。

Answer 1

embulk new ruby-input hoge
cd embulk-input-hoge

config.ymlを作成して

in:
  type: hoge

out:
  type: stdout

embulk run -I lib config.yml

と実行してください。

2019/3/11 13:53 追加

こちらだとこれで動きます。(embulk bundle installは面倒なのでbashでやりました)

• OS: 10.14.3
• Java: 1.8.0_192
• Embulk: 0.9.15
• Fish: 2.6.0

bash -c '~/.embulk/bin/embulk new ruby-input hoge'
cd embulk-input-hoge

lib/embulk/input/hoge.rb

require 'faraday'

Gemfileに追加

spec.add_dependency 'faraday'

embulk bundle install

config.yml

in:
  type: hoge
out:
  type: stdout

java -jar ~/.embulk/bin/embulk run -I lib config.yml
...
Error: org.jruby.proxy.org.embulk.config.ConfigException$Proxy1: Required field "option1" is not set

Comments

[退会済みユーザー]

私はFish shellを使っているので

```
java -jar (which embulk) run -I lib config.yml
```

としていますが、やはり`require faraday`をするとLoadErrorになります。

[退会済みユーザー]

もちろん

bundle install

をしていますが、できません。

[hiroysato]

bundle installではなくembulk bundle installです。

設定・エラーメッセージ・使っているソフトウェアのバージョンを詳しく書いていただけますか？
メッセージは極力消さないでください。

[hiroysato]

embulk new xx と出てくる以下のメッセージに従ったのであれば上記の回答のところに書いてある通りに試してみてください。

$ cd embulk-input-hoge
$ bundle install # install one using rbenv & rbenv-build
$ bundle exec rake # build gem to be released
$ bundle exec embulk run config.yml # you can run plugin using this command

[退会済みユーザー]

使用しているバージョンはv0.9.15です。

$ cd embulk-input-hoge
$ bundle install # install one using rbenv & rbenv-build
$ bundle exec rake # build gem to be released
$ bundle exec embulk run config.yml # you can run plugin using this command

このメッセージに従ったあとに`java -jar (which embulk) run -I lib config.yml`をしていました。

上記の手順に従ってやると

$ java -jar (which embulk) bundle install

2019-03-11 14:05:41.681 +0900: Embulk v0.9.15
You must use Bundler 2 or greater with this lockfile.

そしてBundlerはv2.0.2を使用しています。

どのようにすれば解決するのでしょうか。よろしくお願いいたします。

[退会済みユーザー]

Errorメッセージは

2019-03-11 14:07:11.713 +0900: Embulk v0.9.15
2019-03-11 14:07:12.102 +0900 [WARN] (main): DEPRECATION: JRuby org.jruby.embed.ScriptingContainer is directly injected.
2019-03-11 14:07:13.681 +0900 [INFO] (main): Gem's home and path are set by default: "/Users/keisukeyamashita/.embulk/lib/gems"
2019-03-11 14:07:14.189 +0900 [INFO] (main): Started Embulk v0.9.15
LoadError: no such file to load -- faraday
require at org/jruby/RubyKernel.java:955
require at uri:classloader:/META-INF/jruby.home/lib/ruby/stdlib/rubygems/core_ext/kernel_require.rb:55
<main> at /Users/keisukeyamashita/src/github.com/KeisukeYamashita/embulk-input-dialogflow/lib/embulk/input/dialogflow.rb:1
require at org/jruby/RubyKernel.java:955
require at uri:classloader:/META-INF/jruby.home/lib/ruby/stdlib/rubygems/core_ext/kernel_require.rb:55
(root) at uri:classloader:/gems/embulk-0.9.15-java/lib/embulk/plugin_registry.rb:1
...

Error: InputPlugin 'hoge' is not found.
(LoadError) no such file to load -- faraday

です。

[退会済みユーザー]

バージョンは

- OS: 10.14.2
- Java: 1.8.0_202
- Fish: 3.0.0

です。

[hiroysato]

上の回答の「2019/3/11 13:53 追加」に書いた通りにやってみていただけますか？
作ったプラグインは一旦消すか別の場所で試してみてください。
そのとおりにやればbundlerは1.16を使うと思うんですが、、

[退会済みユーザー]

無事できました！ありがとうございます！

embulk bundle installとは、どのようなコマンドなのでしょうか。そしてなぜbundle installと差異があるのでしょうか。よろしくお願いいたします。

[hiroysato]

よかったです。

embulk bundleはembulk 専用のbundlerで、embulk.jarの中に組み込まれています。
このコマンドでは、bundle installした場合と違ってembulk専用ディレクトリ
(デフォルトでは、/Users/user/.embulk/lib/gems)にgemを導入します。
実態は普通のbundlerです。

一般的にbundle installはMRI(CRuby)が使われますが、こちらはJRuby経由でbundlerを利用します。

余談ですが、テストについてはこちらをご一読ください。
https://qiita.com/sonots/items/13bae6db72a71a5f45b5

[退会済みユーザー]

丁寧にありがとうございます。理解しました。

Qiita記事も読まさせていただきます。
改めて、ありがとうございました。