RubyはCSV読み込みが遅いですか？

前提・実現したいこと

環境： AWS APIGateway, Lambda(言語はruby), csv用s3

LambdaのトリガーとしてAPI Gatewayを設定し、Lambdaの中ではs3からcsvファイルを読み込み,
検索を行ってレスポンスで結果を返します。

上記の処理を0.3秒ぐらいで終わらせたいです。
Lambdaのメモリを増やす以外の方法はないでしょうか、、

発生している問題・エラーメッセージ

この過程が2秒以上掛かってしまうのが問題です。
tsv（tab区切りのtxtファイルです）の大きさは3mbで５０００行ぐらいです。
下記該当のソースコードのCSV.parseのところで2秒ぐらい掛かってるのはないかと思われます

該当のソースコード

ruby
1body = s3.bucket('bucket name').object('ファイルキー').get.body.string
2CSV.parse(body, col_sep: "\t")

試したこと

Lambdaのメモリが128mb(default)になっておりますが、メモリを増やしたら確かに早くなりました。
csvを読み込むのが遅いからLambdaのin memoryを利用するためglobal変数に指定しましたが、10分後には初期化されてました。
aws Athenaを使ってcsvにクエリを投げてみましたが、結局レスポンスまで2~3秒かかるのは同じでした。

補足情報（FW/ツールのバージョンなど）

rubyバージョンは2.5.0です

nanami12

2020/01/31 05:20

CSVをあつかうなら require "csv" CSV.foreach 略等を使うのが常かと思うのですが

yu_1985

2020/01/31 06:43

Lambdaでない環境で同じ処理をするとどのくらいかかりますか？（メモリ量が違いすぎるので参考にならないかもしれませんが）具体的な処理はわかりませんが、1行ずつ処理してるために余計に時間を食ってるような気がします。

DuhoKim

2020/01/31 06:50

コメントありがとうございます！ @nanami12, CSV.foreachでも掛かる時間は同じでした。。 @yu_1985　ram8gbであるローカルでは一瞬で終わります。128mbと８GBは流石に差がありますね。。 parseは文字列をcsvに変換してくれるだけと思いましたが、裏では１行づつ処理しているのでしょうか？

yu_1985

2020/01/31 06:54

rubyのcsv操作についてそんなによく分かってるわけではないので正確なところはわかりませんが…。全部を読み込まずに必要なところだけピンポイントで使う、みたいなことってできないんですかね？

yu_1985

2020/01/31 07:12

あと、ケースによってはS3 Selectもアリかもしれません。 https://tkaaad97.hatenablog.com/entry/2018/06/05/013009

DuhoKim

2020/01/31 07:15

必要なところだけ使うみたいなのができればいいですが、検索しても全然分からない状態ですね。。 S3 Selectは初めてみたのでそれで試してみます！ありがとうございます。