cronでnetcatによりファイル転送すると、途中で止まる

Question

cronを用いて定期的に９MBほどのファイルをnetcatにより転送するスクリプトを走らせています。

しかし、コマンドラインからスクリプトを動かした時はしっかりファイルが全て転送されるのに対して、cronで動かした時には数百キロバイトの一定の値しか送信できません。

cronのバッファの上限が原因だと思いますが、このような場合対処する方法はありますか？

Answer 1

netcatの代わりに送信側サーバーでpythonのSimpleHTTPServerを、受信側でwgetを使うことにより解決しました。

Answer 2

はじめまして

先に回答者がおられたので、補足です。

「数百キロバイトの一定の値しか送信できません」

・cronのバッファをクリアするしかないと思います。
方法は検索するとでてくると思います。

または
・９MBファイルがテキスト、CSV形式等だとすると
１０数個になりますがファイル分割して１つずつ送信、受信後に
結合する機能をシェル（かプログラム）に持たせることですね。

Comments

[退会済みユーザー]

ご回答ありがとうございます。
バッファをクリアする方法ですが、日本語・英語の両方で調べて見ましたが、参考になるものはございませんでした。
また、splitを使って分割も試してみましたが、なぜか同じサイズで止まってしまいます。

Answer 3

直接、役立つかどうか分かりませんが･･･

自分もnetcatでファイル転送した事があるのですが、cronを使うかどうかに関わらず、転送が途中で止まってしまう場合がありハマった経験があります。

その時は、転送前にファイルをアーカイブし、受信後に展開することで(とりあえず)解消しました。

例えば下記ページなどを参考に、zipでの圧縮/解凍処理を挟んでみてはいかがでしょうか？

最速を究める! 2つのサーバ間で特盛りデータを30倍速で転送する方法

以上、ご参考になれば幸いです。

Comments

[退会済みユーザー]

ご回答ありがとうございます。
圧縮も試してみましたが、うまく送信することはできませんでした。