サーバーへのファイルの自動アップロード、ダウンロード。

Question

ECサイトを運営しています。
売上や、販売した商品毎のデータを効果的に利用したいと思っていて、それにはデータベースの活用が重要だと思っています。

売上や商品別のデータは大手ショッピングモールではcsv形式のファイルをダウンロードすることで、自社データベースに取り込むことは可能ですが、同時に商品のアップもcsvで対応するので、csvで出力、入力できるフォーマットを自作すれば効果的にデータの管理が出来ると思っています。

そこで、このフォーマットを作りたいと思うのですが
例えば楽天市場などに商品をアップするのに自動でアップするフォーマットを作る場合、どのような言語でプログラミングしていくのでしょうか。

上記は私のケースで記述しましたが、端的に言うと
サーバーへファイルを自動アップロード、ダウンロードを自動で行いたいです。

そのための方法を勉強したいので、参考書や、webページなどまたは経験などお持ちの方教えて頂けませんでしょうか。

UNIXサーバーへの命令になるので、コマンドラインでプログラミングするのだろうか、くらいにしか分からないのですがいかがでしょうか。

よろしくお願い致します。

Answer 1

サーバーへファイルを自動アップロード、ダウンロードを自動で行いたいです。

そのための方法を勉強したいので、参考書や、webページなどまたは経験などお持ちの方教えて頂けませんでしょうか。

端的に言うと、やりたい事をコードに落としこむだけなので、どこから手をつけたらいいのかわからないのなら、まずやりたい事(やるべき事)を文字に落としこむことをされては？

例えば 楽天市場で商品登録をする なら
0. csvを生成する(データベースから情報を引っ張ってきて)
0. 楽天にftp接続して、item.csv が残っていないか確認
0. 生成したcsvをアップロード

みたいな流れになろうかと思います
→私が知っている範囲の話で最新のやり方では変わっているかもしれませんが..

それらを何でどう作りこんでいくかは、YuichiKataokaさんのスキルと現在の環境しだいです

Answer 2

要件：業務を自動化、効率化したい（自動アップロードを含む）
ステークホルダー：自分のみ
と思われますので、作成したあとはなるべくメンテナンスしたくないだろうと想像します。

よってお金があるならベストな解は業務を仕様に書いてクラウドアウトソーシングに発注でしょう。
業務は全部EXCELでやるとCSVもアップロードも１パッケージでできますね。

自分でやってもいいですが、EXCELのバージョンやOSのバージョンで微妙にコーディングが異なる
場合があるのでよく調べてからやるといいと思います。

他の言語でも出来ますが、楽天API等が変更になった場合等コーディング手直し考えるとEXCELが
最適な気がします。

Answer 3

考える材料を提示しますと、以下のようになるかと。

このフォーマットを作りたいと思うのですが

例えば楽天市場などに商品をアップするのに自動でアップするフォーマットを作る場合、どのような言語でプログラミングしていくのでしょうか。

• 「自動」というのはどの契機で？

  • csvアップロードしたらすぐに？
    • アップロードの検知はサーバ側で監視？
      • ファイルの有無を１分に１回見るプログラム？
    • アップロードをクライアント側から通知？
      • 通知方法：UNIXコマンド？
      • 通知方法：コマンド受け取る用にプログラムを用意？
  • 決まった時間に起動（１日１回）？

• CSVの生成について

  • どこのPC(サーバ)で生成する？
    • クライアント側でデータ受け取り？
    • サーバ側に生成プログラムインストール？
  • DBを利用？
    • Oracle、Postgres、MySQL、MariaDB、SQLite
  • 生成用のプログラムの選択？
    • bash、c, c++, java、php、ruby、python、、等々

• アップロードの方法について

  • プロトコルの選択
    • http、ftp、sftp、scp、独自カスタマイズ

---

いろいろとまだ選択肢が抜けている箇所もある気がしますが、
自分が理解できるものを選択していけば早くできると思います。