pythonで、ディレクトリごと、別のディレクトリへコピーしてみたい

Question

複数のディレクトリの中にあるすべてのファイルを、ある別のディレクトリにまとめる方法はありますか。shutilというモジュールのcopytreeという関数は、新しくディレクトリを作成するため、まとめることが出来ません。
いま、以下のスクリプトで、コピーできたのですが、一つずつファイルを移動しているため、時間がかかってしまいます。改善策を教えてください。

#-*- coding:utf-8 -*-
import shutil
import os

#指定したパス内全てのディレクトリを取得
lists1 = os.listdir('/Users/Desktop/old')

for list1 in lists1:
    #指定したパス内全てのファイルを取得
	lists2 = os.listdir('/Users/tsuda/Desktop/origin/'+ list1)

    for list2 in lists2:
	    oldpath = '/Users/tsuda/Desktop/origin/'+ list1 + '/' + list2 
	    newpath = '/Users/new'
	    #oldpathファイルをnewpathディレクトリへコピー
	    shutil.copy(oldpath, newpath)

Answer 1

ディレクトリaにA1とA2，ディレクトリbにB1とB2があったとき，
新しいディレクトリcの中にA1，A2，B1，B2を入れたいということですよね？
それはpythonのコードうんぬんよりも，OSについての知識が必要かと思います．

全ファイルをコピーするならば，最終的には必ず１つずつコピーされることになります．
しかし単にあるディレクトリから別のディレクトリにあるファイルを参照したいならば，
リンクを張れば良いと思います．
ファイルの内容をコピーすること無く，別のディレクトリから参照することができるようになります．
Unix系のOS（Linux，Macなど）であれば「ln」コマンドを実行して，
ファイルの中身をコピーすること無くディレクトリcの中にA1などを配置することが出来ます．
以下Unix系のOSでの話になります．

ターミナル（端末）上でlnコマンドを使えば，

$ ln -s /a/* /c/

とするだけで，ディレクトリaの中にあるファイルやディレクトリをcの中に入れることが出来ます．

質問者の方からすると反則のように思われるかもしれませんが，
処理は得意な言語にやらせたほうが良いと思います．
Pythonのコードからコマンドを実行して結果を受け取るためには

#!/usr/bin/env python
import commands
check = commands.getoutput("ln -s /a/* /c/")
print check

とすれば良いです．適宜関数の引数は変更してください．

PythonnのOSモジュール内のsymlinkを利用して，
単一ファイルについてシンボリックリンクを作る方法もありますが，
自分でディレクトリの探索をするコードを書かなくてはならないため少し面倒です．
（ワイルドカードの*が使えません）
どうしても，と言う場合はこちらをご覧ください．
python symlink vs ln - Stack Overflow

Windowsで同じようなことをしたい場合，MKLINKコマンドを使うか，
cygwin（Windows上でUnixのコマンドを実行するプログラム）上でこれらのコードを実行してみてください．
上手くいくかは確認していません．

Comments

[HidenoriYamano]

osがwindowsですので、mklinkコマンドを実行してみました。しかし、ファイr名、ディレクトリ名またはボリュームラベルの構文が間違っていますと表示され、うまくいきませんでした。また、mklinkのリンク元は、新しくフォルダを作成しないといけないため、リンク元に複数のディレクトリをリンクすることは難しそうです＞＜

[KenTerada]

普段Windowsをコマンドで操作することはなく，mklinkを試してみましたが確かにlnとの違いが大きく，目的を達成することができませんでした．
ただし，ファイル本体をコピーせずに別ディレクトリから見られるようにする，という目的の達成にはシンボリックリンクが一番かと思います．

「Windows」かなにかのタグをつけて，Windowsコマンドやバッチファイルに詳しい人に聞いた方が良いと思います．
お役に立てずすみません．

[HidenoriYamano]

ご指摘ありがとうございます。タグ付けしておきます。

[退会済みユーザー]

PythonのShell系のモジュールは処理系によってやたら遅いことがあるそうですので、自分も、OSの得意な方法を利用する、という線で進めるのがベターだと思います。

Windowsの場合だと、XCOPYコマンドやrobocopyコマンドを使う形になると思います。
※各コマンドの使い方については、検索していただくと良いかと思います。
※コマンドはどちらも単独のプログラムなので、子プロセス起動で呼び出す形になります。