非同期処理の処理順序について

Question

C#で重い処理を非同期で動かしたいのですが、
その処理が順番が入れ替わってしまってはいけないものだとすると
非同期処理は使えないのでしょうか。

例えば例えばフォルダA、B、Cがあり、それぞれファイルが10個ずつ入っていたとします(a0a9.csv,b0b9.csv, c0~c9.csv)。
フォルダをコピー(A',B',C')して、ファイルごとにある処理をさせて、処理結果をまとめたファイル(aSummary.csv, bSummary.csv, cSummary.csv)を作成し、コピーフォルダに保存するという作業を行いたいとします。
ただ、非同期(ParallelやTask)では早く完了した順に結果を返してしまうと思います。
そこをA～Eの順は守りつつ、処理自体は非同期で行うことはできるのでしょうか。

よろしくお願いします。

Comments

[MMashiro]

本文が記述できていません、質問内容の再確認をお願い致します

[yaneuranoneko]

質問が漠然としていたみたいで削除されてしまったので、改めて記述しました。

Answer 1

それ以前にこの問題の場合、複数のスレッドから同時に複数のファイルにアクセスすることになると思いますが、対象が HDD や DVD などなら高速化どころか低速化します。

Comments

[yaneuranoneko]

回答ありがとうございます。私自身はSSDを使用していますが、もちろんHDDでも使用することはあります。HDDだと低速化するのであれば難しいですかね。

Answer 2

イベントやらセマフォ使えば順序は揃えられるだろうけど、非同期にする意味なくない？

---

ここでいうイベントってのはManualResetEventとかそっちのはなしね

まあ、並行して実行できるもんをPalalellで非同期に実行させて、それの終了待ちして、次の処理群を非同期で実行させる、、、というかんじでいいんじゃね？

Comments

[yaneuranoneko]

回答ありがとうございます。すみません初心者なもので、非同期にする必要がそもそもあるのかを再検討する必要があるかもしれません。セマフォというのは初めて聞いたので調べてみます。

Answer 3

こんにちは。

フォルダA～Eへの処理がそれぞれTaskになっていると仮定すると、
全てのTaskを起動した後、任意の順序でコレクションに詰め、Task.WhenAllメソッドを呼び出しawaitすることで目的を達成できます。

{
    var taskA = TaskAsync(A); // awaitしないことでバックグラウンド動作させる
    var taskB = TaskAsync(B);
    var taskC = TaskAsync(C);
    // ...

    var result = await Task.WhenAll(taskA, taskB, taskC); // resultはA,B,Cの順に並んだTaskの実行結果の配列となる
}

実際にはループで処理することになると思われますが、「Taskの配列」をTask.WhenAllで同時に待機するという流れは変わりません。

---

ところで、
フォルダへのアクセスというと、おそらくは物理ディスクに対するIOでしょうけど、並列実行したところでディスクのアクセスはシーケンシャルなので実行速度は逆に低下します。
並列実行がパフォーマンスに効果を発揮するのは、マルチコアCPUに対して計算処理を当てる場合と、待ちが発生するIO処理中に他のCPU処理を行う場合のみです。

Comments

[yaneuranoneko]

回答ありがとうございます。やりたいことはそのコードのようなことかもしれません。ただ、Zuishinさんの回答にもある通り、パフォーマンスが逆に低下してしまうようなら、現状の処理で時間がかかるのは仕方ないのかなと思ってしまいます。

Answer 4

参考までに
Task.ContinueWithを使用すれば順番に処理させることは可能です。
ですがこのやり方だと結局順番に処理を待つことになりますので、処理の効率化にはつながりません。
効率まで加味するのであれば、スレッド間で同期をとってやるなど工夫が必要と思います。

Comments

[yaneuranoneko]

回答ありがとうございます。効率化とやりたいことは逆のことをやろうとしているのかもしれませんね。参考にさせて頂きます。