PowerShellで取り込んだCSVのパティング後のマッチング・文字列置換処理について

Question

###前提・実現したいこと
PowerShell(ver0.2)で、2つのcsvファイルを読み込み特定の列の値に対しそれぞれゼロ埋めとNULLの数値化を行い、その後、成型した値でマッチングを行い数値を文字列に置き換えてCSVファイルを出力するスクリプトを作っています。

・データ成型したい値の情報
値は1桁～3桁まであるので、すべて3桁にしたい
ex: 1 ⇒001 、10⇒010
※NULLの場合がある

＜今問題なこと＞

ゼロ埋め処理がうまく引き継がれていないのか、
その後のマッチング～置換・出力の前処理で下記のような結果になってしましいます。

もともと3桁の値 ⇒置換処理される
もともと1桁、2桁およびNULLの値 ⇒置換処理されない

どう組めばエラーなく、該当する全ての値を置換できるようになるかご教示ください。

###発生している問題・エラーメッセージ

null 値の式ではメソッドを呼び出せません。
発生場所 行:6 文字:19
+  %{ $_.END.PadLeft <<<< (3,"0")}
    + CategoryInfo          : InvalidOperation: (PadLeft:String) []、RuntimeException
    + FullyQualifiedErrorId : InvokeMethodOnNull


インデックスの演算が失敗しました。配列のインデックスが null に評価されました。
発生場所 行:14 文字:19
+   %{$_.ID2 = $dic[ <<<< $_.ID2] ; $_} |
    + CategoryInfo          : InvalidOperation: (:) []、RuntimeException
    + FullyQualifiedErrorId : NullArrayIndex

###該当のソースコード

Get-Content C:\work\INPUT_LIST.csv | ConvertFrom-Csv -Header ID,NAME,IP,HOST,HOST2 |
 %{ $_.ID.PadLeft(3,"0")}
 
Get-Content C:\work\INPUT.csv | ConvertFrom-Csv -Header No.,day,ID1,ID2 |
 %{ $_.ID1.PadLeft(3,"0")} |
 %{ $_.ID2.PadLeft(3,"0")}
 
 $dic = @{}
Get-Content C:\work\INPUT_LIST.csv | ConvertFrom-Csv -Header ID,NAME,IP,HOST,HOST2 |
  %{$dic[$_.ID] = $_.NAME}

Get-Content C:\work\INPUT.csv  | ConvertFrom-Csv -Header No.,day,ID1,ID2 |
  %{$_.ID1 = $dic[$_.ID1] ; $_}  |
  %{$_.ID2 = $dic[$_.ID2] ; $_} |
    Export-Csv C:\work\data\OUTPUTData.csv  -encoding Default

###試したこと
ネットで調べましたが開発経験が浅く解決に至りませんでした。
事前処理結果をテンポラリに格納して、置換処理時に参照するような処理が必要なのでしょうか。

###補足情報(言語/FW/ツール等のバージョンなど)
バージョン：2.0
実行環境：Winsows 7

Answer 1

START と END はどこから出てきましたか？

Get-Content C:\work\INPUT.csv | ConvertFrom-Csv -Header No.,day,ID1,ID2 |
 %{ $_.START.PadLeft(3,"0")} |
 %{ $_.END.PadLeft(3,"0")}

###追記
たとえばこれを

Get-Content C:\work\INPUT.csv | ConvertFrom-Csv -Header No.,day,ID1,ID2 |
 %{ $_.ID1.PadLeft(3,"0")} |
 %{ $_.ID2.PadLeft(3,"0")}

こう変えるとお望みの動作になりますか？

Get-Content C:\work\INPUT.csv | ConvertFrom-Csv -Header No.,day,ID1,ID2 |
 Select-Object No., day, @{Name="ID1"; Expression={$_.ID1.PadLeft(3, "0")}}, @{Name="ID2"; Expression={$_.ID2.PadLeft(3, "0")}}

###追記
これで試してみてください。

input.csv

1601,2016/08/04,001,001
1017,2016/08/04,002,025
1058,2016/08/04,103,001
1358,2016/08/04,500,002
0910,2016/08/04,500,""

input_list.csv

001,りんご支店
002,バナナ支店
025,キウイ支店
103,みかん支店
500,メロン支店

convert.ps1

$dic = @{}
Import-Csv .\input_list.csv -Header ID, Name |
	% {$dic[$_.ID] = $_.Name}
Import-Csv .\input.csv -Header No., day, ID1, ID2 |
	Select-Object No., day, @{Name="ID1"; Expression={$dic[$_.ID1.PadLeft(3, "0")]}}, @{Name="ID2"; Expression={$dic[$_.ID2.PadLeft(3, "0")]}} |
	Export-Csv .\OUTPUTData.csv -Encoding Default -NoTypeInformation -Force

Comments

[MMMZ]

投稿用に項目名に変えたつもりが、漏れていたようです。失礼しました。

START→ID1
END→ID2

[Zuishin]

CSV のデータが無いところは null ではなく "" となります。
ここで null が出てくるのは、ID1 のデータに対して ID2 を求めているからです。

つまり %{ $_.ID1.PadLeft(3,"0")} によって ID1 のデータが抽出されます。その抽出されたデータに対して %{ $_.ID2.PadLeft(3,"0")} を行っています。ID1 には ID2 というプロパティはありませんので、その結果は null になります。

null に対して PadLeft() を呼ぼうとしているので、例外が発生しています。

[MMMZ]

ありがとうございます。
Windows PowerShell ISE上で修正結果を実施したところ、パティング処理はうまく実行されているようでした。
ただ、後続の置換処理の際に以下のエラー文が複数表示されました。

インデックスの演算が失敗しました。配列のインデックスが null に評価されました。
また、出力結果を参照したところ、置換処理も前処理でパティングした項目はできておりませんでした。エラーは先にご説明いただいたような内容と同じかと推測するのですが、、、

発生場所 行:13 文字:19
+ %{$_.ID2 = $dic[ <<<< $_.ID2] ; $_} |
+ CategoryInfo : InvalidOperation: (:) []、RuntimeException
+ FullyQualifiedErrorId : NullArrayIndex

＜エラー箇所＞
Get-Content C:\work\INPUT.csv | ConvertFrom-Csv -Header No.,day,ID1,ID2 |
%{$_.ID1 = $dic[$_.ID1] ; $_} |
%{$_.ID2 = $dic[$_.ID2] ; $_} |

以下のように修正し、実施したところ、
ID1、ID２に該当するカラムに他の項目の参照情報も付与された状態の長いデータに置換されて出力されていました。（エラーはなかったです。）

Get-Content C:\work\basyohenkan2\dakokubasyo.csv | ConvertFrom-Csv -Header No.,day,ID1,ID2 |
Select-Object No., day, @{Name="ID1"; Expression={$_.ID1 = $dic[$_.ID1] ; $_}}, @{Name="ID2"; Expression={$_.ID2 = $dic[$_.ID2] ; $_}} |

[MMMZ]

エラー文が抜けておりました。

＜エラー文＞
インデックスの演算が失敗しました。配列のインデックスが null に評価されました。
発生場所 行:13 文字:19
+ %{$_.ID2 = $dic[ <<<< $_.ID2] ; $_} |
+ CategoryInfo : InvalidOperation: (:) []、RuntimeException
+ FullyQualifiedErrorId : NullArrayIndex

[Zuishin]

どういうデータを加工してどういう出力を得たいと思っておられるのかがわからないので、とりあえず一つだけ直しました。

後はその応用で直せると思ったのですが、ID1 と ID2 のみ必要で他のカラムは不要と言う意味でしょうか？

もしそうであれば Select-Object の引数を減らすことで対応できます。

[MMMZ]

入退室管理を目的に、支店コードと支店名が記載されたリスト（INPUT_LIST.csv）をもとに、当日の入退室情報ログ（INPUT.csv）に出力された当日の入室時、退室時の拠点コード（ID1、ID2）を支店名(NAME)に置換したデータ（OUTPUTData.csv）を生成したいと考えております。

・変換前ファイル
社員番号,年月日,入室支店コード,最終退室支店コード
1601,2016/08/04,001,001,～
1017,2016/08/04,002,025,～
1058,2016/08/04,103,001,～
1358,2016/08/04,500,002,～
0910,2016/08/04,500,"",～
～

・変換後ファイル(最終的に出力したい形式)
社員番号,年月日,入室支店名,最終退室支店名
1601,2016/08/04,りんご支店,りんご支店,～
1017,2016/08/04,バナナ支店,キウイ支店,～
1058,2016/08/04,みかん支店,りんご支店,～
1358,2016/08/04,メロン支店,バナナ支店,～
0910,2016/08/04,メロン支店,"",～
～

＞＞後はその応用で直せると思ったのですが、ID1 と ID2 のみ必要で他のカラムは不要と＞＞言う意味でしょうか？
カラムに関しては、上記の通り、No.,day,ID1,ID2で形成したいです。
⇒（社員番号,年月日,入室支店名,最終退室支店名）

文章がわかりずらく申し訳ございませんが、
現在だと、3カラム目と4カラム目に下記のような値が代入されてしまいます。
⇒@{No.=社員番号; day=年月日; START=コードから置換した支店名; END=コードから置換した支店名}

ここ2.3日でPowerShellに取り組み始めたため応用が難しく、恐縮ですがお知恵をお貸しいただければと思います。

[Zuishin]

追記しました。input.csv および input_list.csv のエンコードが UTF8 でない場合、Import-CSV のオプションで -Encoding を指定してください。

[MMMZ]

ありがとうございます。
いただいたソースで実行すると、
・支店コードが1桁と2桁のものは置換できませんでした
・置換結果処理されたカラムの文字化けしていました。
こちらは調べたところ、当方の環境がver02なので、Import-CSVでのEncodingに対応していないのが原因のようです。

[Zuishin]

そう言えば version 2.0 でしたね？
こちらも 2.0 で試してみましたが、確かに Shift_JIS のものが文字化けしました。
Import-Csv を、ご自分でされていたように Get-Content | ConvertForm-Csv にすれば文字化けしないことを確認しました。

支店コードが 1 桁や 2 桁というのはどういうことでしょうか？
input.csv の支店コードを 3 桁未満にしてみましたが、間違いなく動作しました。
input_list.csv のことであれば、それは PadLeft を使っている以上当然の動作です。

省略をこちらで補完しなければならないものではなく、私の挙げたように、実際に使えるデータとスクリプトを挙げてみてください。

[Zuishin]

どうなりましたか？