csvの正しい保存の仕方とは？

Question

使用環境
window 10Home
eclipse: 2022-03　
orangesignal-csv-2.2.1

前回
https://teratail.com/questions/8ng9q7802mglso
で質問した所、同じコードを打ってみたものの、どういうわけかエラーが出てしまい
進みません。なぜ進まないのかがよくわかりません。

恐らく、CSVの保存に問題があるのではと思いますが、
果たしてどうなのでしょうか。

出てくるエラーコード

Exception in thread "main" java.lang.IllegalStateException: Invalid CsvColumn field prefature
	at com.orangesignal.csv.bean.CsvEntityTemplate.getPosition(CsvEntityTemplate.java:258)
	at com.orangesignal.csv.io.CsvEntityReader.convert(CsvEntityReader.java:298)
	at com.orangesignal.csv.io.CsvEntityReader.toEntity(CsvEntityReader.java:228)
	at com.orangesignal.csv.handlers.CsvEntityListHandler.load(CsvEntityListHandler.java:104)
	at com.orangesignal.csv.handlers.AbstractCsvListHandler.load(AbstractCsvListHandler.java:76)
	at com.orangesignal.csv.handlers.AbstractCsvListHandler.load(AbstractCsvListHandler.java:1)
	at com.orangesignal.csv.Csv.load(Csv.java:69)
	at com.orangesignal.csv.Csv.load(Csv.java:83)
	at com.orangesignal.csv.Csv.load(Csv.java:112)
	at com.orangesignal.csv.Csv.load(Csv.java:148)
	at com.orangesignal.csv.manager.AbstractCsvLoader.from(AbstractCsvLoader.java:132)
	at cse5.Main.main(Main.java:13)

package cse5;

import java.io.File;
import java.io.IOException;
import java.util.List;

import com.orangesignal.csv.manager.CsvEntityManager;

public class Main {

	public static void main(String[] args) {
		try {
      List<Product> list = new CsvEntityManager().load(Product.class).from(new File("PrefatureSet3.csv"));
      for(Product product : list) System.out.println(product);
    } catch(IOException e) {
      e.printStackTrace();
    }
  }

	}

package cse5;

import com.orangesignal.csv.annotation.CsvColumn;
import com.orangesignal.csv.annotation.CsvEntity;

@CsvEntity
public class Product {
  @CsvColumn(name = "都道府県名")
  private String prefature;
  @CsvColumn(name = "人口")
  private int population;
  @CsvColumn(name = "高齢者率")
  private double oldPercent;
  @CsvColumn(name = "地方")
  private String domestic;

  @Override
  public String toString() {
    return new StringBuilder("Product")
        .append(" [prefature=").append(prefature)
        .append(", population=").append(population)
        .append(", oldPercent=").append(oldPercent)
        .append(", domestic=").append(domestic)
        .append("]").toString();
  }
}

都道府県名,人口,高齢者率,地方
北海道,5228885,0.29 ,北海道
青森県,1238730,0.30 ,東北
岩手県,1211206,0.30 ,東北
宮城県,2303487,0.25 ,東北
秋田県,960113,0.34 ,東北
山形県,1068696,0.31 ,東北
福島県,1834198,0.28 ,関東
茨城県,2868554,0.27 ,関東
栃木県,1934016,0.26 ,関東
群馬県,1940333,0.27 ,関東
（以下略）

やった事
・WPS SpredSheetsで「Prefature　Set.csv」として保存する
・「Prefature Set.csv」をメモ帳のプログラムで開く
・名前を付けて保存「Prefature Set3.csv」という名前で文字コード「UTF-８」として保存する

Comments

[swordone]

高齢者率の数字のあとに空白があるのはなぜです？

[Seeker]

意図的に起こしたわけではないですが・・・恐らく
元々　Prefature Setのファイルの前のファイルのデータでは
0.30の所とかは30％という風に％表記であったので
それを計算のために変更しました。
その過程で空いたのかと思います。

[dodox86]

> 名前を付けて保存「Prefature Set3.csv」という名前で文字コード「UTF-８」として保存する

(BOMが付いていない)UTF-8で保存されたのだと思いますが、それはそれで良いとして

> new CsvEntityManager().load(Product.class).from(new File("PrefatureSet3.csv"));

とあるので、orangesignalで扱う際のファイルの文字コードが合っていないのではないでしょうか。
試しに日本語全角文字を使わないよう(ローマ字などのダミーデータとして)CSVファイルを作って試してみてはいかがでしょう。

[Seeker]

説明がされたダミーデータで行いました所（項目名をローマ字読みしたものに変えた）。
上記で示されたエラーが消えたものの、今度は別なエラーが出てきました

Exception in thread "main" java.lang.IndexOutOfBoundsException: Index 1 out of bounds for length 1

どういうことでしょうか

Answer 1

ソースはそのままで実行したら、こんなんでましたけど。

都道府県名,人口,高齢者率,地方
北海道,5228885,0.29 ,北海道
青森県,1238730,0.30 ,東北
岩手県,1211206,0.30 ,東北
宮城県,2303487,0.25 ,東北
秋田県,960113,0.34 ,東北
山形県,1068696,0.31 ,東北
福島県,1834198,0.28 ,関東
茨城県,2868554,0.27 ,関東
栃木県,1934016,0.26 ,関東
群馬県,1940333,0.27 ,関東

ソース以外の変更点は、以下。

diff --git a/PrefatureSet3.csv b/PrefatureSet3.csv
--- a/PrefatureSet3.csv	(revision 40dc83e530bb2eb873151aa9c30f58cad0697e13)
+++ b/PrefatureSet3.csv	(date 1653630303246)
@@ -8,5 +8,4 @@
 福島県,1834198,0.28 ,関東
 茨城県,2868554,0.27 ,関東
 栃木県,1934016,0.26 ,関東
-群馬県,1940333,0.27 ,関東
-（以下略）
\ No newline at end of file
+群馬県,1940333,0.27 ,関東
\ No newline at end of file

なお、orangesignal-csvについては、完全なる無知です。

Comments

[Techann]

すいません、コレはどういう意味となるのでしょうか？

普通に読み込めているという解釈なのか
それとも
〇〇の所が読み込めていませんという解釈なのか……よくわかりません

[shiketa]

PrefatureSet3.csvの最後の「（以下略）」の行を削除して、最後の行の行末の改行文字を削除したら、例外は発生せず、件のような結果が出力された、ということ。

最後の行に改行文字を付加すると、Exception in thread "main" java.lang.IndexOutOfBoundsException: Index 1 out of bounds for length 1　が発生する。改行文字を取れば発生しない。最後の行を`aaa,123`にすると、Exception in thread "main" java.lang.IndexOutOfBoundsException: Index 2 out of bounds for length 2　が発生する。
orangesignal-csvは、最終行の扱いに問題を抱えているのではないでしょうか。

[Seeker]

ありがとうございます。
別なライブラリが使えないか検討してみます