Q&A
暗号化はダメなんですか？
こんにちは。
今回も宜しくお願いします。
前提・実現したいこと
VisualStudioにてローカルで動作するフォームアプリケーションの開発をしています。
2パターンの約5,000,000文字の文字列リテラルを２つのstring型の変数にそれぞれ格納しましたが
コンパイル時にエラーが起きてしまいます。（下部エラー文参照）
エラーの回避方法若しくは代替案を教えて下さい。
この5,000,000の文字列は、元々csvファイルとして保管されていたものをスクリプトを使用して1行にしたものです。
仕様として、外部ファイルを参照してはいけないことになっているため、
exeの中にこの文字列を入れ込む必要があると考えています。
外部ファイルを参照できない理由としては、そのcsvファイルの内容を秘匿したいため とのことです。
私の中で考えた代替案ですが、以下となります。
①データベースを使用する
②zippassでcsvファイルを持っておき、参照時にexe内部で解凍する
③DataGritViewをメインフォーム内にvisible=Flaseで配置しておき、その中にデータを格納する
本来であれば、①を採用すべき案件だと思いますが、残念ながら工数が残り少ないため新たにDB
関連の知識を修得するための時間がありません。
また、②を採用するにしても、解凍時に一時的に解凍されたファイルがどこかに配置されてしまう可能性があるため秘匿機能としては劣ってしまうことを懸念しています。
可能であれば、既に出来ているプログラムをあまり変更すること無く、本エラーを回避することが望ましいです。
発生している問題・エラーメッセージ
エラー CS8103 プログラムで使うユーザー文字列の長さの合計が許可されている制限を超えています。文字列リテラルの使用を減らしてください。
補足情報（FW/ツールのバージョンなど）
Microsoft Visual Studio Community 2017
Version 15.7.3
VisualStudio.15.Release/15.7.3+27703.2026
Microsoft .NET Framework
Version 4.8.03761
下記では、「String Objectは2GB、もしくは約10億文字」は格納可能と書いてあります。
https://www.kinakomotitti.net/entry/2017/12/29/200615
下記では、
（原文）"I guess its a new compiler in VS2015, which restricts too much use of string literals."
（訳）「VS2015の新しいコンパイラで、文字列リテラルの使用が制限されすぎていると思います。」
とあります。VSの仕様上仕方が無いのでしょうか？
https://stackoverflow.com/questions/37193372/c-sharp-combined-length-of-user-strings-used-by-the-program-exceeds-allowed-limi/50522293
宜しくお願いします。
ご連絡ありがとうございます。
質問内の②を採用するとのことでしょうか？
https://www.atmarkit.co.jp/ait/spv/1709/06/news020.html
暗号化して外部ファイルに入れるのが良いかと。
CSVを暗号化して、読み込み時に複合化すれば中身を見られても大丈夫ではないですか？
Zuishin様
YAmaGNZ様
ご連絡ありがとうございます。
外部ファイルの内容自体を暗号化する ということですね。
その方向でも当たってみます。
やはりVS内で開発する上では、本件のような大量のリテラル文字を埋め込むことは難しい というご判断でよろしいでしょうか？
難しいかどうか以前に無意味というのがあります。
どのような物なのか分かりませんが、それなりに大きなデータだと思います。
それが変更になるたびにコンパイルしなおすのですか？
YAmaGNZ様
そのつもりです。（コンパイル自体は30秒程度でした。）
技術的には滑稽な設計になってしまっていますが、今後はDB機能を追加するなど、
システムの改善を進めていく予定です。
現時点ではベータ版のような取り扱いを行っているため
取り急ぎ、短時間で解決出来る方法を探しております。
セキュリティー面で言えば、そのままテキストファイルとして保存して拡張子を dll に変えるのと同程度なので、それでいいんじゃないかと思います。
exe に埋め込んでも、ノートパッドで読めてしまうので。
回答4件
0
外部ファイルを参照できない理由としては、そのcsvファイルの内容を秘匿したいため とのことです。
そもそも論ですが、ただ文字列リテラルとして書くだけならそのまま実行ファイルに埋め込まれてしまいます。秘匿としては気休め程度の効果があるかどうか、といったところです。
投稿2019/12/02 07:26
総合スコア145975
ご回答ありがとうございます。
exeファイルをテキストなどで確認しましたが、そのままの文字列が埋め込まれるわけでは無いので
問題無いと考えています。
確かに、IT関連の知識をお持ちの方なら解読されてしまう可能性はありますが
今回の顧客ではそこまで考慮する必要は無いと考えています。
内容自体も、重大なセキュリティに関連するものでも無いので。
横から失礼します、
exe ファイルをテキストエディタ等で開くとノイズの中にそのまま文字列が埋め込まれているのが読めます。
文字列は内部では UTF-16LE でエンコードされているので、世の中のほとんどのエディタでただ開くだけで全ての情報はキレイに抜き取れます。
tamoto様
exeの内容をUTF-16（リトルエンディアン）でエンコードすると綺麗に読み取れてしまいました。
こんなに簡単に読み取れるとは・・・。特殊なエディタを使う必要はあるかも知れませんが、これは危ないかも知れませんね。
もう少し検討する必要がありそうです。
メモ帳で読めると思います。
Zuishin様
notepad.exeの事でしょうか。
もし可能であれば、UTF-16で読み取れる方法を教えて頂いてもよろしいでしょうか？
先程私の環境で試したところ、ファイル→開く→ダイアログ内の文字コードのコンボボックスの中では
ANSI,Unicode,UnicodeBE,UTF8の４つしかありませんでした。
下記では確かにそのような説明はありましたが、私のPC環境が古いと言うことですかね。
https://forest.watch.impress.co.jp/docs/news/1157696.html
対象の環境：Windows 10 Insider Preview Build 18298
此方環境：OS ビルド 17763.864
Unicode というのが UTF-16 になります。
Zuishin様
＞Unicode というのが UTF-16 になります。
→ネットで調べた所、確かにそのように記載されていますね。
私の知識不足でした。ありがとうございます。
ただ、私の環境でメモ帳でUnicodeで変換しても文字化けした値が出くるように思います。
Zuishin様の環境ではnotepad.exeでも読み取り可能なのでしょうか？
後学のため、お手すきの時で良いのでご回答をお願いします。
試さず発言したので、間違っていました。実際にやってみましたが、そのままでは無理で、加工が必要でした。メモ帳で読めるというのは撤回します。
Zuishin様
了解です。いろいろご教示いただくお時間を頂きありがとうございました。
0
ベストアンサー
※暗号化とかはとりあえず無視して回答します。
Windowsフォームでしたら、文字列リソースとして格納できないでしょうかね？
参考：
https://www.atmarkit.co.jp/fdotnet/dotnettips/555appresources/appresources.html
文字数上限とかで入らないようでしたら、
「文字列」ではなく「ファイル」の方へCSVファイルのまま突っ込んでそこからパースするという手もあります。
投稿2019/12/02 07:56
総合スコア8356
仮に文字数の上限等の面倒な話がある場合，
文字列のバイト列を適当に画素値にした画像をリソースに持つとか…（画像の方がサイズ制限が緩いなら，ですが）
fana様
とても興味深いご提案だと思います。その発想はなかったｗ
現時点での私の知見では実現することは不可能ですが、今後のためにその考え方は覚えておきます。
ありがとうございました。
takabosoft様
ご回答ありがとうございます。
文字列リソースでは、文字数の上限の関係上埋め込むことは出来ませんでしたが
ファイルの取り込みでしたら実現することが出来ました。
埋め込んだあと、
string text = Properties.Resources.xxxx;
で取り出せました。ありがとうございました！
あと、懸念していたexeファイルの中身も、単純にUTF-16でエンコードしても取り出せなくなるという
おまけ付きでした！
なぜリソースに埋め込んだらexeの中身が読めなくなるかは分かりませんが、取り急ぎ完全に解決しました。
0
そのcsvファイルを埋め込みリソースにしてアセンブリに埋め込んではどうでしょう？
以下では、csvをgzip圧縮したものを埋め込みリソースにし、読みこんでいます。
C#
1//現在のコードを実行しているAssemblyを取得 2System.Reflection.Assembly myAsm = System.Reflection.Assembly.GetExecutingAssembly(); 3 4//指定されたマニフェストリソースを読み込む 5using (System.IO.StreamReader sr = 6 new System.IO.StreamReader( 7 new System.IO.Compression.GZipStream(myAsm.GetManifestResourceStream("WindowsFormsApp1.Resources.test.csv.gz"), System.IO.Compression.CompressionMode.Decompress), 8 System.Text.Encoding.GetEncoding("shift-jis"))) 9{ 10 //内容を読み込む 11 string s = sr.ReadToEnd(); 12}
投稿2019/12/02 08:38
編集2019/12/02 08:57
総合スコア7918
秘匿機能としては、こちらが最善の方法のように思います。
私には少し難度高めでした。。。引き続き勉強致します。
ご回答ありがとうございました。今後とも宜しくお願いします。
0
そのエラーはVisualStudioの制限によるものでは。
その文字列を表示させないで、別ソースにして取り込むなどしてみては。
投稿2019/12/02 07:35
総合スコア88040
あなたの回答
tips
プレビュー
