Swift：URLからHtmlのソースを取得したい

Question

ビックカメラ.comから以下のコードでhtmlのソースを取得しようとするとエラーになります。
しかしヨドバシ.comではエラーにならずにhtmlのソースが取得できます。

let sourceHTML =　try! String(contentsOf: URL, encoding: String.Encoding.utf8)
print(sourceHTML)

Thread 1: Fatal error: 'try!' expression unexpectedly raised an error: Error Domain=NSCocoaErrorDomain Code=261 "The file “main” couldn’t be opened using text encoding Unicode (UTF-8)." UserInfo={NSURL=https://www.biccamera.com/bc/main/, NSStringEncoding=4}

以下のコードでビックカメラ.comのhtmlの全体のソースが得られます。
しかしバックグラウンドでhtmlのソースを取得したいためwebViewは使えないです。

webView.evaluateJavaScript("document.getElementsByTagName('html')[0].innerHTML", completionHandler: { (html, error) -> Void in print(html!)})

どうすればバックグラウンドでビックカメラ.comのhtmlの全体のソースを取得できるのか教えていただきたいです。
よろしくお願い致します。

環境：Xcode11,iOS13

Answer 1

指定しているエンコーディングと、取得したいURLで使われているエンコーディングが違うので落ちているのだと思います。

取得したいURLはShiftJISでエンコーディングされているようなので、

let url = URL(string: "https://www.biccamera.com/bc/main/")!
let sourceHTML = try! String(contentsOf: url, encoding: .shiftJIS)
print(sourceHTML)
        

とすればとりあえずコンテンツは取得できるようです。

Comments

[takk_014]

無事ビックカメラ.COMのhtmlソースが取得できました！
エンコーディングの違いに気づかないなんて知識不足で恥ずかしいです。
ご教授ありがとうございました。

[TsukubaDepot]

Stringで直接取得するのではなく、自分でダウンロードを行う方法になりますが、最近の質問で文字エンコードを自動的に判別するような例もあったので、そちらも参考になるかもしれません。
https://teratail.com/questions/255241
この質問のhoshi-takanoriさんによる回答が参考になるかもしれません。