常連

### 実現したいこと
Pythonのloggingを使い、ログ出力をしようとしています。
RotatingFileHandlerを以下のように使っているのですが、encoding='utf-8' を指定しているにも関わらず、出力されたファイルの日本語部分が '\u5929\u6c17\u4e88\u5831' のようになってしまいます。
なお下記のソースコードにあるように、ロガーを取得している側のソースコード、およびログ出力を行っている側のソースコードの双方に "#coding: utf-8" を入れています。

何が原因か分かりません。ご助言よろしくお願いいたします。

### 前提
Python 3.10.9

### 該当のソースコード
```Python
# coding: utf-8
(省略)
mylog = logging.getLogger(name)
rfh = logging.handlers.RotatingFileHandler( filepath, encoding = 'utf-8', mode = 'a', maxBytes = 52428800, backupCount = 5)
rfh.setFormatter(logging.Formatter(LOG_FORMAT_ACTIVITY)) 
mylog.addHandler(rfh)
```
### 試したこと
出力されたログファイルの文字コードを、VSCodeで開くとエンコーディングはUTF-8として表示されたので、Encodingを変えて表示してみましたが、変わりません。


Python loggingで作成したログの日本語が文字化けします。

### 実現したいこと
C言語でUTF-8の文字列をバイナリから出力したいです。
例えば「E3 81 82」が「あ」になりますので、配列「に0xE3, 0x81, 0x82, 0x00」と格納して、
printf()関数のような何かで出力させたいです。
実現方法を教えてください。
よろしくお願いいたします。

### 該当のソースコード

```c
#include <stdio.h>
#include <inttypes.h>
#include <wchar.h>

int main()
{
	char  moji1[] = { 0xE3, 0x81, 0x82, 0x00 };
	char  moji2[] = "あ";	//Shift JIS (82 A0)

	printf("%s\n", moji1);
	printf("%s\n", moji2);

	return 0;
}
```

### 追記
UTF-8のデータからShift JISのデータに変換する方法があればそちらをお願いいたします。

### 解決後のソースコード

```c
#include <stdio.h>
#include <inttypes.h>
#include <wchar.h>
#include <string>

std::string UTF8toSjis(std::string srcUTF8)
{
	//Unicodeへ変換後の文字列長を得る
	int lenghtUnicode = MultiByteToWideChar(CP_UTF8, 0, srcUTF8.c_str(), srcUTF8.size() + 1, NULL, 0);

	//必要な分だけUnicode文字列のバッファを確保
	wchar_t* bufUnicode = new wchar_t[lenghtUnicode];

	//UTF8からUnicodeへ変換
	MultiByteToWideChar(CP_UTF8, 0, srcUTF8.c_str(), srcUTF8.size() + 1, bufUnicode, lenghtUnicode);

	//ShiftJISへ変換後の文字列長を得る
	int lengthSJis = WideCharToMultiByte(CP_THREAD_ACP, 0, bufUnicode, -1, NULL, 0, NULL, NULL);

	//必要な分だけShiftJIS文字列のバッファを確保
	char* bufShiftJis = new char[lengthSJis];

	//UnicodeからShiftJISへ変換
	WideCharToMultiByte(CP_THREAD_ACP, 0, bufUnicode, lenghtUnicode + 1, bufShiftJis, lengthSJis, NULL, NULL);

	std::string strSJis(bufShiftJis);

	delete bufUnicode;
	delete bufShiftJis;

	return strSJis;
}

int main()
{
	char  moji1[] = { 0xE3, 0x81, 0x82, 0x00 };
	char  moji2[] = "あ";	//Shift JIS (82 A0)
	char result[10];

	std::string ret = UTF8toSjis(moji1);
	int len = sizeof(ret) / sizeof(string);

	for (int i = 0; i < (len * 2); i++)
	{
		result[i] = ret[i];
	}

	printf("%s\n", moji1);
	printf("%s\n", moji2);
	printf("%s", result);

	return 0;
}
```

UTF-8の文字列をC言語で表示したい

### 前提・実現したいこと
System.out.println("番号  名前      点数  評価");
番号　名前　　　点数　評価


  javaを勉強中の者なのですが、’￥u3000’は不正な文字ですと出てしまいエラーになってしまいます。

### 発生している問題・エラーメッセージ

```
myjava.java:23: エラー: ’¥u3000’は不正な文字です
  System.out.println("番号  名前      点数  評価”);
                                           ^
myjava.java:23: エラー: ’¥u3000’は不正な文字です   
  System.out.println("番号  名前      点数  評価”);
                                            ^

エラー2個                                     

```

### 該当のソースコード

```java
System.out.println("番号  名前      点数  評価")
```

### 試したこと
ネットで調べてみた所空白が全角だと起こるといった記事を見かけ、半角空白にしてみましたがエラーが出てきてしまいました。
思い切って空白を取り除いたりしましたがやはり同じエラーを出してしまいました。

### 補足情報（FW/ツールのバージョンなど）

　osはWindowsです。PowerShellをコンパイル、実行用に使っています。
　メモ帳で書いています。
　コンパイルする際、javac -encoding utf-8 myjava.javaを入力してコンパイルしています。

¥u3000は不正な文字ですと出てしまうのですが…

sqlserver2017を使用してます
今、文字コードがshift-jisになっているテーブルがあります
このテーブルを既に登録されているデータを含め
UTF-8へ変換するにはどのような方法がありますか？
ご教授ください

SQLServer UTF8へ文字コード変換

こんにちは。
もしご存知の方がいらっしゃいましたらアドバイスをいただけたら幸いです。

対象データベースは、SQLServer 2017です。PCのOSはWindows10です。
"|"区切りのテキストデータを、BULK INSERTでテーブルに取り込みたいのですが、
BULK INSERT実行時に以下のエラーが発生します。

###### ■エラーの内容：
メッセージ 4832、レベル 16、状態 1、行 1
一括読み込み: データ ファイルで予期しないファイルの終了が検出されました。
メッセージ 7399、レベル 16、状態 1、行 1
リンク サーバー "(null)" の OLE DB プロバイダー "BULK" により、エラーがレポートされました。プロバイダーからエラーに関する情報を取得できませんでした。
メッセージ 7330、レベル 16、状態 2、行 1
リンク サーバー "(null)" の OLE DB プロバイダー "BULK" から行をフェッチできません。

###### ■実行したSQL：
BULK INSERT BulkInsertTest FROM 'C:\temp\bi\STORE_20190323.txt' WITH (DATAFILETYPE='widechar', FORMATFILE='C:\temp\bi\BulkInsertTest.fmt')

###### ■取り込もうとしたデータ(STORE_20190323.txt UTF-8(BOM無) 改行LF)：
00001|あ|1|N|T
00002|a|1|N|This store is already closed.

###### ■フォーマットファイル(BulkInsertTest.fmt)：
14.0
5
1       SQLCHAR             0       5       "|\0"      1     StoreCd                Japanese_CI_AS
2       SQLNCHAR            0       200     "|\0"      2     StoreName              Japanese_CI_AS
3       SQLINT              0       4       "|\0"      3     SeqNo                  ""
4       SQLCHAR             0       1       "|\0"      4     DlvStatCd              Japanese_CI_AS
5       SQLNCHAR            0       400     "\n\0"     5     DlvNGRsn               Japanese_CI_AS

###### ■対象のテーブル(BulkInsertTest)：
![対象のテーブル(BulkInsertTest)](3256a6dd7dae1c23b36b405b2f042a35.jpeg)

些細な点でも構いませんので、ご意見等いただけたら幸いです。
よろしくお願いいたします。

###### ■テキストの中身
![イメージ説明](2084abc9b52f5aca5ac400d548a6c86c.jpeg)

SQL Server 2017 BULK INSERTでエラーが発生する

###前提・実現したいこと
自然言語処理のプログラムをpythonで書いています。エラーを消したいです。

###発生している問題・エラーメッセージ
エラーは文字コード関連です。ちなみにこのエラーは何度も実行しているとたまにエラーが出ないでプログラムが動くことがあります。
```
line 115, in tokenize
    yield node.surface.lower()
UnicodeDecodeError: 'utf-8' codec can't decode bytes in position 1-2: invalid continuation byte

```

###該当のソースコード
```python
def tokenize(self,text):#形態素解析して名詞だけ取り出す

        sentence = str(text)
        node = self.mecab.parseToNode(sentence)

        while node:
            if node.feature.split(',')[0] == '名詞':
                yield node.surface.lower()
            node = node.next
```

###試したこと
エンコードやデコードを試しましたが無理でした。それに、何回か実行すれば通ってしまうことがあるのが不思議です。

###補足情報(言語/FW/ツール等のバージョンなど)
使っているバージョンはpython3.6.1です。
OSはMacのSierraです。

pythonの文字コード系のエラーで困っています。

WindowsのコマンドプロンプトからUTF-8でファイルに書き込むことは
できないのでしょうか。
コマンドプロンプトから直接実行するとTeraPadでは「Unicode」と
表示されました。
なぜ、バッチファイルからの実行では「SJIS」（日本語があると「UTF-8N」）で
コマンドプロンプトからでは「Unicode」になるのでしょうか。
「バッチファイルを作る」または「UTF-8で書き込めるエディタを使う」
の方法で解決はしています。ただ、しっかりわかっておかないと後々困りそうで
質問しました。


バッチファイルsamplewrite.batを作成し、ファイルに書き込みを
行って、TeraPadで開き文字コードを参照すると「SJIS」と表示されました。

samplewrite.bat
```
@echo off
chcp 65001
echo 1 > sample.txt
echo 2 >> sample.txt
echo 3 >> sample.txt
```
実行
```
PS C:\Users\hoge .\samplewrite.bat
```
TeraPadでは「SJIS」

```
set HOGE=ほげ
echo %HOGE%>>sample.txt
```
の２行を追加すると
を行うと、TeraPadでは「UTF-8N」と表示されました。


同様のことをバッチファイルではなく、コマンドプロンプトから
直接実行するとTeraPadでは「Unicode」と表示されます。


```
PS C:\Users\hogek> chcp 65001
Active code page: 65001
PS C:\Users\hoge> echo 1 > sample2.txt
PS C:\Users\hoge> more .\sample2.txt
﻿1
PS C:\Users\hoge> echo 2 >> sample2.txt
PS C:\Users\hoge> echo 3 >> sample2.txt
PS C:\Users\hoge> more .\sample2.txt
﻿1
2
3
```
TeraPadでは「Unicode」

Windows10コマンドプロンプトからUTF-8で書き込むには

Windows使用でPython,Django,pipenvインストール。
VScode上でこのサイト↓を
```
def post_list(request):
    return render(request, 'blog/post_list.html')

```
表示させようすると、
下記のエラーが表示されます。
```
UnicodeDecodeError at /
'utf-8' codec can't decode byte 0xff in position 0: invalid start byte

Request Method: 	GET
Request URL: 	http://127.0.0.1:8000/
Django Version: 	3.0.2
Exception Type: 	UnicodeDecodeError
Exception Value: 	

'utf-8' codec can't decode byte 0xff in position 0: invalid start byte

Exception Location: 	C:\Users\ユーザー名\AppData\Local\Programs\Python\Python37\lib\codecs.py in decode, line 323
Python Executable: 	C:\Users\ユーザー名\AppData\Local\Programs\Python\Python37\python.exe
Python Version: 	3.7.6

Python Path: 	

['C:\Users\ユーザー名\Desktop\django_girl',
 'C:\Users\ユーザー名\AppData\Local\Programs\Python\Python37\python37.zip',
 'C:\Users\ユーザー名\AppData\Local\Programs\Python\Python37\DLLs',
 'C:\Users\ユーザー名\AppData\Local\Programs\Python\Python37\lib',
 'C:\Users\ユーザー名\AppData\Local\Programs\Python\Python37',
 'C:\Users\ユーザー名\AppData\Roaming\Python\Python37\site-packages',
 'C:\Users\ユーザー名\AppData\Local\Programs\Python\Python37\lib\site-packages']
```


```
django_girl> python manage.py runserver  
Watching for file changes with StatReloader
Performing system checks...

System check identified no issues (0 silenced).
January 29, 2020 - 20:46:26
Django version 3.0.2, using settings 'config.settings'
Starting development server at http://127.0.0.1:8000/ 
Quit the server with CTRL-BREAK.
```
C:\Users\ユーザー名\AppData\Local\Programs\Python\Python37\lib\codecs.py in decode, line 323の部分が関係しているということでしょうか？
line 323の前後の内容は↓　
```ここに言語を入力
def decode(self, input, final=False):
        # decode input (taking the buffer into account)
        data = self.buffer + input
        (result, consumed) = self._buffer_decode(data, self.errors, final)
323→     # keep undecoded input until the next call
        self.buffer = data[consumed:]
        return result
```
どうしたらよいのでしょうか？　'utf-8'の何か設定を再度しなければいけないのでしょうか？
アドバイスよろしくお願いいたします。