SQLAlchemyを利用時、UnicodeEncodeError, Background on this error になる

受付中

回答 0

投稿

  • 評価
  • クリップ 0
  • VIEW 123

teityura

score 57

前提・実現したいこと

SQLAlchemyを初めて利用しているが、
下記のエラーメッセージが出て、上手く動かない。

発生している問題・エラーメッセージ

engine = create_engine(f'mysql://{MYSQL_USER}:{MYSQL_PASSWORD}@{MYSQL_HOST}/{MYSQL_DB}',
convert_unicode=True, encoding='utf-8', echo=True)
の場合、

UnicodeEncodeError: 'latin-1' codec can't encode characters in position 4-5: ordinal not in range(256)


engine = create_engine(f'mysql+mysqldb://{MYSQL_USER}:{MYSQL_PASSWORD}@{MYSQL_HOST}/{MYSQL_DB}?charset=utf8',
convert_unicode=True, encoding='utf-8', echo=True)
に変更後、

(Background on this error at: http://sqlalche.me/e/f405)
ERROR: exit status 1

該当のソースコード

# twitter_user_add.py
# coding=utf-8
import os
from sqlalchemy import create_engine
from sqlalchemy.orm import sessionmaker
from models import TwitterUser

# 環境変数からDB接続情報取得
MYSQL_USER = os.environ['MYSQL_USER']
MYSQL_PASSWORD = os.environ['MYSQL_PASSWORD']
MYSQL_HOST = os.environ['MYSQL_HOST']
MYSQL_DB = os.environ['MYSQL_DB']

# MySQL接続
# engine = create_engine(f'mysql://{MYSQL_USER}:{MYSQL_PASSWORD}@{MYSQL_HOST}/{MYSQL_DB}',
#                        convert_unicode=True, encoding='utf-8', echo=True)
# UnicodeEncodeError: 'latin-1' codec can't encode characters in position 4-5: ordinal not in range(256)

engine = create_engine(f'mysql+mysqldb://{MYSQL_USER}:{MYSQL_PASSWORD}@{MYSQL_HOST}/{MYSQL_DB}?charset=utf8',
                       convert_unicode=True, encoding='utf-8', echo=True)
# (Background on this error at: http://sqlalche.me/e/f405)
# ERROR: exit status 1

# トランザクション開始
Session = sessionmaker(bind=engine)
session = Session()

# user追加
test_user = TwitterUser(user_name='testマン', user_screen_name='testman', profile_image_link='test/link')
session.add(test_user)

# user複数追加
session.add_all([
    TwitterUser(user_name='taro', user_screen_name='taro', profile_image_link='taro/link'),
    TwitterUser(user_name='hanako', user_screen_name='hanako', profile_image_link='hanako/link'),
    TwitterUser(user_name='pochi', user_screen_name='pochi', profile_image_link='pochi/link')])

# 変更をコミット
session.commit()



#=================================================================



# models.py
# coding=utf-8
import os
from sqlalchemy import *
from sqlalchemy.orm import *
from sqlalchemy.ext.declarative import declarative_base
from datetime import datetime

# 環境変数からDB接続情報取得
MYSQL_USER = os.environ['MYSQL_USER']
MYSQL_PASSWORD = os.environ['MYSQL_PASSWORD']
MYSQL_HOST = os.environ['MYSQL_HOST']
MYSQL_DB = os.environ['MYSQL_DB']

# データベースエンジン作成
# engine = create_engine(f'mysql://{MYSQL_USER}:{MYSQL_PASSWORD}@{MYSQL_HOST}/{MYSQL_DB}',
#                        convert_unicode=True, encoding='utf-8', echo=True)
engine = create_engine(f'mysql+mysqldb://{MYSQL_USER}:{MYSQL_PASSWORD}@{MYSQL_HOST}/{MYSQL_DB}?charset=utf8',
                       convert_unicode=True, encoding='utf-8', echo=True)

metadata = MetaData(engine)
Base = declarative_base()


# データベースのテーブル情報のマッピング定義
class TwitterUser(Base):
    __tablename__ = 'twitter_user'

    twitter_user_id = Column(Integer, primary_key=True)
    user_name = Column(String, nullable=False)
    user_screen_name = Column(String, nullable=False)
    profile_image_link = Column(String, nullable=False)
    ins_datetime = Column(DATETIME, default=datetime.now, nullable=False)
    upd_datetime = Column(DATETIME, default=datetime.now, nullable=False)

試したこと

UnicodeEncodeError: 'latin-1' codec can't encode
と出ていたので、下記でテーブルを作成しました。
CREATE DATABASE sqlal_test DEFAULT CHARACTER SET utf8mb4;"
create_engine()に?charset=utf8を足してみました。

補足情報(FW/ツールのバージョンなど)

mysql> show variables like 'character%';
+--------------------------+----------------------------+
| Variable_name            | Value                      |
+--------------------------+----------------------------+
| character_set_client     | utf8                       |
| character_set_connection | utf8                       |
| character_set_database   | utf8mb4                    |
| character_set_filesystem | binary                     |
| character_set_results    | utf8                       |
| character_set_server     | latin1                     |
| character_set_system     | utf8                       |
| character_sets_dir       | /usr/share/mysql/charsets/ |
+--------------------------+----------------------------+
8 rows in set (0.01 sec)

mysql> show create database sqlal_test;
+------------+------------------------------------------------------------------------+
| Database   | Create Database                                                        |
+------------+------------------------------------------------------------------------+
| sqlal_test | CREATE DATABASE `sqlal_test` /*!40100 DEFAULT CHARACTER SET utf8mb4 */ |
+------------+------------------------------------------------------------------------+
1 row in set (0.00 sec)
  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

まだ回答がついていません

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 90.22%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる