python - “charmap”编解码器无法在位置 0 : character maps to <undefined> MariaDB and SQLAlchemy 处对字符 '\u010c' 进行编码

Question

我正在尝试使用 SQLAlchemy 将数据插入到 MariaDB 数据库中。我正在解析 XML 文件以获取需要插入的数据。我读取数据没有问题。关于此错误的许多问题，例如此 python 3.2 UnicodeEncodeError: 'charmap' codec can't encode character '\u2013' in position 9629: character maps to <undefined>指从文件中读取数据。但是，我在这一步遇到错误，

con_string = db_driver + '://' + db_user + ':' + db_password + '@' + db_host + ':' + db_port + '/' + db_name
engine = sqlalchemy.create_engine(con_string, pool_pre_ping=True)

meta_data = sqlalchemy.MetaData(engine)
table = sqlalchemy.Table('table', meta_data, autoload=True, autoload_with=engine)
table.insert().execute(data)

data 是一个字典。它包含通过解析映射到表列的 XML 文件获得的值。

可能是什么原因？

Answer 1

为了支持全范围的 Unicode 字符，我们需要将 ?charset=utf8mb4 添加到连接 URL 的末尾，如

中所述

https://docs.sqlalchemy.org/en/14/dialects/mysql.html#charset-selection

例如，

e = create_engine(
    "mysql+pymysql://scott:tiger@localhost/test?charset=utf8mb4")