python - 如何使用 executemany 将 Python 中的字典列表插入 MySQL

标签 python mysql mysql-python

我目前正在使用 MySQL 和 Python 从网络上抓取数据。具体来说,我正在抓取表数据并将其插入到我的数据库中。我目前的解决方案有效,但我觉得它效率极低,如果我不重写代码,很可能会锁定我的数据库。这是我目前使用的(部分代码):

itemBank = []
for row in rows:
    itemBank.append((tempRow2,tempRow1,tempRow3,tempRow4)) #append data

#itemBank List of dictionaries representing data from each 
row of the table. i.e. 
('Item_Name':"Tomatoes",'Item_Price':"10",'Item_In_Stock':"10",'Item_Max':"30")

for item in itemBank:
    tempDict1 = item[0]
    tempDict2 = item[1]
    tempDict3 = item[2]
    tempDict4 = item[3]

    q = """ INSERT IGNORE INTO
         TABLE1   
        (
           Item_Name,
           Item_Price,
           Item_In_Stock,
           Item_Max,
           Observation_Date
         ) VALUES (
           "{0}",
           "{1}",
           "{2}",
           "{3}",
           "{4}"
           )
        """.format(tempDict1['Item_Name'],tempDict2['Item_Price'],tempDict3['Item_In_Stock'],
                   tempDict4['Item_Max'],getTimeExtra)

    try:
        x.execute(q)
        conn.commit()
    except:
        conn.rollback()

执行表格的每一行都很麻烦。我尝试过使用 executemany,但我似乎无法弄清楚如何正确访问字典的值。 那么,鉴于我的数据结构,我如何在此处使用 executemany 插入数据库?

最佳答案

itemBank = [] 
for row in rows:
    itemBank.append((
        tempRow2['Item_Name'],
        tempRow1['Item_Price'],
        tempRow3['Item_In_Stock'],
        tempRow4['Item_Max'], 
        getTimeExtra
        )) #append data


q = """ insert ignore into TABLE1 (
        Item_Name, Item_Price, Item_In_Stock, Item_Max, Observation_Date ) 
        values (%s,%s,%s,%s,%s)           
    """

try:
    x.executemany(q, itemBank)
    conn.commit()
except:
    conn.rollback()

希望对你有帮助

关于python - 如何使用 executemany 将 Python 中的字典列表插入 MySQL,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/18244565/

相关文章:

python - 删除图像中的直线

mysql - 从字段的 mysql 数据库查询中计算现有数组的 Perl 脚本/MySQL 查询

python - 随机生成 MySQL 行时确保字段唯一

python - session 对象上的 Flask Session(文件系统)UnPicklingError,是否有大小限制或者我是否出现损坏?

python - 如何识别字典中的匹配值并仅使用这些键创建一个新字符串?

python - 使用for循环python在mysql表中插入值

java - Hibernate:仅从一张表中选择所有内容,而不是从 3 个连接表中选择所有内容

php - 在mysql查询中转换字符集

python - 在 Ubuntu 18.04 中使用 MySQLdb 或连接器连接 Python 和 MySQL

python - 将变量(表名,数据)传递给python mysql查询