python - 创建并附加到 SQLAlchemy 数据库表中的列表

标签 python sql sqlalchemy

我正在学习 SQLAlchemy,但我被卡住了。 我有一个 SQL 表 (table1) 有两个字段:'name' 和 'other_names'

我有一个包含两列的 excel 文件:

first_name alias   
paul   patrick
john   joe
simon  simone
john   joey
john   jo

我想将 excel 文件读入我的 table1,这样它看起来像这样(即同一行的所有别名都在一行中):

paul    patrick
john    joe,joey,jo
simon   simone

这就是我试图做的想法。我试过的代码(带注释):

for line in open('file.txt', 'r'): #for each line in the excel file
        line = line.strip().split('\t') #split each line with a name and alias
        first_name = line[0] #first name is the name before the tab
        alias = line[1] #alias is the name after the tab
        instance = 
        Session.query(session,tbs['table1'].name).filter_by(name=first_name) #look through the database table, by name field, and see if the first name is there 
        list_instance = [x[0] for x in instance] #make a list of first names already in database table
        if first_name not in list_instance: #if the excel first name is not in the database table
              alias_list = [] #make an empty list
              alias_list.append(alias) #append the alias
              name_obj = lib.get_or_create( #small function to make db object
              session,
              tbs["table1"],
              name = first_name, #add first name to the name field
              other_names = alias_list # add alias list to the other_names field
            )


       elif first_name in list_instance: #elif first name already in db
             alias_list.append(alias) #append the alias to the alias list made above
             name_obj = lib.get_or_create(
             session,
             tbs["table1"],
             name = first_name,
             other_names = alias_list #create object as before, but use updated alias list
    )

问题是我可以让上面的代码没有错误地运行,但输出也不是附加列表,它只是一个看起来像 excel 文件的数据库表;即

name   alias
paul   patrick
john   joe
simon  simone
john   joey
john   jo

有人可以指出我哪里出错了,具体来说,我该如何修改这段代码?如果问题不清楚,请告诉我,我已尝试将其作为一个简单的示例。具体来说,我如何初始化列表并将其添加为 SQLalchemy 数据库表中的字段条目。

更新 1:我已经根据下面的建议更新了我的代码。但是我仍然有问题。这是完整的目标、代码和测试文件: 宗旨:

我在数据库中有一个表(请参阅下面的表中的测试文件)。该表有两个字段,名称(拉丁名称,例如 homo sapiens)和其他名称(通用名称,例如 human、man)。我想更新表中的一个字段(其他名称),而不是:

Rana rugosa human   
Rana rugosa man 
Rana rugosa frog    
Rana rugosa cow

我有:

Rana rugosa human,man,frog,cow

test_data 文件如下所示:

origin_organism        common_name         tested_organism
Rana rugosa            human                -
Rana rugosa            man                  -
Rana rugosa            frog                 homo sapiens
Rana rugosa            cow                  Rana rugosa
Rana rugosa            frog                 Rana rugosa
Rana rugosa            frog                 -
Rana rugosa            frog                 -
Rana rugosa            frog                homo sapiens
-                      -                   -
-                      -                   homo sapiens
-                      -                   -
-                      -                   -
-                      -                   -
-                      -                   -
streptococcus pneumoniae    -              -

代码:

import sys 
from sqlalchemy.orm  import * 
from sqlalchemy  import * 
from dbn.sqlalchemy_module  import lib 
import pd

engine = lib.get_engine(user="user", psw="pwd", db="db", db_host="111.111.111.11")
Base = lib.get_automapped_base(engine)
session = Session(engine)
tbs = lib.get_mapped_classes(Base)
session.rollback()
df = pd.read_excel('test_data.xlsx', sheet_name = 'test2')




for index, row in df.iterrows():  
    origin_latin_name = row['origin_organism'].strip().lower()
    other_names_name = row['common_name'].strip().lower()
    tested_species = row['tested_organism'].strip().lower()


if origin_latin_name not in [None, "None", "", "-"]:
    instance = [x[0] for x in Session.query(session,tbs['species'].name).filter_by(name=origin_latin_name).all()]
    if origin_latin_name not in instance:
        origin_species = lib.get_or_create(
            session,
            tbs["species"],
            name = origin_latin_name,
            other_names = other_names_name
        )

    elif origin_latin_name in instance:
        other_names_query = Session.query(session,tbs['species'].other_names).filter_by(name=origin_latin_name)
        other_names_query_list = [x for x in other_names_query]
        original_list2 = list(set([y for y in x[0].split(',') for x in other_names_query_list]))
        if other_names_name not in original_list2:
            original_list2.append(other_names_name)
            new_list = ','.join(original_list2)
            new_names = {'other_names':','.join(original_list2)}

        origin_species = lib.get_or_create(
            session,
            tbs["species"],
            name = origin_latin_name,
            other_names = new_list
        )

elif 语句中的部分不起作用。我遇到了两个问题:

(1) 我得到的最近错误: NameError: 名称 'new_list' 未定义

(2) 我得到的另一个错误是我还有另一个表

map1 = lib.get_or_create(
    session,
    tbs["map1"],
    age_id_id = age,
    name_id_id = origin_species.id
    )

...它说无法找到 origin_species,但我认为这与 elif 语句有关,即 origin_species 对象未正确更新。

如果有人能提供帮助,我将不胜感激。

最佳答案

简单的错误。你没有给它一个 list 。我不确定为什么它们最终会出现在不同的行中,但是,我会更改以下内容,因为目前我看不到您将名称拆分到列表中的位置,我所看到的只是您将字符串分配到列表中使用追加。

alias_list = alias.split(',')

也可以是:

alias_list = line[1].split(',')

输出:

alias_list:    ['Name1','Name2','Name3']

当前您的代码输出:

alias_list = ['Name1,Name2,Name3']

虽然从技术上讲它是一个按数据类型分类的列表,但就您想要使用它的方式而言,它是一个毫无值(value)的列表。这是因为 alias_list[0] 会返回整个字符串,而不是 'Name1'

警告语:

您的代码不必要地创建了一个列表。您不需要数据库中的列表,您可以通过使用读取 excel 文件时评估的字符串轻松实现您的目标。

恕我直言,你应该做的是将名称字符串存储为一个完整的字符串,然后如果你需要查询某人的别名,那么你可以在另一边拆分字符串,如果这有意义的话?

关于python - 创建并附加到 SQLAlchemy 数据库表中的列表,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/52391072/

相关文章:

python - 如何在嵌套列表中查找给定元素?

python - sqlalchemy 没有设置时间戳默认值

python - 如何在Python中使用OpenCV在检测部分绘制矩形?

python - 使用 PyPDF2 去除 PDF 上的水印

python - 使用 Python open().write() 将文件写入磁盘是否确保数据可用于其他进程?

python - 如何编写查询以从关系中获取 sqlalchemy 对象?

python - SQLAlchemy:具有关系的混合表达式

mysql - 使用 Mysql 查询创建汇总报告

带有 WHERE CLAUSE 的 TIMESTAMPDIFF 函数的 MySQL AVG

php - 如何防止此查询两次打印相同的结果?