python - 如何从列表中删除重复键

Question

我的csv文件

student,gender,id

jimmy,male,001
joe,male,002
joe,male,002
hugo,female,003

我的代码

with open('student.csv', 'r') as csv_file, open('new_student.csv', 'w', newline='') as new_file:
    csv_reader = csv.reader(csv_file)
    csv_writer = csv.writer(new_file, delimiter=',', quotechar='"',)

    list_1 = list(csv_reader)

    for line in list_1:

        data = [['jimmy', 'male', '001'], ['joe', 'male', '002'],['joe', 'male', '002'],['hugo', 'female', '003']]

        set(data)

set 方法将命中 TypeError: unhashable type: 'list'。如果我尝试像 data= line(dict.fromkeys(data))

一样的错误

Answer 1

可变类型(例如列表)不能用作集合和字典中的键。将内部列表转换为不可变的元组:

>>> set(map(tuple, data))
{('jimmy', 'male', '001'), ('hugo', 'female', '003'), ('joe', 'male', '002')}

---

map(tuple, data) 等同于:

• tuple(d) for d in data 在 Python 3.x 中
• [tuple(d) for d in data] 在 Python 2.x 中——在这里使用 itertools.imap 会更高效