python reader，python讀大csv文件慢的問題,csv reader是個坑

目標：讀取一個大的csv，8GB，16個列。對每一行驗證name列是否在某個list中，獲得對應id列的值。

坑：csv reader 巨慢

使用

with open(...) as f:for line in f:process(line) # <do something with line>

讀10000行需要20s

使用

with open("test.csv",newline = '')  as f:reader = csv.reader(f)for row in reader: 

python reader。讀10000行需要2min