import pandas as pd
write_clo = ['第一列','第二列','第三列','第四列']
df = pd.DataFrame(columns=(write_clo))
df.to_csv(fileName,line_terminator="\n",index=False,mode='a',encoding='utf8')
当然,爬虫时一行行的写入时,‘第一行’,‘第二行’等等这些字样就换成变量即可。
for循环下以此的写入即可,当大数据量下,pandas还是比csv写入更好一些的,速度方面
还有后期的数据处理也更加方便。其他格式参考上文即可
效果图如下: