我正在尝试使用熊猫和to_sql将我的爬行数据转储到mysql。
我用两种方式接近1>
{# -*- coding: utf-8 -*-
import numpy as np
import pandas as pd
import MySQLdb
from sqlalchemy import create_engine
import os
from pandas.io import sql
import MySQLdb
columns_list= ['persons','c_number','name']
df = pd.DataFrame()
file_name = "/home/*****/****/data.xlsx"
data = pd.read_excel(file_name)
df = df.append(data)
df.columns = columns_list
engine=create_engine('mysql+mysqldb://root:root@localhost:3306/database_name?charset=utf8&use_unicode=1', echo=False)
con = MySQLdb.connect(host="localhost",user="user_name",passwd="password", db="database_name")
df.to_sql(con=con, name='table_name',if_exists='replace',flavor='mysql')}这里我得到了TypeError: to_sql()获得了关键字参数'name‘错误的多个值
2>
import numpy as np
import pandas as pd
import MySQLdb
from sqlalchemy import create_engine
import os
columns_list= ['persons','c_number','name']
df = pd.DataFrame()
file_name = "data.xlsx"
data = pd.read_excel(file_name)
df = df.append(data)
df_n = pd.DataFrame()
df = df_n.append(df_new)
df = np.array_split(df, 100)
for x in range(len(df_new)):
print x
engine = create_engine('mysql+mysqldb://user_name:password@localhost:3306/database_name?charset=utf8&use_unicode=1', echo=False)
df[x].to_sql(name='table_name', con=engine, if_exists = 'append', index=False)
engine.dispose()通过这种方式,我可以转储数据,但是在所有记录中我都得到了Null字段。
是否有方法使用列名" name“转储数据?
发布于 2017-11-14 05:22:18
我以前也遇到过类似的情况,我不知道发生这种情况的确切原因,但这里有一些对我有帮助的事情。
我和您一样用read_excel读取数据,并用修改过的列名重写了excel文件。
writer = pd.ExcelWriter("data_new.xlsx")
data.to_excel(writer,'sheet1')
writer.save()然后我推到数据库。我希望它也适用于你。
发布于 2017-11-13 13:21:45
我认为您有一个错误,因为您已经在df方法中编写了to_sql方法,请尝试:df.to_sql(con=con, name='table_name',if_exists='replace',flavor='mysql')
https://stackoverflow.com/questions/47264403
复制相似问题