在python + psycopg2中,是否可以使用比特流创建/编写Postgresql大对象,而不是在文件系统上提供指向本地文件的路径?
为什么这个要求
我正在编写一个数据库迁移脚本mysql > postgresql。在源数据库(mysql)中,二进制文件存储在一个longblob字段中。
使用标准方法/方法将大型对象导入postgresql将是过度的,因为它需要输入到本地文件的路径,因此在执行大对象导入之前,我必须将每个二进制文件转储到OS本地文件中。
我试过的
在psycopg2上阅读官方的此链接文档,似乎(但我不确定)是否有可能使用写(Str)方法。它是lo_write函数的包装器。
我一直试图用许多不同的方法来使用这个方法,但没有成功。我想这个离我更近了,但我得到了一个TypeError
cnx_psql.lobject(0, mode='w').write( row['content'] )
TypeError: lobject.write requires a string; got bytearray instead其中row['content']是我以前从mysql类型的longblob字段中选择的数据。
有人知道如何做到这一点吗?
谢谢您提供的任何信息,
如果我漏掉了什么请告诉我。
发布于 2015-12-04 13:41:23
第一个选项:外部数据包装器
也许您可以使用外部数据包装器,例如mysql_fdw?fdw/。
这样,您可以在postgresql数据库中创建一个外部表,然后只需执行以下操作
insert into new_table select * from foreign_table;..。服务器将将所有记录从外域(MySQL)表中提取到本地表中,甚至不会将数据传输到客户端。您可以轻松地将MySQL中的LONGBLOB映射到PostgreSQL中的bytea。bytea类型允许长度高达1GB的值。
要获得更多的感觉,请参阅http://michael.otacoo.com/postgresql-2/postgresql-playing-with-foreign-data-wrappers-1/和包装纸
第二个选项:复制
如果没有用的话,也许你可以用复本。Psycopg2 2的游标有良好的拷贝支持,它接受一个文件对象,它基本上是任何你认为它是的对象,只要它有.read()和.readline()。
第三个选项:修复您得到的错误。,如果您确实知道您正在做什么,并且已经阅读了分叶与旁瓣的区别与限制,并且仍然希望使用游说程序,那么修复错误。写显然需要字符串,但您正在传递字节数组。转换取决于Python版本,请参阅How to convert my bytearray('b\x9e\x18K\x9a') to something like this--> '\x9e\x18K\x9a'<---just str ,not array
编辑:发布得太快了。
https://stackoverflow.com/questions/34025082
复制相似问题