假设我有1000万个客户姓名,每个客户姓名都与一个或多个地址相关联,我希望将数据放入SQL数据库中。
我创建了一个客户表和一个地址表。Customer表包含一个自动增量主键。每个地址条目都使用一个外键指向Customer表。
现在,对于1000万条记录中的每一条,我都必须创建一条客户记录,将其插入到Customer表中,然后再次检索它,以获得分配给它的自动增量主键,以便在新的地址条目中使用。两千万次往返。呃。
除了求助于GUID之外,还有更好的方法吗?
(我碰巧在SQLAlchemy中使用SQLite )
发布于 2012-07-28 01:54:55
如果您将您的客户和地址对象配置为具有它们之间的关系,则可以简单地插入它们,而不必担心ID。SA知道它们是相关的,并为您计算出FK细节。
细心的读者会注意到SA对象关系教程addresses this use case directly by creating a User object with a related Address。我认识到OP的实际问题更加复杂,但ORM教程似乎是一个很好的起点。SA是一个摇滚乐的工具。
请注意,您仍然需要遍历10M原始数据对象,这可能意味着数据库的批量加载工具可能是更有效的解决方案,但这是一种不同的方法。
发布于 2012-07-30 13:44:29
这不是使用SA,而是一个示例来说明如何在Sqlite3中的两个表中插入行,而不是进行往返。
创建一个连接两个表的视图,然后编写一个instead of触发器来处理插入操作,然后插入到视图中。如果你想更进一步,修改SA以插入到你的视图中应该不难。
create table customer (id integer primary key autoincrement, name text not null);
create table address (id integer primary key autoincrement, customer_id integer references customer not null, street text);
create view customer_view as
select customer.id as customer_id, customer.name, address.id as address_id, address.street
from customer
inner join address on customer.id = address.id;
create trigger customer_view_insert_trg
instead of insert on customer_view begin
insert into customer (name) values (new.name);
insert into address (customer_id, street) values ((select last_insert_rowid()), new.street);
end;
insert into customer_view (name, street) values ('Joe', 'Main Street');
insert into customer_view (name, street) values ('Bill', 'Water Street');sqlite> select * from customer;
1|Joe
2|Bill
sqlite> select * from address;
1|1|Main Street
2|2|Water Street发布于 2012-07-27 20:57:09
我认为这应该可以做到:http://www.sqlite.org/c3ref/last_insert_rowid.html
此例程在第一个参数中从数据库连接返回最近一次成功插入数据库的行in。
和
如果表具有整型主键类型的列,则该列是行is的另一个别名。
尽管这是一个C/C++接口函数,但该函数也作为SQLite核心函数存在(实际上,它只是C/C++函数的包装器。http://www.sqlite.org/lang_corefunc.html)
https://stackoverflow.com/questions/11688190
复制相似问题