我们知道MongoDB有两种方法来建模关系/实体之间的关系,即embedding和referencing (看这里的区别)。假设我们有一个USER数据库,在mySQL中有两个表,名为user和address。嵌入的MongoDB文档可能如下所示:
{
"_id": 1,
"name": "Ashley Peacock",
"addresses": [
{
"address_line_1": "10 Downing Street",
"address_line_2": "Westminster",
"city": "London",
"postal_code": "SW1A 2AA"
},
{
"address_line_1": "221B Baker Street",
"address_line_2": "Marylebone",
"city": "London",
"postal_code": "NW1 6XE"
}
]
}而在引用的关系中,2个SQL表将在MongoDB中生成2个集合,这些集合可以通过这个札幌使用pymongo进行迁移。
如何使用python将MySQL数据直接迁移为嵌入式文档?
对伪代码和算法性能的深入了解将非常有用。我想到的是通过在views中执行joins来创建MySQL。但在这种情况下,我们将不会在父文档中具有子文档的结构。
发布于 2022-07-06 18:22:09
去正规化
首先,对于规范引用,“嵌入”与“引用”数据的问题称为去正规化。Mongo有一个指南描述什么时候应该去造势。当从SQL迁移到NoSQL时,知道什么时候以及如何去还原是一个非常常见的问题,如果错误的话,可能会抹掉您可能想要的任何性能好处。我假设您已经解决了这个问题,因为您似乎已经开始使用嵌入式方法了。
MySQL到蒙戈
Mongo有一个伟大的Python教程,您可能想要参考。首先,加入您的user和address表。看起来会是这样的:
| _id | name | address_line_1 | address_line_2 | ...
| 1 | Ashley Peacock | 10 Downing Street ... | ...
| 1 | Ashley Peacock | 221B Baker Street ... | ...
| 2 | Bob Jensen | 343 Main Street ... | ...
| 2 | Bob Jensen | 1223 Some Ave ... | ...
...然后遍历行,创建文档并将它们传递给pymongo insert_one。如果在数据库中找不到匹配的文档,则使用upsert=True和insert_one将插入新文档,如果找到现有文档,则会更新现有文档。使用$push将address数据附加到文档中的数组字段addresses。使用此设置,insert_one将根据匹配的_id字段自动处理重复地址和附加地址。有关更多细节,请参见医生们:
from pymongo import MongoClient
client = MongoClient(port=27017)
db = client.my_db
sql_data = [] # should have your SQL table data
# depending on how you got this into python, you will index with a
# field name or a number, e.g. row["id"] or row[0]
for row in sql_data:
address = {
"address_line_1": row["address_line_1"],
"address_line_2": row["address_line_2"],
"city": row["city"],
"postal_code": row["postal_code"],
}
db.users.update_one(
{"_id": row["_id"]},
{"name": row["name"], "$push": {"addresses": address}},
upsert=True,
)https://stackoverflow.com/questions/72844458
复制相似问题