首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >MySQL到MongoDB数据迁移

问MySQL到MongoDB数据迁移
EN

Stack Overflow用户
提问于 2022-07-03 06:48:55
回答 1查看 330关注 0票数 6

我们知道MongoDB有两种方法来建模关系/实体之间的关系,即embedding和referencing (看这里的区别)。假设我们有一个USER数据库,在mySQL中有两个表,名为user和address。嵌入的MongoDB文档可能如下所示:

代码语言:javascript
复制
{
  "_id": 1,
  "name": "Ashley Peacock",
  "addresses": [
    {
      "address_line_1": "10 Downing Street",
      "address_line_2": "Westminster",
      "city": "London",
      "postal_code": "SW1A 2AA"
    },
    {
      "address_line_1": "221B Baker Street",
      "address_line_2": "Marylebone",
      "city": "London",
      "postal_code": "NW1 6XE"
    }
  ]
}

而在引用的关系中,2个SQL表将在MongoDB中生成2个集合,这些集合可以通过这个札幌使用pymongo进行迁移。

如何使用python将MySQL数据直接迁移为嵌入式文档?

对伪代码和算法性能的深入了解将非常有用。我想到的是通过在views中执行joins来创建MySQL。但在这种情况下,我们将不会在父文档中具有子文档的结构。

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2022-07-06 18:22:09

去正规化

首先,对于规范引用,“嵌入”与“引用”数据的问题称为去正规化。Mongo有一个指南描述什么时候应该去造势。当从SQL迁移到NoSQL时,知道什么时候以及如何去还原是一个非常常见的问题,如果错误的话,可能会抹掉您可能想要的任何性能好处。我假设您已经解决了这个问题,因为您似乎已经开始使用嵌入式方法了。

MySQL到蒙戈

Mongo有一个伟大的Python教程,您可能想要参考。首先,加入您的user和address表。看起来会是这样的:

代码语言:javascript
复制
| _id    | name           | address_line_1        | address_line_2 | ... 
| 1      | Ashley Peacock | 10 Downing Street ... | ...
| 1      | Ashley Peacock | 221B Baker Street ... | ...
| 2      | Bob Jensen     | 343 Main Street ...   | ...
| 2      | Bob Jensen     | 1223 Some Ave ...     | ...
...

然后遍历行,创建文档并将它们传递给pymongo insert_one。如果在数据库中找不到匹配的文档,则使用upsert=True和insert_one将插入新文档,如果找到现有文档,则会更新现有文档。使用$push将address数据附加到文档中的数组字段addresses。使用此设置,insert_one将根据匹配的_id字段自动处理重复地址和附加地址。有关更多细节,请参见医生们:

代码语言:javascript
复制
from pymongo import MongoClient

client = MongoClient(port=27017)
db = client.my_db

sql_data = []  # should have your SQL table data
# depending on how you got this into python, you will index with a  
# field name or a number, e.g. row["id"] or row[0] 

for row in sql_data:
    address = {
        "address_line_1": row["address_line_1"],
        "address_line_2": row["address_line_2"],
        "city": row["city"],
        "postal_code": row["postal_code"],
    }
    db.users.update_one(
        {"_id": row["_id"]},
        {"name": row["name"], "$push": {"addresses": address}},
        upsert=True,
    )
票数 5
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/72844458

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档