首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >出乎意料的大领域文件大小

问出乎意料的大领域文件大小
EN

Stack Overflow用户
提问于 2017-09-14 20:59:49
回答 3查看 2.5K关注 0票数 5

这个问题是关于使用两种不同的方法将对象插入到一个领域中。我注意到第一种方法要快得多,但是与第二种方法相比,结果是巨大的。这两种方法之间的差异是将写事务移出for循环的外部。

代码语言:javascript
复制
// Create realm file
let realm = try! Realm(fileURL: banco_url!)

当我添加这样的对象时,领域文件将增长到75.5MB:

代码语言:javascript
复制
try! realm.write {
    for i in 1...40000 {
        let new_realm_obj = realm_obj(value: ["id" : incrementID(),
                                              "a": "123",
                                              "b": 12.12,
                                              "c": 66,
                                              "d": 13.13,
                                              "e": 0.6,
                                              "f": "01100110",
                                              "g": DateTime,
                                              "h": 3])

        realm.add(new_realm_obj)
        print(" \(i) Added")
    }
}

当我添加像这样的对象时,领域文件只增长到5.5MB:

代码语言:javascript
复制
for i in 1...40000 {
    let new_realm_obj = realm_obj(value: ["id" : incrementID(),
                                          "a": "123",
                                          "b": 12.12,
                                          "c": 66,
                                          "d": 13.13,
                                          "e": 0.6,
                                          "f": "01100110",
                                          "g": DateTime,
                                          "h": 3])
    try! realm.write {
        realm.add(new_realm_obj)
        print(" \(i) Added")
    }
}

我要添加到领域文件的类

代码语言:javascript
复制
class realm_obj: Object {
    dynamic var id = Int()
    dynamic var a = ""
    dynamic var b = 0.0
    dynamic var c = Int8()
    dynamic var d = 0.0
    dynamic var e = 0.0
    dynamic var f = ""
    dynamic var g = Date()
    dynamic var h = Int8()
}

自动增量函数

代码语言:javascript
复制
func incrementID() -> Int {
    let realm = try! Realm(fileURL: banco_url!)
    return (realm.objects(realm_obj.self).max(ofProperty: "id") as Int? ?? 0) + 1
}

有更好的或正确的方法来做这件事吗?为什么在这些情况下我会得到如此不同的文件大小?

EN

回答 3

Stack Overflow用户

回答已采纳

发布于 2017-09-14 22:16:15

当在单个事务中添加所有对象时,文件大小很大,这是由于王国的事务日志子系统与领域的大blobs内存分配算法之间发生了不幸的交互。王国的内存布局算法要求文件大小至少是存储在领域文件中的最大单个blob大小的8倍。事务日志条目,总结了在单个事务中所做的修改,作为blobs存储在领域文件中。

当您在一个事务中添加40,000个对象时,您将得到一个大小约为5MB的事务日志条目。这意味着文件必须至少有40 it的大小才能存储它。(我不太确定它怎么又变成了差不多两倍的尺寸。它可能是blob的大小在沿着…线的某个地方被舍入为2的幂)

当您在40000个事务中添加一个对象时,您仍然只有一个事务日志条目--这一次它的大小是大约100个字节。这是因为当领域提交事务时,它首先尝试在为新条目分配空间之前收回未使用的事务日志条目。由于领域文件在其他地方没有打开,所以可以在执行每个新提交时恢复前一个条目。

领域/领域-核心#2343跟踪改进了领域存储事务日志条目的方式,以避免所看到的大量过度分配。

现在,我的建议是将这两种方法的区别分开,并在每个写事务中添加一组对象。这将通过增加提交次数来减少一些性能,但通过减少您创建的最大事务日志条目的大小来减少内存布局算法的影响。通过快速测试,每2000个对象提交一次,文件大小约为4MB,比在单独的写事务中添加每个对象要快得多。

票数 9
EN

Stack Overflow用户

发布于 2017-09-14 21:12:12

在大多数情况下,您应该尽量减少写事务的数量。写事务有很大的开销,因此,如果您要为每个要添加到领域的对象启动一个新的写事务,那么您的代码将比使用单个写事务添加所有对象时慢得多。

根据我的经验,向领域添加几个元素的最佳方法是创建元素,将它们添加到数组中,然后使用单个写事务将数组作为一个整体添加到领域中。

这就是你应该做的:

代码语言:javascript
复制
var objects = [realmObj]()
for i in 1...40000{
    let newRealmObj = realmObj(value: ["id" : incrementID(), "a": "123","b": 12.12,"c": 66,"d": 13.13,"e": 0.6,"f": "01100110","g": DateTime, "h": 3])
    objects.append(newRealmObj)
}
try! realm.write {
    realm.add(objects)
}

至于大小问题,请参阅领域文档的限制-文件大小部分。我不能百分之百地确定问题的原因,但我要说,这个问题是由在写事务中编写代码引起的,这些代码不需要在写事务中发生,也不应该发生在写事务中。因此,王国创建了许多中间版本的对象,而且由于释放预留存储容量是一项非常昂贵的操作,所以在检查文件大小时不会发生这种情况。

请记住,对象的创建不需要在写事务中发生。您只需要创建一个写事务来修改领域中的持久化数据(包括向领域添加新对象、删除持久化对象和直接修改持久化对象)。

票数 1
EN

Stack Overflow用户

发布于 2017-09-15 12:40:07

谢谢大家。我找到了一种优化的方法来使用你的技巧来完成任务。我只是分批完成了.write,而不是在一个操作中发送所有内容。以下是要比较的一些数据:

批处理大小(对象)-文件大小(mb)

10.000 = 23.1mb

5.000 = 11.5mb

2.500 = 5.8mb

1.250 =4.2毫巴

625 = 3.7mb

300 = 3.7mb

100 =3.1 100

50 =3.1 50

10 = 3.4mb

5=3.1

所以,在我看来,1000批次是这种情况下最好的大小/速度。

下面是我在这个测试中使用的代码。唯一改变的是1...XXX的介入。

代码语言:javascript
复制
    let realm = try! Realm(fileURL: banco_url!)

    var objects = [realm_obj]()
    var ids = incrementID()

    while (ids < 40000) {

        for i in 1...5{

            let new_realm_obj = realm_obj(value: ["id" : ids,
                                                "a": "123",
                                                "b": 12.12,
                                                "c": 66,
                                                "d": 13.13,
                                                "e": 0.6,
                                                "f": "01100110",
                                                "g": someDateTime,
                                                "h": 3])
            objects.append(new_realm_obj)
            ids += 1 
        }

        try! realm.write {
            realm.add(objects)
        }
    }
票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/46228149

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档