无需训练即可使用摘要模型

Question

这里描述的tensorflow文本摘要模型https://github.com/tensorflow/models/tree/master/textsum需要多GPU架构才能进行训练。我反复尝试训练模型，但由于各种原因导致内存异常，机器崩溃。经过训练的摘要模型是否可用，以便在不需要训练的情况下使用摘要模型？摘要模型是使用非免费的Gigaword数据集训练的，如果训练的模型不能从Google获得，这是一个原因吗？

Answer 1

因此，据我所知，还没有人将经过训练的模型放在那里进行引用。我最初在我的macbook pro上也遇到了内存问题，最终我使用了我的游戏笔记本电脑，它的GPU要好得多。

当然，另一种选择是利用AWS并使用类似于他们的g2.2xlarge实例。他们也有自己的P2实例，但我还没有检出。

对于Gigaword数据集，它只是简单地归结为许可。它不是来自LDC的免费许可，而且通常许多从事这项工作的学者通过他们的大学或公司向他们提供了数据集。我没有幸运地找到它，但LDC确实回复了我，并建议他们确实有其他文章数据集，具有大约300美元的价格标签，这对于那些只想学习TF的人来说要合理得多。也就是说，如果您不想购买任何东西，您可以随时编写自己的页面抓取器，并为textsum模型格式化数据。https://github.com/tensorflow/models/pull/379/files

希望这能对你有所帮助。祝好运!