如何使用solr的DIH deltaimport导入nutch导出的mysql数据
如何使用solr的DIH deltaimport导入nutch导出的mysql数据
提问于 2013-12-07 08:11:17
我想使用solr的DIH deltaimport来导入nutch导出的mysql数据，但是nutch的mysql数据没有时间戳字段。我尝试从Mysql导入的原因是，我想将抓取数据合并到其他url管理表中。爬网数据中的"modifiedTime“字段为bigInt而不是timeStamp，并且始终为空。我研究了这个问题，我认为索引筛选器插件可以解决这个问题。是对的吗？
nutch 2.1 Solr 3.6
回答 1
Stack Overflow用户
发布于 2013-12-10 19:19:20
在索引之前尝试使用ScriptTransformer来转换每个不一致的数据，我希望这个URL对您有用：http://wiki.apache.org/solr/DataImportHandler#ScriptTransformer
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/20435825
复制相关文章
相似问题
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号