Opensearchserver数据库爬行

Question

我有一个MySQL表(tbl_test)，包含4列-- id、url、title & description。表中有39409行。我想把这个表索引到Opensearchserver v1.5.3中，我用'web爬虫‘模板创建了一个新的索引，我的数据库爬虫设置如下：

General settings

名称： test_crawl

驱动程序类： com.mysql.jdbc.Driver

JDBC url: jdbc:mysql://localhost/test_db

隔离级别： TRANSACTION_READ_COMMITTED

用户：根

密码：···

语言：英语

缓冲区大小： 100

睡眠(ms): 0

主键： id

唯一键(用于删除)： id

SQL选择： SELECT *来自tbl_test

SQL更新：(空白)

FieldMap settings

SQL Column    Index Field
------------------------------
title         title
description   metaDescription
url           url

当我保存设置并执行爬行进程时，我得到以下信息：-

Name        Execution time    Duration    Status     Info
test_crawl  8:47:44 PM        0:00:00     Complete   0 (0) / 39409 (0)

索引中没有添加任何文档。请让我知道我哪里出了问题。

谢谢。

Answer 1

你需要：

• 清空字段“唯一的键(用于删除)”
• 在表的主键与架构的字段之间添加字段映射