从YCSB加载Redis数据的错误

Question

我试图通过ycsb加载数据命令在redis服务器中加载数据。它可以正常工作，有100万条记录，但是当我试图加载更多的数据(比如2.5亿条记录)时，它会运行一段时间，然后在加载过程中出现错误，给出以下异常。有人能指出哪里出了问题吗？

我收到以下错误：

redis.clients.jedis.exceptions.JedisConnectionException: java.net.SocketTimeoutException:阅读redis.clients.jedis.Protocol.process(Protocol.java:74) at redis.clients.jedis.Protocol.read(Protocol.java:122) at redis.clients.jedis.Connection.getIntegerReply(Connection.java:178) at redis.clients.jedis.Jedis.zadd(Jedis.java:1448) at com.yahoo.ycsb.db.RedisClient.insert(( com.yahoo.ycsb.DBWrapper.insert(DBWrapper.java:148) at com.yahoo.ycsb.workloads.CoreWorkload.doInsert(CoreWorkload.java:461) at com.yahoo.ycsb.ClientThread.run(Client.java:269) )

谢谢

Answer 1

听起来问题就像一个超时。考虑到您定义的巨大工作量，这并不奇怪。

您可以尝试修改YCSB连接到Redis的方式，以添加比默认超时更长的超时时间。

在com.yahoo.ycsb.db.RedisClient中，替换

jedis = new Jedis(host, port);

使用

jedis = new Jedis(host, port, TIMEOUT);

超时是一个整数。Jedis中的默认值是2000，我假设这意味着2秒。

Answer 2

有redis.timeout参数，尝试通过，例如，-p redis.timeout=10000