我有几个服务器。每个服务器都有一个机器人程序。机器人都连接到同一个mysql数据库。他们所做的是,连接到DB,查询DB并获取包含username;password行的username;password文件,登录特定网站上的帐户,进行一些自动化操作,在数据库中将完成的帐户设置为Done。
我很难决定如何才能确保所有的机器人都能够从相同的DB投票中提取数据,而不会产生冲突,并且不会留下任何帐户。
我的想法是:
例如:
Bot1 = row 0 to row 999
Bot2 = row 1000 to row 1999
Bot3 = row 2000 to row 2999 ...这可能是一个问题,因为如果我需要规模,我将不得不去预先定义每一个机器人。
bot =>的列使每个bot选择500行,在所有500行上向列bot添加一个预定义的值-- =>只在行WHERE bot = 'pre-defined value'上工作这是可行的,但可能仍然有一些碰撞。除此之外,我的机器人需要处理CSV文件,所以它们实际上不能在数据库上运行。
我关心的是可伸缩性。我希望能够添加尽可能多的服务器,并让它们彼此友好地工作。
有什么建议吗?
我读过关于mysql lock()函数的文章,但是我不认为它在这种情况下会起作用,因为我的机器人获得acconts (.csv文件)的方式。
发布于 2014-03-18 01:04:09
谢谢你的回答。
我所做的是:
我创建了一个PHP,它获取一个具有status =0的随机行,并以XML格式打印它的信息。然后,我使用bot中的GET请求来使用这个PHP脚本获得一个随机行,并将其放在一个变量上。稍后,我使用regex从前面的变量中抓取每一列,并将它们放在各自的变量上。在我的bot在这个帐户上运行完之后,它会在它使用我的PHP捕获的行上设置status =1,这样其他机器人就不会再碰这一行了。通过这种方式,我可以让多台服务器运行时没有遗漏的问题,.CSVs也没有问题,唯一的问题是,我的mysql服务器现在有了更多的负载,但这并不难解决。
https://stackoverflow.com/questions/22381591
复制相似问题