我被要求使用node js创建一个简单的rest api,并创建一个脚本,通过api调用在数据库中创建10000个元素。我使用Hapi框架创建了服务器。如果我向API发送一个或100个“PUT”请求,它会创建一个新元素,没有问题,但如果我尝试发出1000个或更多请求,它将无法创建所有请求或任何东西。我想知道问题可能是什么,如果我没有正确执行脚本,或者是服务器出了问题。到目前为止,我收到了两个错误:
{ [Error: connect ECONNRESET] code: 'ECONNRESET', errno: 'ECONNRESET', syscall: 'connect' }
and (libuv) kqueue(): Too many open files in system第一个尝试调用api 1000次,第二个尝试调用10000次
服务器的代码如下
var Hapi = require('hapi');
var server = new Hapi.Server();
var joi = require("joi");
var dbOpts = {
"url" : "mongodb://localhost:27017/songsDB",
"settings" : {
"db" : {
"native_parser" : false
}
}
};
server.register({
register: require('hapi-mongodb'),
options: dbOpts
},function (err) {
if (err) {
console.error(err);
throw err;
}
});
server.connection({
host: 'localhost',
port: 8080
});
server.route({
method: 'POST',
path: '/songs',
config: {
handler: function (request, reply) {
var newSong = {
name: request.payload.name,
album: request.payload.album,
artist: request.payload.artist
};
var db = request.server.plugins['hapi-mongodb'].db;
db.collection('songs').insert(newSong, {w:1}, function (err, doc){
if (err){
return reply(Hapi.error.internal('Internal MongoDB error', err));
}else{
reply(doc);
}
});
},
validate:{
payload: {
name: joi.string().required(),
album: joi.string().required(),
artist: joi.string().required()
}
}
}
});
server.start(function () {
console.log('Server running at:', server.info.uri);
});请求的代码如下
var unirest = require('unirest');
for(var i = 1; i<=10000; i++){
unirest.post('http://localhost:8080/songs')
.header('Accept', 'application/json')
.send({ "name": "song"+i, "artist": "artist"+i, "album":"album"+i})
.end(function (response) {
console.log(response.body);
});
}发布于 2015-04-14 08:34:07
如果在OSX下运行,请打开终端,然后尝试使用:
sudo launchctl limit maxfiles 1000000 1000000然后重试。
发布于 2015-04-14 10:29:48
对于“系统中打开的文件太多”,看起来你已经达到了系统的极限。如果您使用的是Linux,您可以执行一个ulimit -a命令来显示所有设置。有一个可能会限制您打开的文件数。打开文件(-n) 1024
发布于 2015-04-14 11:26:38
假设您使用的是Mac或Linux,则需要增加系统允许的最大打开文件数。
如果您将此信息插入终端,它将显示您的设置:
lsof | wc -l您将看到您的“打开文件”设置可能小于您正在尝试使用的数字。
要更改此设置,请使用以下命令:
ulimit -n #####其中#####是某个任意数字(但比您拥有的值更高)。
如果您使用的是Windows计算机,则答案会稍微复杂一些。Windows似乎有一个每个进程的限制,可以修改(尽管听起来并不容易)。请在此处查看更多详细信息:Windows equivalent of ulimit -n
当我运行代码时,前11个帖子会抛出错误。显然,这是因为脚本在mongodb连接激活之前就开始发送它们了。我所做的只是给POSTing添加了一个短暂的超时,让mongodb有机会开始呼吸。当我这样做的时候,它工作得很好。完成时10000条记录。
我所改变的只是:
setTimeout(function () {
for(var i = 1; i<=10000; i++){
unirest.post('http://localhost:8080/songs')
.header('Accept', 'application/json')
.send({ "name": "song"+i, "artist": "artist"+i, "album":"album"+i})
.end(function (response) {
//console.log(response.body);
});
}
}, 5000);https://stackoverflow.com/questions/29617138
复制相似问题