我需要同时将55个.tsv文件中的数据导入MySQL数据库。
我的任务是使用updateOrCreate()方法读取文件并更新数据库中的行。
我的主管配置:
[program:laravel-worker]
process_name=%(program_name)s_%(process_num)02d
command=php /Users/denis/Code/my_project/artisan queue:work --tries=3 --timeout=3600 --daemon
autostart=true
autorestart=true
numprocs=55
stdout_logfile=/Users/denis/Code/my_project/storage/logs/workers.log
stderr_logfile=/Users/denis/Code/my_project/storage/logs/workers_error.log但是当我这样做的时候,所有的作业都会因为错误而失败:
/Users/denis/Code/my_project/vendor/laravel/framework/src/Illuminate/Database/Connection.php:474 : PDOException: SQLSTATE40001:序列化失败:在试图获取锁时发现1213死锁;尝试在PDOException中重新启动事务。
我可以通过尝试-捕捉块来解决这个问题。
$updated = null;
$db_max_retries = 10;
$db_retry_count = 0;
while($updated == null && $db_retry_count < $db_max_retries) {
try {
$updated = AdsPerformance::updateOrCreate(['campaign_id' => $performance_obj['campaign_id'], 'date' => $performance_obj['date'], 'ad_provider' => 'adwords'], $performance_obj);
} catch (\Exception $e) {
sleep(1);
$db_retry_count++;
}
}
$lines_proceded++;..。但是在这种情况下,这个过程需要很长的时间,因为在大约2000条导入行中有大约200条死锁。
也许还有别的办法我可以试试?比如一些MySQL配置什么的?我不相信在MySQL中不存在无死锁的同步更新的解决方案。
发布于 2018-01-09 11:58:20
好的,只要意识到问题是使用复合主键。为了解决这个问题,我创建了唯一的主键列,并且没有更多的死锁。
https://stackoverflow.com/questions/48155440
复制相似问题