社区所有版块导航
Python
python开源   Django   Python   DjangoApp   pycharm  
DATA
docker   Elasticsearch  
aigc
aigc   chatgpt  
WEB开发
linux   MongoDB   Redis   DATABASE   NGINX   其他Web框架   web工具   zookeeper   tornado   NoSql   Bootstrap   js   peewee   Git   bottle   IE   MQ   Jquery  
机器学习
机器学习算法  
Python88.com
反馈   公告   社区推广  
产品
短视频  
印度
印度  
Py学习  »  Sasha Pachev  »  全部回复
回复总数  1
4 年前
回复了 Sasha Pachev 创建的主题 » MySQL C API-批量插入性能问题

乍一看,您的代码似乎没有任何问题会导致这样的性能问题。有了这么多的数据,在正常的硬件/操作系统行为下,我希望代码能在几秒钟内运行。我建议检查两个可能的痛点:

  1. 生成要插入的数据的速度有多快?(将代码的插入部分替换为NOOP)
  2. 如果在步骤1中确定数据生成足够快,则问题在于数据库的写性能。

无论如何,很可能必须在数据库服务器级别进行故障排除-运行SHOW PROCESSLIST启动,然后在使用INNODB时显示ENGINE INNODB STATUS,如果所有其他操作都失败,则使用gdb获取mysqld进程的stacktrace快照。

可能的罪魁祸首是服务器的I/O子系统出现了可怕的错误,或者启用了某种形式的同步复制,但是如果没有服务器级的诊断,很难确定。