python3针对线程的优化

你好,请问我现在在针对商务接口进行采集数据,用python3开了四线程,threading模块,但是一天的采集量只有70w有更好的方式吗,其他什么都没做处理,想询问一下我对其应该从哪方面着手优化

看看你的性能瓶颈在哪里啊,是网络传输问题还是数据存储耗时,由于python的全局解释器鎖的存在,线程基本没什么优势,用进程吧,或者用爬虫框架试试

我觉得和python开多少个线程没关系
微博的商务接口自带限流, 要么你申请多个账号,要么采用别的方式。