爬虫多线程遇到的一些问题

大概需要860多个url 每次快运行完就卡顿住了 不知道哪里出了问题 有的时候程序又可以执行完毕
请教大神们

1、快运行完时,看看CPU、内存、磁盘的使用情况,
2、用各种日志记录运行情况,看看能否分析出瓶颈。