采集大量数据量 如何提高采集速度
以下给出了此问题的 几点解决方案,可根据个人情况稍作调整采集方案:
1、调整采集线程 和时间间隔,调整方法详见 http://faq.locoy.com/q-934.html
2、使用高级数据库,比如sqlite mysql 等,尽量避免使用access。
本地保存数据库修改方法 详见 http://faq.locoy.com/q-691.html
3、提高你的采集电脑的配置 和带宽
4、多个采集器 同时采集,提高采集效率
5、采集规则尽量最精简化