获取链接的数据以后，加个判断如果需要登陆 ，则使用php的curl函数来模拟post不需要登陆则直接采集；很多网站都针对采集行为作了各种干扰措施，传统的采集工具都是依赖分析网页源码，利用正则表达式技术从网页源码中抽取特殊内容而熊猫则完全不同，利用的是仿浏览器解析技术，因此这些反采集的干扰措施对熊猫基...