主题:【求助】关于网站大量 Error 001 应对 -- 铁手
共:💬49 🌺143
请考虑是私人为了下载帖子编写的爬虫的情况,这样的话,是否可以通过对请求头部进行分析判断是否是常用浏览器,如ie,ff,opera,safari,chrom等,如不是这几个,可以拒绝链接。这是我之前在编写爬虫的时候所了解到的一些信息。
- 相关回复 上下关系8
😜萨苏文风,流毒匪浅啊~~~~ presario2200 字0 2012-01-01 21:31:11
🙂老铁新年快乐! 1 晨枫 字119 2012-01-01 08:09:23
🙂【整理】中文网站里面很多内容值得参考。 4 江阔云低 字6048 2012-01-01 08:03:01
🙂如果是链接过多的话,
🙂应该和你说的情况无关 1 铁手 字260 2012-01-03 20:13:16
🙂老铁新年好!老铁辛苦了! 1 云中飞 字0 2012-01-01 06:39:12
🙂花!辛苦了,不过难道不是河友多了么? 桥上 字0 2012-01-01 05:12:33
🙂但是我这里, 1 弦音醉舸 字119 2012-01-01 04:31:46