各种蛋疼的爬虫

吐槽/反馈/建议:我的咸鱼心  爱发电-@wdssmq

Z-Blog 应用中心-改版助手

https://app.zblogcn.com/?id=1284

从Z-Blog ASP 1.8到Z-Blog ASP 2.x,再到现在的Z-Blog PHP 1.5.x,各种相应的变动,尝试过各种功能插件最后又放弃……无数曾经能访问的页面地址由此产生,然而也只是曾经,现在它们都返回相同的展现——404;本身也并没有什么不好,只是。。

只是有些爬虫,,,该说贱还是……&¥%¥……&

各种蛋疼的爬虫.png

  1. YisouSpider

  2. Mozilla/5.0 (compatible; DotBot/1.1; http://www.opensiteexplorer.org/dotbot, [email protected])

  3. GuzzleHttp/6.3.3 curl/7.47.0 PHP/7.2.9-1+ubuntu16.04.1+deb.sury.org+1

  4. Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Mobile Safari/537.36

  5. Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

  6. Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_4) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36 AppEngine-Google; (+http://code.google.com/appengine; appid: s~feedly-nikon3)

  7. Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/45.0.2454.93 Safari/537.36

  8. Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.100 Safari/537.36

  9. Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:57.0) Gecko/20100101 Firefox/57.0

  10. Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9.1.1) Gecko/20090715 Firefox/3.5.1

  11. Mozilla/5.0 (compatible; AhrefsBot/5.2; +http://ahrefs.com/robot/)

  12. Mozilla/5.0 (compatible; AhrefsBot/5.2; http://ahrefs.com/robot/)

  13. Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

  14. Mozilla/5.0 (compatible; Exabot/3.0; http://www.exabot.com/go/robot)

  15. Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

  16. Mozilla/5.0 (compatible; SemrushBot/2~bl; +http://www.semrush.com/bot.html)

  17. Mozilla/5.0 (compatible; SemrushBot/2~bl; http://www.semrush.com/bot.html)

  18. Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)

  19. Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)

  20. Mozilla/5.0 (iPad; CPU OS 10_3_3 like Mac OS X) AppleWebKit/603.3.8 (KHTML, like Gecko) FxiOS/13.2b11866 Mobile/14G60 Safari/603.3.8

  21. python-requests/2.18.4

Typora不能绿化运行也是纠结,,线上MarkDown编辑器成本好像也有点大。。


爱发电

本文标题:《各种蛋疼的爬虫》作者:沉冰浮水
原文链接:https://www.wdssmq.com/post/20181012906.html
特别注明外均为原创,转载请注明。

分享到微信

扫描二维码

可在微信查看或分享至朋友圈。

相关文章

过来测试下 回复
沉冰浮水浅笑 - - 回复
发表评论:

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。

网站分类

  • 订阅本站的 RSS 2.0 新闻聚合

搜索

本周旧文

近期观影记录:超级马里奥,死侍与金刚狼。。

搬家也告一段落,虽然搬过来的东西还得归置,新衣柜虽说已经散俩月味儿了,但还是不想放衣服进去。

要不我每年汇总整理一次??碎雨集_沉冰浮水_第1页

所以,不带这条的话,2024 年目前只发了 13 条嘟????

VSCode 内 git 操作卡住的时候没办法主动取消一直是个痛点,一般都是推送或拉取,今天连提交都卡了。。

又一个夏天过去了,所以今年也没买防水鞋套;然后天凉了,为了应对踢被子买了睡袋,不知道 1.2 米会不会略窄。。

《五至七时的克莱奥》,2018 年 6 月加入列表,21 年 11 月底发现 B 站上线了这部,直到前几天才看完,还是分两次看的。。接下来有五项是 2019 年的,都是电影 —— 略长的待办列表。。

有用程序自动抓取自己带 tag 的嘟,然后按年备份后从线上删除;刚发现去年的数据有备份但是没删线上??和本地数据对比后发现线上的还少一条,Why??

本质上,每个人需要的是「让自己面临的问题得到解决」的能力。。

这又涉及到直接能力和间接能力,,缺乏直接能力很正常,视情况可以通过学习来掌握直接能力,或者「请」有直接能力的人来帮自己解决。。

缺乏间接能力的情况是真没救,尤其是对「这是**我自己**面临的问题」这一前提没有明确认知的人。。

其实,在认知意义上,焦虑时我知道这种情绪对应「焦虑」这个文法词汇,此外还有「压抑」「悲伤」等等,然而「抑郁」其实是个我认知体系外的词,虽然经常一些情绪感受我找不到对应的语言词汇来表述,却也只能将其实表述为「找不到对应的语言词汇来表述」的某些感受。。

爱发电支持者

最新留言

友情链接