新闻动态
新闻动态
- 和异性最疯狂有多疯狂?
- 2025年6月,到底买油车还是电车?
- 男朋友年薪八十万 我可以考虑婚后做全职太太吗?
- 男的真的会把所有衣服从上到下都扔洗衣机吗?
- 如何评价茅台暂停京东供货?
- JetBrains 的核心技术是什么?
- 如何证明散片 CPU 比盒装 CPU 差?
- 男朋友说我穿衣服太开放,难道好身材不应该显示出来吗?
- 《原神》5.7 版本魔神任务第五章•第六幕「你存在的时空」体验如何?
- 宁波东方理工大学学费每人每学年 9.6 万,为什么会这么贵?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 02:15:10 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-26 19:50:12请问27寸4K显示器哪个好呀?
-
2025-06-26 18:25:12为什么web worker可以在前端开多线程,解决单线程卡死页面的问题,但是没有得到广泛使用?
-
2025-06-26 19:45:11延边大学毕业典礼上,食堂阿姨的发言为什么能让许多同学落泪?
-
2025-06-26 19:50:12如何评价 6 月 26 号发布的小米AI眼镜?
-
2025-06-26 19:20:12为什么感觉wps的用户越来越多,office没人用了?
-
2025-06-26 19:15:11有哪些是你用上了mac才知道的事?
相关产品
