新闻动态
新闻动态
- 有一个***约你出去,你会去吗?
- 《原神》5.7 版本魔神任务第五章•第六幕「你存在的时空」体验如何?
- ***拍大尺度片子时摄影师不会看光吗?
- 大家用的内网穿透工具收费高不高?
- python的包管理器uv可以替代conda吗?
- rust 解决了什么问题?
- 如何关闭 Windows Defender?
- 你生活中做过最自律的一件事是什么?
- ant-design-vue 社区为什么不维护了?
- 有没有一瞬间很心疼一个孩子?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-21 23:35:16 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
- 上一篇: 上一篇 : 你见过最无用的节俭行为是什么?
- 下一篇: 下一篇 : 出国给你最大的感受是什么?
新闻资讯
-
2025-06-25 02:40:15你从别人的旧硬盘里发现了什么有趣的东西?
-
2025-06-25 03:00:15为什么现在知乎有一种j***a运行速度很慢,很吃***的论调?
-
2025-06-25 03:35:15求大神解答,为什么大家都不喜欢用docker?
-
2025-06-25 03:15:15JetBrains会成为下一个Borland吗?
-
2025-06-25 03:05:15不用CDN就没事,用阿里云CDN就被攻击刷流量,阿里云表示证明不了就要用户买单,如何看到这种行为?
-
2025-06-25 02:35:15为什么那么多人用GO?GO语言的优势在哪里?
相关产品