新闻动态
新闻动态
- NAS噪音太大,大家都吧NAS放置到哪了?
- 如何评价董宇辉:“飞机大炮对你生活影响其实并不大,小家电才是真正提升每个人生活质量”这个观点?
- PHP现在真的已经过时了吗?
- 冬天也要穿胸罩吗?
- 在办公室用机械键盘是什么心里?
- 央企的信创,是否有必要把 spring 替换成国产的 solon ?
- 为什么欧美影视喜欢露点?
- 程序员需要用到内置kvm功能的显示器吗?或者是外置的kvm切换器吗?
- 搞了NAS之后去哪里下载4K,8K的电影?
- 电视剧《天道》的作者到底懂不懂音响呢?它暗喻了哪些音响品牌呢?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 12:40:16 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-26 09:05:18鱼缸的硝酸盐含量为多少比较合适?
-
2025-06-26 07:40:16鸿蒙电脑应用开发和鸿蒙手机是一样的吗?
-
2025-06-26 09:20:18非常非常瘦是什么体验?
-
2025-06-26 07:35:15女生穿小妈(后妈)裙是种什么体验?
-
2025-06-26 09:00:19个子高是种怎样的体验?
-
2025-06-26 07:45:15为何中文互联网相对英文互联网的内容质量较低?
相关产品