新闻动态
新闻动态
- Golang与Rust哪个语言会是今后的主流?
- 一枚东风41能直接干掉一艘航母吗?
- 敏感时刻,美国「末日飞机」出现异常动向,出现在华盛顿附近,什么是「末日飞机」?这代表着什么?
- 为什么一部分 Go 布道师的博客不更新了?
- 中国为什么不直接印大量的人民币去买美国的东西?
- 科学怎么解释中医把脉孕检,并且知道怀的男孩女孩?
- 现在个人博客不能备案了吗?
- 造一艘航母有多难?
- Golang 中为什么没有注解?
- 穿瑜伽裤爬山的女生会不会害羞?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 14:20:15 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-21 13:00:17蜂鸟音乐指控邓紫棋侵权,要求 48 小时内下架重录歌曲,邓紫棋回应「不会下架」,这一指控合理吗?
-
2025-06-21 11:55:18身份与访问管理解决方案在中国市场的发展前景?
-
2025-06-21 12:40:16一个练过功夫的姑娘能打过一个没练过的男人吗?
-
2025-06-21 11:55:18曼德拉是南非的罪人吗?
-
2025-06-21 12:00:17美国军队只有司令,不设政委,它们的文官治军咋实现的?
-
2025-06-21 12:35:18脸与身材不符是种怎样的体验?
相关产品