新闻动态
新闻动态
- 为什么剪映是剪辑软件鄙视链的最底层?
- NAS噪音太大,大家都吧NAS放置到哪了?
- 为什么微软出的软件都那么巨大?
- Postgres 和 MySQL 应该怎么选?
- 我的世界怎么租一个四个人的服务器?
- 网传《碟中谍 8》亏损可能超 14 亿,是真的吗?这背后的原因是什么?
- 台湾是中国领土,那台湾海峡算是内海,为什么不击沉那些无理通过海峡的军事力量?
- 未来几年,市场对 AI 人才的需求会集中在哪几个方向?
- Golang是不是代替了PHP以前的生态位啊?
- PHP和Node.js哪个更爽?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-21 23:05:11 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-28 08:05:11你在出租房屋发现过什么前租客留下的“宝藏”?
-
2025-06-28 08:40:11互联网研发运维都必用的Nginx到底是什么呢?
-
2025-06-28 09:30:11为什么今年的雷霆会惹众怒?
-
2025-06-28 08:15:10MySQL 面试一般常问问题有哪些?
-
2025-06-28 09:40:11为什么 mac mini 的 m4 版本价格这么低呢?
-
2025-06-28 08:15:10盒马鲜生和山姆会员店哪家比较好?
相关产品
