新闻动态
新闻动态
- 怎么把多个pdf合并在一起?
- 我国至今未破的大案要案有哪些?
- 大佬能不能指出一下唱歌中的毛病?
- 有一双超级大长腿是什么感觉?
- 明明回国的幸福度大于在国外,为什么选择留下来呢?
- Go语言对象的内存布局是怎样的?
- 我的世界怎么租一个四个人的服务器?
- Akid(王懿)怎么会饿死的?
- 内网设备,USB口被禁用,只能连接鼠标和键盘,有什么办法可以实现数据拷入?
- 如何评价neovim 0.11?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 03:30:10 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
- 上一篇: 上一篇 : 如何评价广西玉林的云天宫?
- 下一篇: 下一篇 : 你见过最无用的节俭行为是什么?
新闻资讯
-
2025-06-29 12:00:12为什么不能做出1T的内存条?
-
2025-06-29 11:55:11内网设备,USB口被禁用,只能连接鼠标和键盘,有什么办法可以实现数据拷入?
-
2025-06-29 11:45:12买到烂尾楼到底该有多绝望?
-
2025-06-29 11:50:12骑车后腰疼直不起来做什么运动比较好呢?
-
2025-06-29 11:35:11如何看待网上说的:凡是有阿里、华为经历的一律不要?
-
2025-06-29 11:40:12你身边身材最好的女生是什么样?
相关产品
