新闻动态
新闻动态
- 有一个乌克兰的朋友问我,中国人凭什么能享受和平,我该怎么说?
- 不喜欢老婆找健身房男教练私教,是我太狭隘了吗?
- 评价一下Proxmox VE与ESXi的优劣?
- 颈椎生理曲度变直如何恢复?
- 家里想搞一个服务器,怎么才不违规?
- 猫那么爱干净,却为什么不喜欢洗澡?
- 男医生在给年轻靓丽的女性检查时会是什么心态?
- 鱼缸有哪些寿命比较长的草推荐呢?
- 你见过身边身材最好的女生是什么样子的?
- 如何看待多地开展查摆年轻干部玩心重、混日子、说话随意、口大气粗等问题的行动?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 13:15:16 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-20 11:50:19你见过的最舒适的办公环境是什么?
-
2025-06-20 11:45:18怎么才能有尤雨溪一半强,该怎么学习?
-
2025-06-20 11:50:19中办、国办发文,拟新建改扩建 1000 所以上优质普高,将带来哪些影响?可能面临哪些挑战?
-
2025-06-20 12:30:17为什么有的女生喜欢穿紧身牛仔裤?
-
2025-06-20 12:35:18Mac mini M4,有必要升级24G内存吗?
-
2025-06-20 12:20:17网络小白如何建立一个网站,供别人下载文件(主要是PDF和MP3)?
相关产品