新闻动态
新闻动态
- 以色列是如何从三天前的不可一世要灭了伊朗到今天的哭哭啼啼要“为生存而战”的？
- JetBrains 放弃 AppCode 是否是一个错误决定？
- 什么是稳定币？有人说它是「一场饮鸩止渴的游戏」，你怎么看？
- 程序员从幼稚到成熟的标志是什么？
- 如何评价DuckDB?
- 伊朗这次让以色列打惨了，这个国家还能挺过来吗？
- 什么时候你意识到做技术永无出路？
- 为什么感觉现在的 bilibili 很没意思？
- 中医把脉是***吗？
- 如何自己搭建家庭服务器？
联系我们
邮箱：youweb@qq.com
手机：13988888888
电话：020-88888888
地址：广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件（反爬虫协议）都没有？
作者：admin 发布时间：2025-06-22 12:40:16 点击：
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站，所有查火车信息的流量（哪怕不买票）就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量（卡放票时间反复刷票），但是如果有人只查票不买票，则对12306的流量消耗为0。
不过你要是一天爬它几亿次，就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-22 11:35:17MacOS的哪个设计让你非常恼火？
-
2025-06-22 12:10:172025 年 6 月，Rust 在 GUI 方面有何大的进展? 你最看好哪个框架?
-
2025-06-22 11:20:16飞天茅台散瓶批发价跌破 2000 元，背后什么原因？收藏茅台还能增值吗？
-
2025-06-22 10:40:17如果苹果真的下架了微信的话，会发生什么？
-
2025-06-22 12:25:16程序员 macOS 有哪些必装软件？
-
2025-06-22 11:40:16你身边身材最好的女生是什么样？
相关产品
