12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?

你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
在网杀局的第一天,警上首位玩家发言时,JY在旁做笔记,抄录玩...
老规矩,我先说我的答案: 如果充电宝的来龙去脉的真实的话,那...
最简单的 1.花10元在闲鱼买个夸克1年会员 2.花1-3元...
上次爬华山遇上一对夫妻,女的30出头,男的明显大些,女士穿白...
我就想要个这种UI效果的AR眼镜。 。 。 其实开盒功能没...
离谱,真是离谱。 想不到10年前抢小米手机,10年后抢小米汽...
你知道么,北纬1度的新加坡,6月份的平均温度为26-30度 ...
上个月去爬太室山,前面就有个瑜伽裤女生,一个人,本来我按我的...
我爸是高级钳工,可以纯手工弯外径1.5壁厚0.2mm的不锈钢...
我搜到的日本AV基本都是免费的 ***,分类,有剧情,时长都...