干货

观点

案例

资讯

我们

写在前面

爬虫，其起源于搜索引擎。像百度、搜狗这样的搜索引擎，凭借着庞大的爬虫集群，每天会抓取互联网上数以百亿计的网页。

技术发展后，现在的爬虫和以往不一样了。它在互联网金融、电商、社交等领域被广泛应用。在机票领域，爬虫能够抓取机票价格，当发现超值机票时，还能仿造真人用户把它抢先预订。

机票爬虫的威力非常大，令人惊叹。多数订票网站中，真实用户所产生的浏览量还不到 10%，而其 90%的浏览量是由爬虫产生的。

航空公司放出的低价机票，普通用户很难买到。业内人士估计，有 80%以上的低价机票被票务公司的爬虫给抢走了。

专家：业内网站的流量九成以上是爬虫

其他行业的互联网公司，在吹嘘自身价值时，通常会说自己的 PV 是多少，也会说自己的 UV 是多少。

在机票这个行业领域里，没人敢如此言说。因为大家都清楚，真实的流量仅仅占百分之几。

携程的反爬虫专家在技术分享里进行举例：有一个网站的某个页面，其每分钟的浏览量为 1.2 万。在这当中，真实用户仅有 500 个。而爬虫所产生的流量比例达到了 95.8%。

多个内部人士接受黑奇士的采访时表示，即便处于爬虫的淡季，虚假流量在订票网站中仍占据 50%，而在高峰期，这一比例更是在 90%以上。

这些爬虫流量只是进行访问，会消耗大量的机器资源，然而却不会产生任何消费，这是每个公司都最为痛恨的。不过，由于担心会误伤到真实用户，各家公司在制定反爬虫策略时都非常谨慎。

价格战促生爬虫肆虐

某旅游网站的反欺诈工程师阿城（化名）向黑奇士表明，行业内存在着价格战，这种价格战在很大程度上使得爬虫程序变得肆虐起来。

他举例说：

假如

行内存在三个网站，分别是 A、B、C。它们在宣传时都着重强调：上某某网，订票价格最为便宜。实际上，航空公司给予它们的价格大致是相同的。即便有的网站出票量较大，所赚取的也只是年底的返点，很难出现较大的价格差异。

某个月，网站 A 进行了补贴，补贴金额为 300 万。通过这一补贴，每张机票平均补贴 100 元。这样一来，该网站上的机票价格就显得便宜了许多。

在制定价格补贴时，为防止黄牛党，大家不敢直接给每张票减 100 。热门航线减 50 ，不热门航线减 150 ，并且在市场上重点对不热门的线路进行宣传。

在不同的时间以及不同的航线上，会执行不同的价格补贴策略。同一张票，早上的价格和中午的价格有可能是不一样的。大家一看觉得真便宜，接着就纷纷涌过来了。

网站 B 的 CEO 看到这种情况后，认为不行，决定他们也进行补贴。他们补贴 300 万，而他们决定补贴 500 万。接着，技术部的某某被要求去监测他们的价格，CEO 想要知道他们的补贴策略。

网站上每天会有价格出现，且至少有几十万张票的价格。因为这肯定需要爬虫去获取，所以网站 B 的爬虫就开始行动了。

网站C同样也这么搞。

直到有一天，因为各家爬虫过于勤奋，导致服务器压力报警。

网站 A 的 CEO 查看后发现，我们的出票份额在市场上处于首位。并且我们技术部的人员配备是他们的两倍。对于爬虫，我们毫无畏惧。那些用更强大机器集群武装起来的爬虫们纷纷朝着对手的网站爬去。

事实上，国内有点名气的旅游网站至少有七八家，它们都有各自的订票业务。这些旅游网站的爬虫不断爬动，就出现了爬虫流量占据所有流量 95%的奇特景象。

爬虫和反爬虫之战硝烟四起。

提直降代，航空公司被迫加入爬虫之战

2015 年上半年，国资委提出要求。几家国有航空公司需在未来三年内，将直销比例提升至 50%。同时，代理费要在 2014 年的基础上下降 50%。这就是在民航业产生深远影响的“提直降代”。

所谓“提直降代”，意思是航空公司需要直营飞机票，并且要努力减少票务代理以及旅游网站的出票量。业内人士介绍说，当直销比例每提升 10%的时候，航空公司能够从代理人那里节省将近 10 亿元的分销费用。

坐飞机的朋友或许会留意到，各个航空公司都在全力宣传自己的网站。当你刚登上飞机时，就会有空姐给你递上一张小卡片，上面写着“上某航的官网，票价最为便宜，要是票价贵了，会双倍返还现金”。

从 2016 年起，航空公司加大了对官方网站和官方 APP 建设的力度。一方面通过补贴低价票去吸引用户，另一方面让票务代理和旅游网站的票价保持坚挺。在这两种情况的夹击下，票务代理和旅游网站的处境变得越来越艰难。

旅游网站凭借巨大的出票量，其中携程加上去哪儿占据了所有机票份额的 65%，并且凭借雄厚的资金实力能够暂时维持。然而，票务公司却开始打起了歪脑筋。

票务公司发掘出了新的发财之路：通过爬虫来监测价格，并且利用爬虫去抢低价机票。简单来说，就是票务公司要转变为机票黄牛。与此同时，航空公司成为了这场爬虫战争中的受害者。

低价票哪里去了：黄牛用爬虫抢票 导致加价和超售

提直降代之后，航空公司在其官方渠道放出了许多低价票，目的是吸引客户。然而，客户并未感受到票价便宜，这其中的原因是什么呢？

黑奇士对知名白帽子黑客罗启武进行了采访。罗启武创立了岂安科技，该科技专注于业务风险控制，并且为民航系统提供反爬虫解决方案。罗启武表示，民航公司的高价票源，尤其是热门线路的航位、黄金周的飞机航位以及民航公司补贴的特价票等，大部分在一放出来的时候就被爬虫程序抢光了。

匿名票代人士向黑奇士表明：机票爬虫会借助虚假客户信息，或是购入的真实身份信息来订票。它们会将抢来的票加价 200 至 500 元进行售卖。在黄金周、过年长假等时段，一张票甚至可能加价 1000 元。由于票务黄牛自身具备客户资源，所以比较容易将票卖出。即便卖不出去也无需担忧，因为很多订票信息是虚假的，航空公司只能默默承受损失。

为应对虚假抢票、虚假占座的状况，部分航空公司采取了如下潜规则：每架飞机会多卖出 5%-10%的票，此行为被称作“超售”，这给真实用户造成了极大的问题，有些用户会因超售情况严重而无法登机。

航空公司成唐僧肉 爬虫、欺诈和羊毛党肆虐

在旅游网站所处的时代，爬虫与反爬虫之间的战争通常是在不同的网站之间进行的。黑奇士知晓，那些头部的旅游网站拥有着在业界处于一流水平的反爬团队。随着两家巨头的合并，旅游网站之间战争的激烈程度有所下降，与之相对应的是，航空公司成为了新的被爬虫抓取的对象。

只能去寻求第三方业务安全公司的支持

岂安科技的创始人罗启武称，航空公司面临着诸多安全威胁。其一，通过爬虫来爬取机票票价，一旦检测到低价票，便迅速抢票并占座，然后加价卖出。其二，在航空公司开展市场活动时，常常会被羊毛党，甚至是专业羊毛党组团把低价票薅走。如今的爬虫基本上能够替代 95%的人工操作，普通用户想要在买票时赢过爬虫，几乎是不可能的。

更为严重的是，爬虫爬取是一个隐患，虚占座位是一个隐患，羊毛党也是一个隐患，每一个看似独立的隐患，就如同地球另一端几只蝴蝶轻轻扇了下翅膀，最终汇聚成了影响庞大的蝴蝶效应。多种原因导致了用户信息泄露，多种原因导致了机票*，这些已经成为各个航空公司非常头疼的毒瘤。

公安部发布通告，海南儋州成为专业的“机票退票”电信*重点整治地区。

近日，浙江省温州市公安局网安支队破获一起特大黑客攻击窃取国内航空公司网站信息的案件。苍南县公安局网警大队也参与其中。黑客非法入侵了 50 多家民用航空类公司的网站，窃取了乘客的票务信息。之后，他们利用这些信息实施网络*，骗取的金额达到 1000 多万元。警方抓获了 20 名犯罪嫌疑人，其中包括黑客林某。同时缴获了 30 多万条航空票务类公民信息，以及大量的账号和密码信息。

如何解决机票风险：专家支招四大措施

黑奇士综合了专家的意见，然后向航空公司提出了一项举措，向旅游网站提出了一项举措，向普通用户也提出了一项举措，一共提出了四大举措。

订票用户的行为识别对反爬虫很重要。普通用户打开网页时，地址访问较为丰富，例如从首页到频道页，接着到某个页面，且每个页面会浏览几分钟。而爬虫只会访问固定的几个页面，与真实用户的行为差别较大。

第二，对于各航空公司来说，除了爬虫和羊毛党之外，还存在着因信息泄露而导致的机票*问题，以及市场活动被羊毛党盯上的情况等诸多风险问题，这需要综合性、立体化的解决方案。

（岂安科技的风险决策系统后台截图）

对于各大航空公司来说，做好内部信息系统的权限管理以及分级别控制是很重要的。例如，某些航空公司的低级账号具备查看所有用户信息的权限，这种情况会带来极大的安全风险。

对于普通用户来说，一定要认准航空公司的官网。如果遇到朋友圈的“低价机票骗局”，或者接收到通过短信进行的“机票退款*短信”，只要拨打机票上的客服电话，或者访问官网，就能够获得权威信息，这样就不会轻易上当受骗。

你会感兴趣的内容：

【干货】

【系列】

【反爬虫】

【程序员】

# 汕头seo 培训  # 桥西区网站优化公司  # 长沙seo网站是干嘛的  # 济宁网站建设哪家便宜  # 上海网站优化外包  # 怡红院seo综合查询  # 港口租房网站建设  # php学习网站建设交流  # 整合营销推广 书籍  # 如何做租赁网站推广赚钱  # seo网络营销优势  # 这种情况  # 重庆长寿SEO  # 广州荔湾公司网站建设  # 静海区电商网站推广介绍  # 霞山区服务行业网站制作推广运营  # 中国远大集团网站推广  # 网站seo被拦截  # 宜昌市网站优化公司地址  # seo推荐网站  # 大连直销网站建设  # 出票  # 票务  # 旅游网站  # 自己的  # 提出了  # 普通用户  # 他们的  # 是在  # 奇士  # 的是  # 飞机票怎样做票务代理  # 是一个  # 这一  # 互联网  # 会有  # 官网  # 出了  # 很难  # 在这  # 很重要 

相关文章： 华为手机备份聊天记录的两种方法，你知道吗？   微信新功能农场上线，朋友圈 10 周年，它为何被官方忽视？   API管理系统：实现精细化管理的新途径  *推广软件助您事半功倍  利搜百度下拉框：了解市场趋势热点，高效市场调研助手   苹果微信怎么设置面容进入钱包？面容支付设置方法大揭秘   引流获客工具：助推业务腾飞的秘密武器，全面展示其如何为企业的业务发展提供强有力的支持  抖音联合火山引擎举办特效技术开放日，多款特效向企业开放啦   旅游博主升级计划后收入锐减引关注，中视频伙伴计划曾迎黄金时代？   企业为何需要使用scrm系统  阿里云优惠券先领券再下单，误删微信好友如何找回？有妙招   智谷妹收到的黑科技神灯，竟是睡眠神器？优点让人惊喜   *利用网络推广平台，提升品牌曝光  商城小程序多少钱一年？算清这笔账，知晓搭建成本差异   微信封号如何解封？详细操作步骤及注意事项在这里   *获客软件：获客新利器  房产中介*获客的六大渠道：深度解析与实战应用  百度网盘买了超级会员下载仍慢怎么办？这些解决方法请查收   软件推广联盟的背景、目的和意义，并探讨如何通过寻找合作伙伴  微信安全性至关重要！掌握修改登录密码的详细步骤   长虹寻找最老电视活动启动，三大承诺推进平板电视维修服务升级   介绍互联网营销代运营的概念、优势、实施步骤以及注意事项，帮助企业更好地理解和应用这一新模式  长虹财务云引领变革，满足集团管控新趋势，助力财务管控创新   SEO优化利器：快速提升网站排名的推广工具  外贸推广教程：拓展全球市场的方法  推广培训教程：全面提升营销效果  抖音挑战玩法大揭秘！如何找到及自主发起挑战？   特色优势设计保障，多端适配、安全防护，客户满意度超九成   钢制家具与食品产业跨界联动，洛阳工业企业融通合作亮点频出   良好生态是普惠民生福祉，打野热潮却致生态资源危机？  

相关栏目： 【 科技资讯38001 】 【 网络动态13059 】 【 技术学堂11871 】 【 网络推广75774 】 【 品牌营销52040 】 【 AI推广53525 】 【 推荐站点126806 】