恶意爬虫让机票价格暴涨 每年或致航空公司损失十多亿元
关注公众号:Python爬虫数据分析挖掘,免费获取更多开源项目源码
4 月 29 日下午,北京市宣布公共卫生应急响应级别调至二级后。多家OTA网站当日数据显示:消息公布的1个小时内,北京出发的机票预订量较上一时段暴涨15倍,北京进出港机票成交量比前一天同时段增长超500%,北京至成都、昆明、重庆、上海、杭州、长沙等航线价格快速上涨,部分热门航线机票的价格甚至上涨6倍。
机票价格暴涨也许是恶意“爬虫”搞的鬼
顶象反欺诈中心数据显示:多家航空公司B2C网站虚假搜索量猛增,热门航线的虚假航班信息搜索查询量高达99%,这背后其实是被恶意“爬虫”所操控。恶意爬虫不仅白白消耗航空公司的机票信息查询费,导致机票动态定价失真,更会导致出现虚假占座等倒票情况发生,直接影响机票销售和运营,给航空公司带来巨额的经济损失。
首先,增加航空公司查询开支。恶意“爬虫”非法抓取航空公司B2C网站或官方App等平台上的航班信息,浪费航空公司带宽资源,更白白消耗航空查询费用。航空公司每年要向中航信缴纳航线机票查询费用,该费用是根据航班信息的查询量来计费,查询量大则费用多。
其次、影响航班机票的动态定价。虚假的搜索查询量会导致航空公司收益管理系统算法产生误判,给出不符合实际情况的运价调整(即机票价格)。例如,原本某航班机票售价只要400元,虚假流量查询暴增10倍后,航空公司网站的订票系统会计算为购票旅客暴增,从而瞬间涨价至2000元,严重损害消费者权益以及平台的口碑。
第三、倒票赚取差价,影响正常运营秩序。用“爬虫”抓取下航班票务信息后,通过虚假的身份信息预订航线机票。在航空公司允许的订票付款周期内,加价转售给真正需要购票的消费者。这就导致部分机票并未售出,但消费者在航空公司查看时却显示已售罄。这种“虚假占座”行为不仅损害消费者的合法权益,更是严重扰乱航空公司的正常运营。
顶象方案有效防控恶意“爬虫”
为了防范恶意“爬虫”的危害,有些航空公司的防范手段会通过IP限制频次,这样反而误拦了正常旅客的访问,而且很多爬虫程序可以通过虚拟VPN等软件绕过IP限制。也有航空公司将一定时段内的航班信息放在缓存中,客户查询只需调用缓存即可。但是却带来新的问题,由于非实时动态信息,导致旅客数据出现时间差,购票后无法出票的问题。
顶象数据反爬解决方案提供了一整套全业务、全流程的防控体系:首先,基于设备指纹实现对各类风险和模拟器、真机的识别,再结合Dinsight风险决策引擎,毫秒级实时决策对行为进行分析,实现对恶意“爬虫”行为的有效识别。其次,通过智能无感验证的人机交互防护,直接拦截“爬虫”对敏感数据的爬取。再有,利用Xintell智能模型平台建立基于业务场景的策略模型,从而对反爬效果进行实时优化,良好防范恶意爬取的风险。
顶象依据多年攻防对抗实战经验推出的顶象数据反爬解决方案,提供了动态策略的纵深防护,避免“爬虫”单点绕过,多维度防御,有效拦截各种恶意“爬虫”行为,有效反爬又不影响正常用户体验。
每年可减少航空公司十多亿元损失
顶象数据反爬解决方案已经在多家航空公司部署,且取得了良好效果。随着各航空公司的陆续部署,能够节省国内航空业十多亿元开支、损失。
1、每年可节省数亿元航班信息查询费:该方案部署某大型航空公司后,每年的航班信息查询费从700万元直接下降到80万元,下幅度达89%,每年为该航空公司节省620万元人民币。
假设一家航空公司损失620万,国内拥有20个机组以上航空公司有几十家,单纯航班信息查询的损失就有数亿元。这还未计算“虚假占座”的带来的巨大损失。
2、每年节省近10亿元机票损失:“提直降代”是近年来航空运营的重中之重。2016 年2月4日,国资委要求国航、南航、东航等三大航空公司“将机票直销比例提高至 50%”。直销比例的提高,大约可以帮助航空公司每年节省近10亿元的分销费用。明面上开支减少,各种支出却增多。很多佣金减少的代理公司开始通过虚假占座和恶意退票来赚取差价。“虚假占座”就是借助恶意“爬虫”的倒票行为。公开数据显示,每年虚假占座带来的损失高达近10亿元。
航空战疫内控成本、外求援助、提升精细化运营
新冠肺炎疫情对全球航空运输业造成巨大冲击,全球各航空公司损失惨重。麦肯锡最新的一份报告显示,2020年4月的全球航空客运量比2019年同期下降70%-80%。全球60%的客运飞机受此影响停飞。预计2020年全球旅游航空业受影响的产值将超过九千亿美元,如果疫情持续,全球大部分的航空公司短期的现金流只能维持3-6个月。
面对疫情对市场冲击,航空公司外求支援、内控成本,并着重提升精细化运营水平。
外求支援:国务院通知暂采取免征民航企业缴纳的民航发展基金等一系列措施。例如,自1月1日起,暂采取免征民航企业缴纳的民航发展基金。旅客购买机票支付的民航发展基金不计作收入、上缴国家,此举直接降低各航空公司成本。
内控成本:4月17日,民航局下发《关于进一步明确疫情期间国际机票销售有关问题的通知》,要求航空公司对国际机票全部采取直销模式,确保公开透明、明码标价。对已由代理企业销售的国际机票要加强管控,严禁换票,订座及购票后禁止更改旅客姓名,以杜绝中间环节倒票、炒票行为。通过对爬虫的防控,预计每年可以减少数十亿的成本支出。
提升精细化运营水平:航空公司从向客户销售机票转向对客户价值的挖掘。通过加快数字化场景开发应用,实施精益生产,推进精准营销,开展精细化服务,数字化对提高生产效率,基于旅客出行与货物运输,整合应用与深度挖掘客货需求,利于航空公司创新供应链管理、优化生产流程,从而提高生产效率和资本回报率。