大数据存亡时间七成数据接口被堵截数万职工脱离职业

编者按：本文来自微信大众号“一本财经”（ID：yibencaijing），作者 欧拉，36氪经授权发布。

最近三个月，多家数据公司被查询，数据职业动乱不断。

职业继续收紧，七成数据接口被堵截。

一些大数据公司的爬虫团队被悉数裁人，许多人员自动离任。据统计，最近最少有数万职工流出，职业人员流失率在50%以上。

各家大数据公司的CEO每天都在朋友圈“打卡”，证明“我没被抓，我的公司也还在”。

而另一边，合规的、有国资布景的大数据公司，却迎来了好时分。有的公司在短短三个月内，“每个月事务翻一番”。

有人说，这是职业面临的最大“生死劫”：有人死，却也有人生……

职业大劫

大数据职业，忽然间被踩了刹车。

最近三个月，大数据公司人员被抓捕、被查询的音讯不断传出，职业人人自危。

多家金融组织称，它们协作的数据接口，大部分都被堵截，“70%的接口断了，其他的许多也不安稳，一周换了三次”。

首要停掉的，是各种爬虫产品。

一家大数据公司的创始人于建瑞，发现第二家爬虫公司被抓后，在公司召开了紧急会议。

“爬虫部分事务暂停，数据库和服务器上一切的爬虫数据悉数删去，即便是脱了敏的。”于建瑞决议“勇士断臂”。

删去数据的第二天，爬虫部分立刻“裁人十几人，转岗十几人”。

“第三天，整个爬虫部分从公司彻底消失。”于建瑞花了三天时刻，将爬虫事务“抹除”。

紧接着堵截的，是“三要素验证”。

在曩昔，各大运营商下面，都接了许多代理商，后者会供给数据接口，进行电话、名字等要素的验证。

“最近电信停了许多代理商，现在底子不接了。”于建瑞称，最开端暂停的是电信，现在联通和移动也在“减缩代理商”。

而各种多头假贷产品，也纷繁下架。

“天创、有盾的多头假贷产品都停了，市面上底子找不到多头假贷的产品了。”于建瑞称。

金融监管则开端要求自查。

11月6日，我国互联网金融协会向会员组织发布《关于增强个人隐私信息保护意识依法开展事务的告诉》，要求会员组织对数据协作方进行排查。

“许多被查询的或许有危险事务的公司，都被直接点名，监管要求自查是否和它们有过协作。”于建瑞称，“这这中心还包含公信宝、白骑士、天机数据、木立征信等多家公司”。

10月24日，一张截图在网上撒播。截图显现，人行要求各地银行排查与第三方数据公司的协作状况

多家金融组织的工作人员也证明了这一点：“虽然不同区域的要求，或许略有不同，但都是要求停掉和危险公司的协作。”

事务阻滞的一起，职业也弥漫着惊慌的气味。

于建瑞身边每天都有人失联，“出国的出国，被抓的被抓”。

“最近，各家大数据公司的CEO每天都在朋友圈打卡，比运动打卡都勤勉。”于建瑞称，这里头的潜台词，无非是“我没事，咱们公司也还好着呢”。

一家场景分期途径的HR前两天约好了一个面试，成果求职者没再次出现，“后来传闻，他被抓了”。

大数据忽然成为高危险职业，职业掀起了一波离任潮。

“最近一段时刻，咱们收到了许多来自数据职业的人员简历。”上述HR表明。

而各大数据公司，也开端裁人。

“榜上有名的数据公司简直都在裁人。”一家金融组织的风控总监称，被裁的职工中，底子有一半都是技术人员。

“这些公司的裁人率和离任率最少有50%，技术部分乃至达到了70%。”

本钱激增

实际上，金融科技开展的根底和养料，便是大数据。

整个数据职业的阻滞，导致金融事务遭到巨大影响。

“80%的金融公司都缩短了。”于建瑞称。

一些途径，只能针对老客户放款，不再新增；略微急进一点的途径，就开端凭感觉放款。

“较为资深的从业者，都会对自己用户的画像有概念，大约知道哪些人是优质人群。”一家场景分期途径的风控总监李扬称。

他们比对着过往的好客户画像和逾期客户画像来放款，“逾期率也还可控”。

但假如想保持从前的事务量，就从另一方面代表着各项本钱的添加。

首要，是数据本钱的添加。

“正规的数据公司和央行征信，其实能够掩盖职业70%到80%的数据需求。”一家第三方征信组织的创始人王海峰表明。

仅仅，金融职业需求支付更高的合规本钱——合规的数据，价格天然要贵一些。

“它们的本钱高了约60%。”数据宝CEO汤寒林称。

其次，是核验本钱和人力本钱的添加。

摩托车分期服务商骑呗科技的风控专家姚奕称，受爬虫风云的影响，他们获取第三方数据的途径减少了50%至70%。

为了保持事务工作，他们只能要求用户提交更多的纸质材料，并添加人手，用人工的方法核实用户个人信息。

“之前查询一条信息，只需求一两秒，本钱在几毛钱到几块钱之间。现在靠人工核实，或许需求几分钟乃至十来分钟。”

之前审阅只要约10分钟，现在为30分钟。“此外，人力本钱也添加了30%至50%。”

面临现在的数据窘境，有一些途径测验自建风控和爬虫。

“建立一套爬虫体系，保存估量需求6个人，至少三个月，开发本钱就得200万。”于建瑞称。而后期的保护本钱更高。

“比如说，为了反爬虫，运营商的官网动不动就会来个页面调整，爬虫体系就得跟着改。”于建瑞称，后期每个月的保护本钱，还得50万。

而自建风控体系的难度，相同意味着人力本钱的昂扬。

“整个金融体系的本钱，保存估量添加了50%左右，人力、数据的本钱大幅度添加，功率也会下降许多。”于建瑞称。

未来怎么

这不是数据职业的榜首次大洗牌。

数据职业最早的一批从业者都记住，早在2012年前后，我国的数据职业就从前遭遇过一次大洗牌。

2012年，央视“3·15”晚会曝光罗维邓白氏不合法获取、生意公民个人隐私信息。罗维邓百氏全员被上海警方带走。

2012年，央视“3·15”晚会对罗维邓白氏的曝光截图

那一次之后，数据职业的暴利链条被打断，绝大部分从业者脱离。

留下来的人，也心胸敬畏，不敢越界。

“上一次其实便是为了保卫数据主权，而这一次和上一次有实质的差异，是为了保护安稳——金融和数据结合得太深，暴力催收和套路贷引发了许多极点案子。”在数据职业有15年工作经验的资深从业者丁一称。

但现在市面上这些干流的大数据公司，大部分都是在2012年之后创建的。它们没有阅历过上一次洗牌，也没有感受过前史的经验。

“数据职业是一个什么样的职业，底线在哪里，他们中，大部分人并不知道。”丁一称。

而这一次和前次相同，许多人员脱离，暴利链条被打断。

前史如此类似，数据职业似乎又走完了一个轮回。

丁一以为，这次洗牌或许并非坏事——职业从头回到一个新的起点，新的底线也被划好。

而在凄风苦雨中存活下来的合规公司，也逐渐熬出了头。

“在曩昔，合规的数据公司底子活不下去，由于咱们要支付更高的合规本钱。”汤寒林称。

他举例称，他们并不缓存任何一条数据。

而职业大部分的玩家，都是将调取的数据偷偷存起来，当数据越积越多之时，数据公司就能够直接用缓存库里的数据，不再需求从接口调取。

所以它们的出售价格就能够压到极低，“多卖一单便是赚”。

“它们价格便宜，并且由于现已缓存下来了，所以呼应时刻也会比咱们快。” 汤寒林说。

在惨烈的商场之间的竞赛中，劣币将驱赶良币。

而现在，合规的数据公司成为了“香饽饽”。

一家有国企布景的数据公司创始人泄漏：“最近三个月，咱们每个月的事务量都翻一番。”

而一些巨子旗下的大数据途径，也忽然间变得车水马龙。

“排队等着接咱们的服务，咨询量也暴增。”一家巨子旗下的云途径出售称，他们最近正预备扩大团队。

关于大数据职业的未来，从业者以为，“持牌”将是一个关键词。

“或许，第三方大数据公司将会持牌运营。”一家数据公司的负责人夏睿猜测，到那时，职业内应该只剩下几家头部公司，小公司存活的或许性不大。

合规、持牌，或许会成为未来大数据职业的主旋律。

丁一以为，一个职业从草莽到合规，的确要阅历几个周期，“只要暴利链条被打断，这些守规矩的人，才能够从头奔驰”。

“你还预备留在大数据职业吗？”最近，许多人问于建瑞。

“商场和需求还在，仅仅划了新的跑道，我仍是会在。”他说。

仅仅这一次，他会愈加心胸敬畏。

*文中部分受访者为化名。