中国许多网络小贷正在越来越依赖所谓另类数据的风险管理解决方案，而最近对非法数据挖掘和网络爬虫的打击引发了这些小贷公司前所未有的危机。

近年来，由于金融系统的开放以及消费经济的兴起，为中小企业和消费者提供贷款的小贷行业市场蓬勃发展。此外，由于金融技术和大数据的进步，快速建立基于数字数据的信用风险评估系统成为了可能，促进了这个细分市场得以更快速的发展。

早期，爬虫数据行业享有宽松的监管环境。但是不久之后，非法获取或共享的数据就出现在了黑市中。掠夺性贷方和收债员能够购买直接识别信息，例如电话号码 、联系人列表和通话记录。许多声称已采用复杂的大数据或人工智能技术的数据供应商实际上在吹捧他们使用简单技术收集的此类信息。

在过去几年中，随着这些“粗放型”贷款和收债行为日益猖獗，中国金融监管机构和执法部门发起了一系列运动，以破坏过去几年中的掠夺性贷方和收债人网络。

最近，执法机构将注意力转向这些掠夺性贷款业务的非传统数据，数字支付和其他技术服务的提供者。 根据其在11月中旬举行的最新新闻发布会，自今年9月以来，公安部通报已打击了许多此类公司。https://www.xinhuanet.com/2019-11/14/c_1125233209.htm

一些替代数据和服务提供商也受到了调查，但它们不知道自己的一些客户或业务合作伙伴使用了非法贷款服务或非法出售数据。

在公安部新闻发布会后不久，各主要城市的金融监管机构和央行开始要求其他数据供应商和主要贷款机构对其数据源、客户数据使用情况和自身数据收集操作进行内部调查。

这并不是对爬虫行业的第一次打击和调查。但最近一次危机所造成的直接影响表明，贷款行业，尤其是规模较小的私营贷款，在信贷筛选和风险管理方面，在很大程度上依赖于这些爬虫数据。

但是问题在于，许多数据供应商或很难知道其客户是否参与了非法贷款或将数字数据用于非法目的，同时也并不清楚监管机构和执法机构的下一步行动，因此许多数据供应商和一些大的在线贷方已暂时中止了其数据抓取的操作。

此举立即推高了数据抓取的价格。据报道，定制数据爬虫的价格在几周内上涨了两倍多。一些失去了数据和相关服务供应商的企业开始尝试新的方法，比如与该领域的老牌企业合作开发，这意味着高额的额外成本。

数据来源和服务提供商的突然消失，让许多原本依赖其他数据和解决方案进行信贷筛选和贷款监控的银行措手不及。据报道，由于风险担忧加剧，许多银行立即减少了贷款规模。一些人将最近拖欠债务的增加归因于数据辅助的反欺诈和风险管理服务的损失。

同时，贷款行业已开始寻求更广泛的数据类型，其中可能涉及更复杂的技术。就私营部门投资和人工智能技术在金融领域的应用而言，中国在人工智能（AI）应用程序开发方面处于领先地位。通过利用人工智能在某些领域的最新进展，例如图像识别和自然语言处理，新出现的数据技术开发人员能够提取以前不易获得的信息，而机器学习进展所推动的预测分析功能将提供金融服务更强大的风险监控服务。

过去10年左右，中国另类数据市场的发展与中国金融行业的许多领域同步，如信贷风险评级、非银行贷款和股票投资。由于这些部分的历史很短，这些另类数据的出现正好弥补了传统数据在信用风险评估、贷款监控、投资决策等方面的不足。

由于中国政府和私营部门都将其视为经济增长的下一个主要贡献者，因此了另类数据的相关产业在短时间内在中国兴起。中国政府发布了促进“数据经济”发展的国家计划，大数据和人工智能初创公司吸引了很多风险投资。

为了解决数据保护和隐私等问题，中国于2017年颁布了《网络安全法》。今年早些时候，在数据收集、使用和保护方面出台了一系列标准和措施。

尽管信贷风险管理和贷款市场暂时受挫，但近期的打击行动仍受到了金融业的肯定。预计在监管机构提出更明确的指导方针之后，数据行业将进行一轮整合。鉴于日益增长的监管要求和市场需求，从这场危机中脱颖而出的参与者将以更高水平的技术以及与技术开发相关的投资投入到市场中。