Oxylabs 专家预测 2022 年大数据的未来

据报道，数据管理专业人士在企业中占据中心地位,人们对道德的关注日益增加,科技巨头面临的压力影响着公共网络数据行业格局,这些将是2022年大数据行业的最突出趋势。公共数据采集解决方案提供商Oxylabs提出了以上观点,该公司的专家预测了今年的形势展望。

外部数据的成长市场

Oxylabs首席商务官TomasMontvilas认为,更多行业将在2022年发现使用外部数据带来的好处。他列举了以下几项：“使用外部数据为客户提供各种见解和洞察的SaaS产品市场将在2022年进一步增长。Semrush、Similarweb、Zoominfo等公司成功IPO,推动了该领域的进一步投资。此外,我们很可能还会看到更多后起之秀。”Montvilas如是说道。

他观察到网络抓取行业增长的另一个重要方面是网络安全。网络威胁日益高级,因而需要新的防御措施。网络监控和抓取技术正可以派上用场。

“持续监控公共网络和暗网,有助于及早识别恶意网站和程序。还可以查找在暗网发售的数据集,有助于更快捕获数据泄露,并能够识别黑客团体的行动。同时,利用代理可以扫描来自不同IP地址的电子邮件,从而很好地保护电子邮件。”他解释说。

企业中的数据管理角色进一步提升

随着近来数字化一切的趋势激增,数据管理和分析开始在企业中占据中心地位。数据部门在过去几年经历了指数级增长,这一增长势头还将在2022年延续。

Oxylabs全球伙伴关系副总裁GediminasRickevicius注意到,通过预算趋势可以轻松看出数据部门日益提升的重要性。根据Oxylabs最近在英国金融和电子商务行业开展的几项调查,大多数数据部门预期会增加预算(51%的电子商务,43%的金融服务)。

Gediminas针对数据部门预测的另一个趋势是越来越多的自动化公共网络数据采集工具将进行外包。原因是多方面的:第一点很明显,随着许多公司更加依赖外部数据,手动数据采集过程完全不够。另一个重要因素是当前的就业市场格局。

“在2021年,‘大离职潮’和人力资源匮乏成为热议的话题。在这样的背景下,各公司更加难以找到能将所有时间专注于维护和调整网络抓取基础设施的内部专业人士。将这项任务外包,就可以优化资源并专注于数据分析,而不是自已动手去获取。”Rickevicius如此说道。

科技巨头面临的压力可能影响网络数据行业

最近几年,科技巨头面临来自全世界政府的日益增加的压力。2022年也并无不同,相关部门很可能会推动制定新的法规,尤其是围绕个人数据及其获取与聚合方面。

根据Oxylabs法律部负责人DenasGrybauskas的看法,数据采集行业不应忽视这些过程。在政府施加的压力之下,一些科技巨头公司可能已经在着手限制对公共网络数据的访问权限,这可能影响许多企业。

“一些公司准备实施老一套策略——推卸责任。这正是Meta(Facebook)在个人数据泄露和数据抓取公司方面计划采取的措施(至少根据泄露的电子邮件来看是如此),他们声称个人数据被泄露不是Facebook的错,而是抓取公司的错,以便借此转移注意力。”Grybauskas如此说道。

推动行业自我监管

谈到数据采集行业的战略性发展,道德和法律影响仍是2022年的热门话题,推动行业继续提高标准。Oxylabs首席执行官Juliuserniauskas预测说,合乎道德的代理获取和牢靠的KYC(了解你的客户)实践将主导人们的对话。

他解释说,正如大多数新技术那样,网络抓取的发展速度太快,监管跟不上,无法实施保护以遏制潜在的滥用情况。因此,行业本身必须率先制定关于恰当使用该技术的自我监管准则和标准。

“在2022年,这个问题必将趋于主流化,这有几方面的原因。首先,随着最大的行业参与者定下基调,小型参与者很可能会跟随;第二,使用代理服务的品牌也更加强调代理的性质,因为潜在的滥用可能也会损害它们自己的声誉。”Cerniauskas如此说道。

Oxylabs是一家大规模网络数据抓取领域的高级代理和数据抓取解决方案的全球领先提供商。公司的使命很清晰:让大大小小的所有企业都能获取大数据。凭借在公共可用网络数据采集方面无与伦比的实践经验,Oxylabs与数十家《财富》500强公司和跨国企业建立了可信赖的伙伴关系,通过最先进的产品和技术专长,帮助他们从商业智能数据中发掘隐藏的瑰宝。