在开始使用 Bright Data 之前,我们使用的是网络数据抓取解决方案,需要通过一个 API 不断重复相同的请求来实时收集网络数据,并主动定位新的网络数据访问。
使用 Bright Data 后,我可以将这个收集过程定时重复执行,这样就能在固定的时间间隔里获取最新结果,不必每次需要新数据时都重新启动整个流程。大规模处理的能力从根本上改变了我们的工作方式,让我们能够应对之前不可能处理的大客户需求。
我们使用 Bright Data 的 Web Scraper IDE 来自动获取社交媒体平台上的公众网络数据,为我们的客户收集粉丝和订阅者的数据,并通过 Bright Data 将他们所有的社交影响力整合存储在一个便于访问的地方。
现在我们真正地将数据科学引入了一个之前主要依靠不断试错的领域。