实时爬虫新篇章：推出多款专用全新利器

沿用以前的集成方式

为了方便我们的现有客户和本次更新前试用过我们产品的潜在客户使用，我们决定沿用之前的集成和身份验证方式，以及相同的请求参数。 

SERP爬虫API身份验证方式 

SERP爬虫API采用基本HTTP身份验证方式，仅需用户名和密码。这是启用此工具最简单的方式之一。以下代码示例展示如何通过实时（Realtime）方式发送GET请求，从搜索引擎抓取公共数据。如需了解更多信息，请查看SERP爬虫API快速指南。

curl --user "USERNAME:PASSWORD" 'https://realtime.oxylabs.io/v1/queries' -H "Content-Type: application/json" -d '{"source": "SEARCH_ENGINE_search", "domain": "com", "query": "shoes"}'

*对于这个示例，你必须指定确切来源以查找可用来源。

电商爬虫API身份验证方式 

电商爬虫API采用基本HTTP身份验证方式，仅需用户名和密码。以下代码示例展示如何通过实时交付方式，发送GET请求至books.toscrape.com。

curl --user "USERNAME:PASSWORD" 'https://realtime.oxylabs.io/v1/queries' -H "Content-Type: application/json" -d '{"source": "universal_ecommerce", "url": "https://books.toscrape.com/catalogue/a-light-in-the-attic_1000/index.html", "geo_location": "United States", "parse": true, "parser_type": "ecommerce_product"}'

网络爬虫API身份验证方式

和以前的爬虫一样，SERP爬虫API也采用基本HTTP身份验证方式，仅需用户名和密码。以下代码示例展示如何通过实时交付方式，发送GET请求至https://ip.oxylabs.io。

curl --user "USERNAME:PASSWORD"'https://realtime.oxylabs.io/v1/queries' -H "Content-Type: application/json" -d '{"source": "universal", "url": "https://ip.oxylabs.io"}'

总结

我们希望这篇帖子可以帮助你了解，为什么我们决定将实时爬虫改为3款不同工具，以及各款爬虫API分别有哪些精彩功能。

如果你对爬虫API的变化有任何疑问或建议，欢迎通过专属客户经理，或者发送电子邮件至support@oxylabs.io与我们联系。