Oxylabs

产品

爬虫API

电商爬虫API

用电商爬虫API轻松提取产品数据

  • 只为成功交付的结果付费

  • 实时高度本地化产品数据

  • 无需管理的网络抓取基础架构

电商爬虫API

瞬间采集精确产品数据

电商爬虫API可以快速访问主流电商市场或独立站的产品数据。从多种类型的网页获取实时电商数据,包括HTML或JSON格式的搜索和产品页面。

搜索页面

  • 搜索结果位置

  • 产品标题

  • 价格

  • 推广产品

  • 页码

  • URL

  • 其他

产品页面

  • 产品名称

  • 详情

  • 价格

  • 产品目录

  • 折扣

  • 库存

  • 其他

轻松规避地理限制

无论您身在何处,都能访问几乎全球各地的本地化电商数据。电商爬虫API让您能轻松从195个国家采集高度本地化的产品数据。

  • 195个国家

  • 国家或邮编定向

创新的解决方案

只需几秒即可检索出高质量的结构化数据

我们基于机器学习的自适应解析器可以轻松适应网站的布局,并允许您从几乎任何电商产品页面收集数据。通过检测最重要的数据点,如标题、价格和产品描述,它能够为您提供JSON格式的高质量结构化数据。 

  • 无需开发或维护您自己的分析器

  • 提高数据提取的可扩展性

  • 有更多时间用于数据分析和其他任务

轻松收集电商产品页面数据

我拥有自己的电商公司,Oxylabs电商爬虫API对我们帮助颇多。本来我们对他们承诺的100%数据交付持怀疑态度,没想到真的能做到,我们对此很满意。

Lew Nellen

我们用Oxylabs提供的爬虫API系统替代了我们的旧代理基础架构。他们的服务非常快非常可靠。目前我们得到的结果比以前的好太多了。

Aurelian

爬虫API工具帮我们优化了很多以前手动完成的工作。

Michele Young

我拥有自己的电商公司,Oxylabs电商爬虫API对我们帮助颇多。本来我们对他们承诺的100%数据交付持怀疑态度,没想到真的能做到,我们对此很满意。

Lew Nellen

我们用Oxylabs提供的爬虫API系统替代了我们的旧代理基础架构。他们的服务非常快非常可靠。目前我们得到的结果比以前的好太多了。

Aurelian

爬虫API工具帮我们优化了很多以前手动完成的工作。

Michele Young

我拥有自己的电商公司,Oxylabs电商爬虫API对我们帮助颇多。本来我们对他们承诺的100%数据交付持怀疑态度,没想到真的能做到,我们对此很满意。

Lew Nellen

我们用Oxylabs提供的爬虫API系统替代了我们的旧代理基础架构。他们的服务非常快非常可靠。目前我们得到的结果比以前的好太多了。

Aurelian

爬虫API工具帮我们优化了很多以前手动完成的工作。

Michele Young

其他人是怎么评价的?

我们的产品旨在为您分担工作量并提供基本数据。我们致力于提供一流的客户支持和丰富的资源,随时为您提供协助。

免维护的基础架构

得益于我们顶级的数据收集基础架构,随时可以直接使用


以机器学习驱动的代理管理

选择并轮换代理,评估哪些代理池在特定网站上效果最好,并以最低的响应时间为您提供超高成功率。


动态浏览器指纹识别

由人工智能驱动的指纹识别和由机器学习驱动的响应识别有助于在几乎没有CAPTCHA和IP封锁的情况下运行您的网络抓取操作。


JavaScript渲染

我们的专业团队可为您自动运行无头浏览器,帮助您从最先进的电子商务目标中获取公共数据。


结构化数据

基于机器学习的自适应解析功能可根据网站的变化进行调整,自动检测来自任何电商目标的产品属性,并提供JSON格式的解析数据。

轻松集成

我们的API集成过程既快速又简单。轻松结合您的终端URL、有效载荷和API用户凭证查询。将其发送到我们的API,并通过API或您选择的云存储桶检索结果。

复制

curl 'https://realtime.oxylabs.io/v1/queries' --user 'USERNAME:PASSWORD' 
-H 'Content-Type: application/json' 
-d '{"source": "amazon_search", "query": "shoes", "domain": "com", "geo_location": "90210", "parse": "true"}'

无头浏览器

只需一行代码就能渲染基于JavaScript的页面,无需复杂的浏览器开发或自动化的第三方工具。内置代理能帮助您访问来自世界各地的数据,并帮助解决反爬虫解决方案。由于能够将加载的页面保存为HTML或PNG,您可以很轻松地访问所需的数据。 

  • 轻松的JavaScript渲染

  • 先进的代理集成

  • 无缝的数据收集

了解更多

具有API功能的智能抓取

自定义解析器

在使用我们的基础架构的同时,独立编写解析指令并轻松解析任何目标。

  • 无需维护自有解析器

  • 使用XPath和CSS选择器定义自己的解析逻辑

  • 收集现成的结构化数据

网络爬虫

利用网络爬虫功能,搜索电商网站上的所有页面,并大规模、实时地获取数据。

  • 只从目标网站中收集您需要的数据

  • 控制爬取范围并定制最终结果

  • 以指定的格式检索您的结果

任务管家

通过使用任务管家功能进行调度,以所需的频率自动进行重复的抓取和解析作业。

  • 为不同的作业创建多个时间表

  • 自动接收数据到您首选的云存储中

  • 每项作业完成后即可收到通知

24/7实时支持和便捷功能

深度教程

使用Oxylabs文档GitHub repository,顺利入门。

无需代理管理

利用我们超过1.02亿个代理池,而不必担心其管理问题。

批量抓取

一次性抓取多个页面,每批最多可抓取1000个URL。

多种交付方式

通过API或您的云存储(AWS S3或GCS)来接收结果。

高度可扩展性

易于集成和定制,支持大规模的请求。

24/7实时支持

无论何时,我们的支持团队随时为您提供帮助。

电商爬虫API用例

定价情报

轻松跟踪电子商务产品定价情报,并解锁动态定价策略。

产品目录映射

轻松监控产品库存状态(有货/缺货)并收集分类数据。

竞争对手分析

轻松提取最畅销产品或任何产品页面数据并收集评论。

价格

常规
企业

只为成功的结果付费

采集高度本地化的数据

获得抓取专业知识

机不可失

免费试用

0

1周免费试用

仅限一位用户

初始级

49

2.8美元/1000个结果

49美元包月

入门级

99

2.6美元/1000个结果

99美元包月

进阶级

249

2.4美元/1000个结果

249美元包月

结果
5,000

17,500

38,000

104,000

速率限制

5个请求/秒

10个请求/秒

15 个请求/秒

30个请求/秒

JavaScript渲染
已解析的数据
24/7实时支持
专属客户经理

我们接受以下付款方式:

常见问题

什么是电商抓取?

电商抓取就是从电商市场或独立站提取公共电商产品数据。

电商爬虫API需要用时多久返回结果?

一般来说平均用时不到10秒。欲了解更多信息,请联系您的客户经理或我们的支持团队

我能用电商爬虫API实现重复抓取和解析自动作业吗?

可以,我们所有的爬虫API都提供免费的Scheduler功能。该功能支持安排重复抓取和解析自动作业。查看我们的文档,了解更多信息来设置您的Scheduler。

如何判断一个网站是否在使用JavaScript?

如果您在源代码中找不到文本,但在浏览器中可以看到它,它可能正用JavaScript来渲染。这是开发人员在对JavaScript密集型网站的信息进行抓取时所面临的最常见问题之一。您从服务器上接收的初始响应可能不包含您所期望的目视检查信息。Oxylabs的电商爬虫API能够从JavaScript渲染的网站中获取数据。

选择Oxylabs®,业务更上一层楼


联系我们

经过认证的数据中心和上游提供商

关注我们

  • we chat qr code

    微信公众号

    微信号

    Oxylabs

高级代理解决方案


隐私政策

oxylabs.cn© 2024 保留所有权利©