搜索引擎爬虫如何运行?

Support Account
Support Account
  • 更新于

SERP_API_How_IT_works_diagram.png

  • 用户通过搜索引擎爬虫通道发送请求到亮数据的超级代理服务器
  • 超级代理服务器将请求路由到最佳的代理 IP
  • 代理 IP 将请求发送对搜索引擎。此步使用亮网络解锁器解锁技术
  • 响应结果从搜索引擎返回到代理 IP,通过超级代理服务器,返回到用户

您可以通过亮数据的 搜索引擎爬虫 API 指令模拟 构建和使用您的搜索引擎爬虫 API 请求,它会根据参数自动生成API指令。点击了解更多 《PLAYGROUND ARTICLE》

请注意:

  • 搜索引擎爬虫 API 只有通过 API 才能运行(支持的编程语言包括:Shell, Node.js, Java, C#, Python, VB, PHP, Ruby, Perl)
  • 因每个请求都是通过不同的IP发送,所以不支持连续性会话
  • 可定位 HTTP 和 HTTPS URL。 请参阅如何发送搜索引擎爬虫 HTTPS 请求