将Apify与亮数据Bright Data集成
将Apify与亮数据Bright Data集成
代理通常是网页抓取的重要组成部分。用户需要在网页抓取时始终保持隐匿并应对目标网站部署的反爬措施和其他限制。
亮数据Bright Data能解决这些问题💪
亮数据Bright Data代理解决方案能帮助您顺利完成网页抓取和自动化任务。亮数据代理与Apify无缝集成,帮您摆脱屏蔽执行工作。
现在,让我们开始集成!
如何将Apify代理与亮数据Bright Data代理 IP 集成
在亮数据Bright Data页面执行操作
- 登录亮数据Bright Data帐户并进入仪表板。
- 点击Proxies并创建一个通道。
- 您可以在机房代理、动态住宅代理和移动 IP代理间进行选择。
- 根据项目要求配置和创建通道。
- 点击通道名称旁边的设置图标。
- 访问用户名和密码。
在Apify页面上执行操作
- 前往apify.com并登录。
- 进入Apify控制台后,点击左侧菜单中的 Actors。
- 在“商店”选项卡下,找到谷歌地图爬虫/Google Maps Scraper 。我们将以此作为示例。点击它。
- 导航到“Input/输入”选项卡。
- 输入要抓取的关键字或谷歌地图 URL。
- 向下滚动以查找代理设置。
- 点击自定义代理并按以下格式输入代理凭证。
- http://username:password@hostname:port您可以从我们刚刚创建的通道设置中获取用户名和密码。
- 亮数据Bright Data代理的主机名是zproxy.lum-superproxy.io ,端口是 22225。
- 最终的亮数据Bright Data代理 URL : http://lum-customer-c_375eb5c4-zone-zone5 :[email protected]:22225
- 点击“运行”即可。
您可以预览并以HTML、JSON、CSV、Excel、XML和RSS feed格式下载数据。
要确认Apify使用了代理,请进入亮数据Bright Data仪表板,导航到代理并检查事件日志。
如果遇到任何问题,请联系Bright Data获取在线支持。