查看: 40|回复: 0

这几天用selenium操作chrome浏览器尝试采集一些电商数据,但被网站检测出来,后面就没法访问了,我怀疑是ip被封了。

[复制链接]

9

主题

1

回帖

29

积分

新手上路

积分
29
发表于 2026-3-13 22:07:46 | 显示全部楼层 |阅读模式
这几天用selenium操作chrome浏览器尝试采集一些电商数据,但被网站检测出来,后面就没法访问了,我怀疑是ip被封了。


搜索找了很多解决方案,都不太行,有个stackoverflow的博主建议用亮数据的远程浏览器,和操作普通浏览器一样,但能绕过反爬机制,试了下确实可以。

Scraping Browser是有图形界面的有头浏览器,托管在亮数据平台上,如下:
http://t.cn/A6Bt6ZZI

它的工作原理和普通自动化浏览器一样,但它封装了代理和网站解锁能力,能进行各种高级爬虫操作,比如:CAPTCHA 识别、浏览器指纹、自动重试、请求头选择、处理 cookies、JavaScript 渲染等,对于反爬机制复杂的网站都比较适用。
##



本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

×
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关注公众号

相关侵权、举报、投诉及建议等,请发 E-mail:admin@discuz.vip

Powered by Discuz! X5.0 © 2001-2026 Discuz! Team.|青ICP备2025004122号-1

在本版发帖
关注公众号
返回顶部