有人了解这个很新鲜的 python 网页自动化库吗,看介绍很高效、很牛逼的样子。
之前尝试用 Selenium 写过一个自动预约健身房的小项目,结果一直过不了网页的反爬机制,打开网页一片空白... 不知道用这个能不能轻松搞成。
有人了解这个很新鲜的 python 网页自动化库吗,看介绍很高效、很牛逼的样子。
之前尝试用 Selenium 写过一个自动预约健身房的小项目,结果一直过不了网页的反爬机制,打开网页一片空白... 不知道用这个能不能轻松搞成。
|
tomczhenMar 13, 2025
1
一般自动化库是不会处理反爬的。可以考虑配合支持 api 的指纹浏览器或者类似 patchright 这种专门 patch 了反爬的库。
|
|
GaGimMar 13, 2025
2
已经很久不用 selenium 了,还要适配浏览器驱动,略麻烦
|
|
3
@GaGim 现在用什么,Cloudflare 的验证码的一直过不了
|
|
JimLee0921Mar 13, 2025
4
dp 不是挺好用的么
|
|
5
看了一下是基于 cdp 协议的,为什么不用 puppeteer 和 playwright ?没看出来哪里牛逼的样子...
|
|
6
放 5 年前也许能和 puppeteer/playwright 抢下生态位,2025 年出个这玩意儿简直是穿越了
|
|
TinkMar 13, 2025
7
drissionpage 应该比这个靠谱点吧
|
|
BingchunmoliMar 13, 2025 via Android
8
我平时写爬虫还是只会用 selenium 缝缝补补,有什么 生态推荐吗
|
|
zeusho871Mar 14, 2025
9
@13240284671 Drissonpage 直接秒了
|
|
jpyl0423Mar 14, 2025
10
playwright 有些网站过不了 Cloudflare ,Drissonpage 可以,不过无头模式也过不了
|
|
yaleyuMar 14, 2025
11
@jpyl0423 #10 Drissionpage 无头模式能过 cloudflare ,UA 设置成一模一样的版本
co = ChromiumOptions() co.headless(True).set_argument('--no-sandbox') page = ChromiumPage(co) ua = page.user_agent.replace('Headless', '') page.quit() co.set_user_agent(ua) page = ChromiumPage(co) |
|
z740713651Mar 15, 2025
12
selenium 现在好像不需要手动配置驱动了,会自动下载,不用指明 driver 地址。
|
|
GaGimMar 18, 2025
13
@13240284671 dp 呀
|
|
13240284671Mar 18, 2025
14
@GaGim dp 我发现也要手动点一下才行,有解决方案吗
|
|
GaGimMar 19, 2025
15
@z740713651 前段时间看到了,但还是更喜欢用 dp
|