NoDriver: 开源高级浏览器自动化工具

nodriver

NoDriver:突破反爬限制的开源浏览器自动化工具

在Web自动化和数据采集领域,反爬虫措施日益严格的今天,一个突破性的工具应运而生 - NoDriver。这个先进的自动化库继承了Undetected-Chromedriver的衣钵,提供了一套旨在规避大多数反bot解决方案检测的功能,同时大幅提升了工具的性能。

NoDriver是一个完全异步的工具,它彻底摒弃了传统的Selenium或webdriver二进制文件,实现了与浏览器的直接通信。这种方法不仅降低了被大多数反bot解决方案检测的几率,还显著提高了工具的性能。

NoDriver的主要特性

极速性能: 通过移除对Chromedriver二进制文件和Selenium的依赖,NoDriver提供了显著优于传统方法的性能提升。
隐蔽模式: 该库经过精心调校,能够在大多数反bot解决方案面前保持不被检测的状态,使操作更加顺畅。
易用性: 大多数功能都采用了最佳实践默认设置,开箱即用,非常适合快速原型开发。
全面的元素交互: 智能元素查找功能允许与iframe内的元素进行交互,可以通过选择器或文本内容选择元素。
动态配置文件管理: 每个会话都使用全新的配置文件,并在结束后自动清理。同时提供保存和加载cookie的选项,这对避免重复登录步骤特别有用。
高度可定制: 该工具利用了完整的Chrome DevTools Protocol (CDP)域、方法和事件,提供了对浏览器的详细控制。

安装NoDriver

NoDriver的安装非常简单。对于undetected-chromedriver包的用户,只需一行pip命令即可安装:

pip install undetected-chromedriver

快速上手示例

以下是一个简单的示例,展示了如何使用NoDriver初始化浏览器实例,并执行基本操作如页面导航、截图和元素操作:

import asyncio
import nodriver as uc

async def main():
    browser = await uc.start()
    page = await browser.get('https://example.com')
    await page.save_screenshot()
    # 更多交互操作...

if __name__ == '__main__':
    uc.loop().run_until_complete(main())

高级应用示例

除了基本的导航和截图功能,NoDriver在复杂的自动化任务中表现出色。例如,以下代码片段展示了如何使用NoDriver以编程方式创建Twitter账户,这充分展示了其处理动态交互的能力,如基于文本匹配点击按钮和填充随机数据的表单:

import random
import string
import nodriver as uc

async def main():
    browser = await uc.start()
    page = await browser.get("https://twitter.com")
    
    # 查找并点击"创建账户"按钮
    create_account = await page.find("create account", best_match=True)
    await create_account.click()
    
    # 填写注册信息
    email = await page.select("input[type=email]")
    await email.send_keys(f"{random_string(8)}@{random_string(8)}.com")
    
    name = await page.select("input[type=text]")
    await name.send_keys(random_string(8))
    
    # 选择生日信息
    month, day, year = await page.select_all("select")
    await month.send_keys(random.choice(months).title())
    await day.send_keys(str(random.randint(1, 28)))
    await year.send_keys(str(random.randint(1980, 2005)))
    
    # 点击下一步和注册按钮
    next_btn = await page.find(text="next", best_match=True)
    await next_btn.mouse_click()
    
    sign_up_btn = await page.find("Sign up", best_match=True)
    await sign_up_btn.click()
    
    # 等待并关闭浏览器
    await page.sleep(10)
    browser.stop()

if __name__ == "__main__":
    uc.loop().run_until_complete(main())