链接爬取

不建议使用 WebDriver 来爬取链接。不是因为它不能做到,而是因为 WebDriver 绝对不是最理想的工具。WebDriver 需要时间启动,可能需要几秒钟甚至一分钟的时间,具体取决于您的测试编写方式,才能到达页面并遍历 DOM。

与其使用 WebDriver 来完成此操作,不如执行 curl 命令或使用 BeautifulSoup 等库来节省大量时间,因为这些方法不依赖于创建浏览器并导航到页面。通过不使用 WebDriver 执行此任务,您可以节省大量时间。