2025年如何解决网页抓取中的验证码问题

2025年，验证码依然困扰着我们

(作者：为了避免你们点击一万个交通信号灯而操碎了心的那个人)

网站变得更聪明了。验证码现在会分析一切：

• 你的鼠标移动轨迹。
• 你的浏览器指纹。
• 你解决谜题的速度（机器人太高效了）。
  
  但不用担心——Capsolver 的API和扩展程序也得到了改进。

认识你新的好朋友：Capsolver

选择你的解决方案：

• API: 适用于想要完全控制的程序员。
• 扩展程序: 适用于想要点击“解决”然后喝咖啡的人类。
  支持的验证码：

✅ reCAPTCHA v2/v3
✅ Cloudflare Turnstile
✅ hCaptcha
✅ AWS WAF
✅ 基于文本的验证码

方法一：使用 Capsolver 的 API（适用于程序员）

步骤 1：获取你的 API 密钥

1. 在 Capsolver 注册。
2. 从 仪表盘 获取你的 clientKey。

步骤 2：通过 3 个 API 调用来解决 reCAPTCHA

# 提交任务
POST https://api.capsolver.com/createTask
{
  "clientKey": "YOUR_API_KEY",
  "task": {
    "type": "ReCaptchaV2TaskProxyless",
    "websiteURL": "https://example.com",
    "websiteKey": "6Le-wvkSAAAAAPBMRTvw0Q4Muexq9bi0DJwx_mJ-"
  }
}

# 获取结果（重复直到 "status": "ready"）
POST https://api.capsolver.com/getTaskResult
{
  "clientKey": "YOUR_API_KEY",
  "taskId": "61138bb6-19fb-11ec-a9c8-0242ac110006"
}

# 在你的爬虫中使用 token (gRecaptchaResponse)!

方法二：神奇的浏览器扩展程序

适用于普通人：

• Chrome: 在此安装
• Firefox: 在此安装

适用于自动化高手：

1. 从 GitHub 下载：
   • 版本： https://github.com/capsolver/capsolver-browser-extension/releases
2. 修改 config.js：
   
   javascript 复制代码

   {
     // 你从 Capsolver 获取的 API 密钥
     apiKey: "YOUR_API_KEY",
   
     // 切换验证码类型
     enabledForRecaptcha: true,
     enabledForCloudflare: true,
     enabledForAWS: true,
     enabledForTextCaptcha: true
   }

3. 加载到 Puppeteer/Playwright：
   javascript 复制代码

   const browser = await puppeteer.launch({
     args: ['--load-extension=./capsolver-extension']
   });

Config.js：秘密武器

关键设置：

• enabledForCloudflare: true: 用于 Turnstile 验证码。
• enabledForRecaptcha: true: Google 的经典验证码。
• enabledForAWS: true: Amazon 的隐蔽验证码。
• enabledForTextCaptcha: true: 老式的“输入这些字母”谜题。

专业提示： 如果你不确定网站使用的是哪种验证码，请全部启用。

真实世界的代码示例

使用 Capsolver API 的 Python 爬虫：

import requests

def solve_recaptcha():
    task_url = "https://api.capsolver.com/createTask"
    task_data = {
        "clientKey": "YOUR_API_KEY",
        "task": {
            "type": "ReCaptchaV2TaskProxyless",
            "websiteURL": "https://example.com",
            "websiteKey": "6Le-wvkSAAAAAPBMRTvw0Q4Muexq9bi0DJwx_mJ-"
        }
    }
    response = requests.post(task_url, json=task_data).json()
    task_id = response["taskId"]

    # 轮询结果
    while True:
        result = requests.post("https://api.capsolver.com/getTaskResult", json={"clientKey": "YOUR_API_KEY", "taskId": task_id}).json()
        if result["status"] == "ready":
            return result["solution"]["gRecaptchaResponse"]

“为什么不起作用？！” 故障排除指南

• 问题： “没有验证码被解决！”
  • 解决方法： 检查 config.js——你启用了正确的验证码类型了吗？
• 问题： “API 返回 '无效的 API 密钥'！”
  • 解决方法： 从 Capsolver 的仪表盘 再次复制粘贴你的密钥。
• 问题： “Cloudflare 仍然阻止我！”
  • 解决方法： 旋转代理，旋转指纹并降低你的爬虫速度。

祝你爬取愉快——愿验证码永远对你友好! 😎