Python爬虫中遇到JS反爬，除了selenium还有哪些解决方案？

对于JS反爬，除了Selenium还有几个更高效的方案：

1. 直接调用JS引擎：用PyExecJS或Node.js子进程执行关键JS代码。比如遇到加密参数时，直接抽离网站JS中的加密函数本地执行：

import execjs
with open('encrypt.js') as f:
    ctx = execjs.compile(f.read())
result = ctx.call('getEncryptedParam', 'data')

1. 逆向分析网络请求：用Chrome开发者工具的Network面板，找到JS最终发送的真实API接口。很多网站的数据其实是通过XHR/Fetch请求获取的，直接模拟这些请求更简单。

2. 使用Playwright/Puppeteer的无头模式：比Selenium轻量，能生成真实的浏览器环境但资源消耗更小：

from playwright.sync_api import sync_playwright

with sync_playwright() as p:
    browser = p.chromium.launch(headless=True)
    page = browser.new_page()
    page.goto(url)
    content = page.content()

1. 找数据接口的替代源：有些网站有移动端API或遗留的未加密接口，参数更简单。

建议优先尝试逆向真实接口，实在不行再用无头浏览器。