Python中requests请求京东商品搜索页返回登录页面问题如何解决

遇到requests请求京东搜索页返回登录页面，这通常是触发了京东的反爬机制。京东会通过Cookie、请求头、IP频率等多种手段验证请求来源。

核心解决方案是模拟浏览器请求，主要关注以下几点：

1. 完整的请求头：必须包含User-Agent，建议加上Referer等常见头
2. 处理Cookie：使用Session对象保持会话，首次访问获取Cookie
3. 参数构造：搜索关键词需要正确编码

import requests
from urllib.parse import quote

def search_jd(keyword):
    # 使用Session保持会话
    session = requests.Session()
    
    # 先访问首页获取初始Cookie
    home_url = "https://www.jd.com"
    session.get(home_url)
    
    # 构造搜索URL
    encoded_keyword = quote(keyword)
    search_url = f"https://search.jd.com/Search?keyword={encoded_keyword}"
    
    # 完整请求头
    headers = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36',
        'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8',
        'Accept-Language': 'zh-CN,zh;q=0.9',
        'Accept-Encoding': 'gzip, deflate, br',
        'Connection': 'keep-alive',
        'Upgrade-Insecure-Requests': '1',
        'Referer': 'https://www.jd.com/',
    }
    
    try:
        response = session.get(search_url, headers=headers, timeout=10)
        response.raise_for_status()
        
        # 检查是否返回登录页
        if "login" in response.url:
            print("仍然被重定向到登录页")
            return None
        
        # 检查页面内容
        if len(response.text) < 10000:  # 正常搜索页内容较多
            print("可能返回了验证页面")
            return None
            
        return response.text
        
    except requests.RequestException as e:
        print(f"请求失败: {e}")
        return None

# 使用示例
if __name__ == "__main__":
    result = search_jd("手机")
    if result:
        print("成功获取页面，长度:", len(result))

如果这个基础方案仍然被重定向，说明京东对你的IP或请求特征进行了更严格的验证。这时候可能需要：

• 添加更多请求头字段
• 控制请求频率
• 使用代理IP

简单说就是模拟浏览器行为越真实，成功率越高。