刚学Nodejs不久，写了个抓页面的，但是返回不了结果。求大神指正

根据你描述的情况，问题可能出在异步操作上。在Node.js中，处理异步操作需要特别注意回调函数和异步流程控制。你的doRequest方法中的逻辑是异步执行的，而你试图立即返回结果。你需要确保在所有异步操作完成后才返回结果。

以下是一个改进后的示例代码，使用回调函数来处理异步操作，并确保返回结果：

var http = require('http');
var cheerio = require('cheerio');
var iconv = require('iconv-lite');

http.createServer(function (req, res) {
    res.writeHead(200, {'Content-Type': 'application/json', 'Access-Control-Allow-Origin': '*'});
    var postData = "";
    req.setEncoding('utf-8');
    req.on('data', function(chunk) {
        postData += chunk;
    });
    req.on('end', function() {
        var value = postData.replace(/kw=/, '');
        doRequest(value, 0, function(result) {
            res.end(JSON.stringify({rank: result}));
        });
    });
}).listen(10088);

var doRequest = function(kw, page, callback) {
    page = page * 10;
    var options = {
        host: 'zhidao.baidu.com',
        port: 80,
        path: '/search?word=' + encodeURIComponent(kw) + '&pn=' + page
    };
    http.get(options, function(res) {
        var buffers = [], size = 0;
        res.on('data', function(buffer) {
            buffers.push(buffer);
            size += buffer.length;
        });
        res.on('end', function() {
            var buffer = Buffer.concat(buffers, size);
            var gbk_buffer = iconv.decode(buffer, 'GBK');
            var $ = cheerio.load(gbk_buffer.toString());
            
            var target = "DARRY RING";
            var isBreak = false;
            var htmlTop = $("#cluster-items").find(".con-all").slice(0, 3);
            htmlTop.each(function() {
                var tContent = $(this).text().replace(/\s+/g, "");
                tContent = tContent.toLowerCase();
                if (tContent.indexOf(target.toLowerCase()) > -1) {
                    isBreak = true;
                    return false;
                }
            });

            if (isBreak) {
                callback({keyword: kw, score: 1});
                return;
            }

            var html = $("#wgt-list").find("dd.answer");
            var n = 0;
            html.each(function(i, elem) {
                var content = $(this).text().replace(/\s+/g, "");
                content = content.toLowerCase();
                if (content.indexOf(target.toLowerCase()) > -1 && n <= html.length) {
                    n = i + 1;
                    return false;
                }
            });

            if (n == 0) {
                page++;
                if (page < 5) {
                    doRequest(kw, page, callback);
                } else {
                    callback({keyword: kw, score: 9999});
                }
            } else {
                var num = page + n;
                callback({keyword: kw, score: num});
            }
        });
    }).on('error', function(e) {
        console.log("Got error: " + e.message);
    });
};

解释

1. HTTP Server:

   • 在req.on('end')回调中调用doRequest方法，并传递一个回调函数callback。
   • 在doRequest的回调函数中，使用res.end发送最终结果。

2. doRequest:

   • 使用http.get进行异步请求。
   • 在res.on('end')回调中处理响应数据。
   • 使用Buffer.concat合并缓冲区。
   • 使用iconv.decode解码GBK编码的数据。
   • 使用cheerio解析HTML。
   • 在完成所有处理后，调用callback函数返回结果。

通过这种方式，你可以确保在所有异步操作完成后才返回结果。