BlogJava-老杨（javaer）-文章分类-NODE.JShttp://www.blogjava.net/whmily/category/53800.htmlzh-cnWed, 07 Aug 2013 02:52:17 GMTWed, 07 Aug 2013 02:52:17 GMT60node.js中 URL及HTML转GBKhttp://www.blogjava.net/whmily/articles/402487.html老杨（javaer）老杨（javaer）Wed, 07 Aug 2013 01:37:00 GMThttp://www.blogjava.net/whmily/articles/402487.htmlhttp://www.blogjava.net/whmily/comments/402487.htmlhttp://www.blogjava.net/whmily/articles/402487.html#Feedback0http://www.blogjava.net/whmily/comments/commentRss/402487.htmlhttp://www.blogjava.net/whmily/services/trackbacks/402487.html需要安装iconv-lite或iconv模块（后者需要C编译器编译）
var http = require('http'); 
var iconv = require('iconv-lite'); 
var BufferHelper = require('bufferhelper');
function  writeURL(urlPrefix, keyword, count, index){
    var url = urlPrefix+ encodeURIComponent_GBK(keyword);
    http.get(url,function(res){
        console.log("count: "+count+"; index: "+(index+1) + "; keyword: "+keyword);
        var bufferHelper = new BufferHelper();
        res.on('data', function (chunk) {
            bufferHelper.concat(chunk);
        });
        res.on('end',function(){ 
            var html = iconv.decode(bufferHelper.toBuffer(),'GBK');//转为GBK编码
            console.log(html);
        });
    })
}

function encodeURIComponent_GBK(str){
  if(str==null || typeof(str)=='undefined' || str=='') 
    return '';
  var a = str.toString().split('');
  for(var i=0; i<a.length; i++) {
    var ai = a[i];
    if( (ai>='0' && ai<='9') || (ai>='A' && ai<='Z') || (ai>='a' && ai<='z') || ai==='.' || ai==='-' || ai==='_') continue;
    var b = iconv.encode(ai, 'gbk');//转为GBK编码
    var e = ['']; 
    for(var j = 0; j<b.length; j++) 
      e.push( b.toString('hex', j, j+1).toUpperCase() );
    a[i] = e.join('%');
  }
  return a.join('');
}


]]>