這裡來介紹一個Node.js的模組－request。有了這個模組，http請求變的超簡單。
Request使用超簡單，同時支援https和重定向。
var request = require('request');
request('http://www.google.com', function (error, response, body) {
if (!error && response.statusCode == 200) {
console.log(body) // 打印google首页
}
})
流：
任何回應都可以輸出到檔案流。
request('http://google.com/doodle.png').pipe(fs.createWriteStream('doodle.png'))
反過來，也可以將文件傳給PUT或POST請求。未提供header的情況下，會偵測檔案後綴名，在PUT請求中設定對應的content-type。
fs.createReadStream('file.json').pipe(request.put('http://mysite.com/obj.json'))
請求也可以pipe給自己。這種情況會保留原content-type和content-length。
request.get('http://google.com/img.png').pipe(request.put('http://mysite.com/img.png'))
表單：
request支援application/x-www-form-urlencoded和multipart/form-data實作表單上傳。
x-www-form-urlencoded很簡單：
request.post('http://service.com/upload', {form:{key:'value'}})
或：
request.post('http://service.com/upload').form({key:'value'})
使用multipart/form-data不用操心設定header之類的瑣事，request會幫你解決。
var r = request.post('http://service.com/upload')
var form = r.form()
form.append('my_field', 'my_value')
form.append('my_buffer', new Buffer([1, 2, 3]))
form.append('my_file', fs.createReadStream(path.join(__dirname, 'doodle.png'))
form.append('remote_file', request('http://google.com/doodle.png'))
HTTP認證：
request.get('http://some.server.com/').auth('username', 'password', false);
或
request.get('http://some.server.com/', {
'auth': {
'user': 'username',
'pass': 'password',
'sendImmediately': false
}
});
sendImmediately，預設為真，發送一個基本的認證header。設為false之後，收到401會重試（伺服器的401回應必須包含WWW-Authenticate指定認證方法）。
sendImmediately為真時支援Digest認證。
OAuth登入：
// Twitter OAuth
var qs = require('querystring')
, oauth =
{ callback: 'http://mysite.com/callback/'
, consumer_key: CONSUMER_KEY
, consumer_secret: CONSUMER_SECRET
}
, url = 'https://api.twitter.com/oauth/request_token'
;
request.post({url:url, oauth:oauth}, function (e, r, body) {
// Ideally, you would take the body in the response
// and construct a URL that a user clicks on (like a sign in button).
// The verifier is only available in the response after a user has
// verified with twitter that they are authorizing your app.
var access_token = qs.parse(body)
, oauth =
{ consumer_key: CONSUMER_KEY
, consumer_secret: CONSUMER_SECRET
, token: access_token.oauth_token
, verifier: access_token.oauth_verifier
}
, url = 'https://api.twitter.com/oauth/access_token'
;
request.post({url:url, oauth:oauth}, function (e, r, body) {
var perm_token = qs.parse(body)
, oauth =
{ consumer_key: CONSUMER_KEY
, consumer_secret: CONSUMER_SECRET
, token: perm_token.oauth_token
, token_secret: perm_token.oauth_token_secret
}
, url = 'https://api.twitter.com/1/users/show.json?'
, params =
{ screen_name: perm_token.screen_name
, user_id: perm_token.user_id
}
;
url += qs.stringify(params)
request.get({url:url, oauth:oauth, json:true}, function (e, r, user) {
console.log(user)
})
})
})
客製HTTP header
User-Agent之類可以在options物件中設定。在下面的例子中，我們呼叫github API找出某倉庫的收藏數和派生數。我們使用了客製化的User-Agent和https.
var request = require('request');
var options = {
url: 'https://api.github.com/repos/mikeal/request',
headers: {
'User-Agent': 'request'
}
};
function callback(error, response, body) {
if (!error && response.statusCode == 200) {
var info = JSON.parse(body);
console.log(info.stargazers_count +"Stars");
console.log(info.forks_count +"Forks");
}
}
request(options, callback);
cookies：
預設情況下，cookies是停用的。在defaults或options中將jar設為true，使後續的請求都使用cookie.
var request = request.defaults({jar: true})
request('http://www.google.com', function () {
request('http://images.google.com')
})
透過建立request.jar()的新實例，可以使用客製化的cookie，而不是request全域的cookie jar。
var j = request.jar()
var request = request.defaults({jar:j})
request('http://www.google.com', function () {
request('http://images.google.com')
})
或
var j = request.jar()
var cookie = request.cookie('your_cookie_here')
j.setCookie(cookie, uri, function (err, cookie){})
request({url: 'http://www.google.com', jar: j}, function () {
request('http://images.google.com')
})
注意，setCookie至少需要三個參數，最後一個是回呼函數。
可以用request的pipe方法很方便的取得圖片的檔案流
var request = require('request'),
fs = require('fs');
request('https://www.google.com.hk/images/srpr/logo3w.png').pipe(fs.createWriteStream('doodle.png'));
更多使用方法和說明可點擊這裡繼續閱讀：https://github.com/mikeal/request/
範例
這裡寫了一個很簡單的範例，用來抓取去哪裡網的飯店查詢資料（取得飯店某一時段內各房型的價格排名）：
var request = require('request'),
fs = require('fs');
var reqUrl = 'http://hotel.qunar.com/price/detail.jsp?fromDate=2012-08-18&toDate=2012-08-19&cityurl=shanghai_city&HotelSEQ=shanghai_city_2856&cn=5';
request({uri:reqUrl}, function(err, response, body) {
//console.log(response.statusCode);
//console.log(response);
//如果数据量比较大，就需要对返回的数据根据日期、酒店ID进行存储，如果获取数据进行对比的时候直接读文件
var filePath = __dirname + '/data/data.js';
if (fs.exists(filePath)) {
fs.unlinkSync(filePath);
console.log('Del file ' + filePath);
}
fs.writeFile(filePath, body, 'utf8', function(err) {
if (err) {
throw err;
}
console.log('Save ' + filePath + ' ok~');
});
console.log('Fetch ' + reqUrl + ' ok~');
});
這個例子源自於一個做飯店生意的朋友，想知道自己在網站上提供給客戶的價格的競爭力：
1、如果提供的價格過低，自己賺到的錢就會少了，所以如果自己價格是最低了，就需要看第二低是多少，然後決定是否調整；
2、如果提供的價格過高，那麼被搜尋出來的排名結果就比較靠後，沒什麼客戶來預訂飯店，業務就沒有了
因為做的飯店預訂業務很多，例如超過2千家以上，如果一個一個依賴人工去查詢排名就比較被動，而且很難再做大，所以他的這個需求我分析了一下是可行的，而且可以做成一個很好的即時預警系統（當然數據5~10分鐘會自動在頁面刷新一次）。這樣才能保障利潤最大化，提高銷售、客戶部門的工作效率，並加速飯店的合作數量和公司的人員擴張：
1、不虧本，虧本的買賣不做；
2、如果發現提供的價格過低或是過高，需要支援調用平台的api接口，直接修改價格；
3、有自動產生分析報表功能，分析競爭對手在價格調整策略上的變化；
