這裡來介紹一個Node.js的模組-request。有了這個模組,http請求變的超簡單。
Request使用超簡單,同時支援https和重定向。
var request = require('request'); request('http://www.google.com', function (error, response, body) { if (!error && response.statusCode == 200) { console.log(body) // 打印google首页 } })
流:
任何回應都可以輸出到檔案流。
流:
任何回應都可以輸出到檔案流。
request('http://google.com/doodle.png').pipe(fs.createWriteStream('doodle.png'))
反過來,也可以將文件傳給PUT或POST請求。未提供header的情況下,會偵測檔案後綴名,在PUT請求中設定對應的content-type。
fs.createReadStream('file.json').pipe(request.put('http://mysite.com/obj.json'))
請求也可以pipe給自己。這種情況會保留原content-type和content-length。
request.get('http://google.com/img.png').pipe(request.put('http://mysite.com/img.png'))
表單:
request支援application /x-www-form-urlencoded和multipart/form-data實作表單上傳。
x-www-form-urlencoded很簡單:
request.post('http://service.com/upload', {form:{key:'value'}})
或:
request.post('http://service.com/upload').form({key:'value'})
var r = request.post('http://service.com/upload') var form = r.form() form.append('my_field', 'my_value') form.append('my_buffer', new Buffer([1, 2, 3])) form.append('my_file', fs.createReadStream(path.join(__dirname, 'doodle.png')) form.append('remote_file', request('http://google.com/doodle.png'))
HTTP認證:
request.get('http://some.server.com/').auth('username', 'password', false);
或
request.get('http://some.server.com/', { 'auth': { 'user': 'username', 'pass': 'password', 'sendImmediately': false } });
// Twitter OAuth var qs = require('querystring') , oauth = { callback: 'http://mysite.com/callback/' , consumer_key: CONSUMER_KEY , consumer_secret: CONSUMER_SECRET } , url = 'https://api.twitter.com/oauth/request_token' ; request.post({url:url, oauth:oauth}, function (e, r, body) { // Ideally, you would take the body in the response // and construct a URL that a user clicks on (like a sign in button). // The verifier is only available in the response after a user has // verified with twitter that they are authorizing your app. var access_token = qs.parse(body) , oauth = { consumer_key: CONSUMER_KEY , consumer_secret: CONSUMER_SECRET , token: access_token.oauth_token , verifier: access_token.oauth_verifier } , url = 'https://api.twitter.com/oauth/access_token' ; request.post({url:url, oauth:oauth}, function (e, r, body) { var perm_token = qs.parse(body) , oauth = { consumer_key: CONSUMER_KEY , consumer_secret: CONSUMER_SECRET , token: perm_token.oauth_token , token_secret: perm_token.oauth_token_secret } , url = 'https://api.twitter.com/1/users/show.json?' , params = { screen_name: perm_token.screen_name , user_id: perm_token.user_id } ; url += qs.stringify(params) request.get({url:url, oauth:oauth, json:true}, function (e, r, user) { console.log(user) }) }) })
var request = require('request'); var options = { url: 'https://api.github.com/repos/mikeal/request', headers: { 'User-Agent': 'request' } }; function callback(error, response, body) { if (!error && response.statusCode == 200) { var info = JSON.parse(body); console.log(info.stargazers_count +"Stars"); console.log(info.forks_count +"Forks"); } } request(options, callback);
var request = request.defaults({jar: true}) request('http://www.google.com', function () { request('http://images.google.com') })
var j = request.jar() var request = request.defaults({jar:j}) request('http://www.google.com', function () { request('http://images.google.com') })
var j = request.jar() var cookie = request.cookie('your_cookie_here') j.setCookie(cookie, uri, function (err, cookie){}) request({url: 'http://www.google.com', jar: j}, function () { request('http://images.google.com') })
var request = require('request'), fs = require('fs'); request('https://www.google.com.hk/images/srpr/logo3w.png').pipe(fs.createWriteStream('doodle.png'));
(示例
這裡寫了一個很簡單的範例,用來抓取去哪裡網的飯店查詢資料(取得飯店某一時段內各房型的價格排名):
var request = require('request'), fs = require('fs'); var reqUrl = 'http://hotel.qunar.com/price/detail.jsp?fromDate=2012-08-18&toDate=2012-08-19&cityurl=shanghai_city&HotelSEQ=shanghai_city_2856&cn=5'; request({uri:reqUrl}, function(err, response, body) { //console.log(response.statusCode); //console.log(response); //如果数据量比较大,就需要对返回的数据根据日期、酒店ID进行存储,如果获取数据进行对比的时候直接读文件 var filePath = __dirname + '/data/data.js'; if (fs.exists(filePath)) { fs.unlinkSync(filePath); console.log('Del file ' + filePath); } fs.writeFile(filePath, body, 'utf8', function(err) { if (err) { throw err; } console.log('Save ' + filePath + ' ok~'); }); console.log('Fetch ' + reqUrl + ' ok~'); });
一個做飯店生意的朋友,想知道自己在網站上提供給客戶的價格的競爭力:
1、如果提供的價格過低,自己賺到的錢就會少了,所以如果自己價格是最低了,就需要看第二低是多少,然後決定是否調整;
2、如果提供的價格過高,那麼被搜索出來的排名結果就比較靠後,沒什麼客戶來預訂酒店,業務就沒有了
因為做的酒店預訂業務很多,比如超過2千家以上,如果一個一個依賴人工去查詢排名就比較被動,而且很難再做大,所以他的這個需求我分析了一下是可行的,而且可以做成一個很好的即時預警系統(當然數據5~10分鐘會自動在頁面刷新一次)。這樣才能保障利潤最大化,提高銷售、客戶部門的工作效率,加快飯店的合作數量和公司的人員擴張:
1、不虧本,虧本的買賣不做;
2、如果發現提供的價格過低或是過高,需要支援調用平台的api接口,直接修改價格;
3、有自動生成分析報表功能,分析競爭對手在價格調整策略上的變化情況;
更多Node.js中Request模組處理HTTP協定請求的基本使用教學相關文章請關注PHP中文網!