var client = require('cheerio-httpcli');

// Googleで「node.js」について検索する。
client.fetch('http://www.google.com/search', { q: 'node.js' }, function (err, $, res) {
  // レスポンスヘッダを参照
  console.log(res.headers);

  // HTMLタイトルを表示
  console.log($('title').text());

  // リンク一覧を表示
  $('a').each(function (idx) {
    console.log($(this).attr('href'));
  });
});

同梱の「example.js」はGoogle検索結果の一覧を取得するサンプルです。参考にしてください。

プロパティ

headers

requestモジュールで使用するリクエストヘッダ情報の連想配列です。デフォルトではUser-AgentのみIE9の情報を指定しています。

timeout

requestモジュールで指定するタイムアウト情報です。デフォルトでは30秒となっています。

gzip

サーバーとの通信にgzip転送を使用するかどうかを真偽値で指定します。デフォルトはtrue(gzip転送する)です。

その他

文字コードの判別は<head>タグのcharset情報を参照しています。charsetで指定された文字コードとWEBページの実際の文字コードが異なる場合は変換エラーとなります。
iconv-jpがインストールされていればそちらを優先して使用します。

Changelog

0.1.3 (2013-09-09)

エラーオブジェクトに呼び出し時にセットしたparamを追加

0.1.2 (2013-09-06)

リクエストヘッダのHostを自動でセットするようにした
gzip転送オプション追加
fetch()のcallbackの第3引数にrequestモジュールのresponseオブジェクトを追加
HTTPステータスコードが200以外によるエラーでもコンテンツを取得するようにした

0.1.1 (2013-04-11)

charset=xxxというようにダブル(or シングル)クォーテーションがない場合に文字コードの判定に失敗するケースを修正

0.1.0 (2013-03-18)

初版リリース

ライセンス

MIT licenseで配布します。

Keywords

FAQs

What is cheerio-httpcli?

Is cheerio-httpcli well maintained?

Package last updated on 09 Sep 2013

Did you know?

Socket for GitHub automatically highlights issues in each pull request and monitors the health of all your open source dependencies. Discover the contents of your packages and block harmful activity before you install or update your dependencies.

Install

cheerio-httpcli

cheerio-httpcli

iconvによる文字コード変換とcheerioによるHTMLパースを組み込んだNode.js用HTTPクライアントモジュール

インストール

メソッド

fetch(url[, get-param], callback)

サンプル