[Nodejs] Requestでサーバー認証エラーが出た時の対処方法
世の中のWEBサイトははSSL,TLSが必須の時代 […]
Continue reading »Tag Archives: nodejs
Nodejsのrequestとfsライブラリを使って、データダウンロードをする方法
WEBサイトスクレイピングをやっていると、画像デー […]
Continue reading »
Nodejsでファイル読み込みを簡単に行うサンプル
テンプレートファイルや、特定のテキストデータなど、 […]
Continue reading »
nodejsでコマンドクエリのargument情報を簡単に取得するPHPのgetoptのようなスニペットスニペット
PHPのgetopt関数をnodejsで使いたいと […]
Continue reading »
[ベンチ比較] Nodejs : Nginx : PHP
WEBサービスを構築する際に、基盤プラットフォーム […]
Continue reading »
NodejsのDate関数が9時間ずれてしまうGMT対応
朝起きたときに、本来起きなければ行けない時刻を過ぎ […]
Continue reading »
[Nodejs] fsライブラリを使って多重階層のmkdirを実現するソースコード
Nodejsは、Pythonにも負けずと劣らずライ […]
Continue reading »
[Nodejs] WEBページの今現在同時閲覧している人数を表示する機能構築（ソース付き）
最近Twitterのクジラをすっかり見なくなりまし […]
Continue reading »
[Nodejs] クローリングシステム構築 #2.クローリング基本ソースコード
前回の環境構築で「Nodejs + Phantom […]
Continue reading »
[Nodejs] spookyjsを使って「¥」(半角)マークを置換したい時
¥マークの扱いは、色々なシステムでトラブルになりが […]
Continue reading »
[Nodejs] クローリングシステム構築 #1.Spookyjsの環境設定
仕事をするにも、Webから情報を集めてきたり、特定 […]
Continue reading »
[Nodejs] APIを利用せずにWEBサービスを利用したい。 #2「URLからページ内のリンク一覧を取得」
WEBページクローラーの基盤構築を考えていた時に、 […]
Continue reading »
[Nodejs] APIを利用せずにWEBサービスを利用したい。 #1「Google検索をして初回ページをスクレイピングする」
Googleの検索エンジンがSSL対応してから、リ […]
Continue reading »
[Nodejs] ターミナルでNodejsを実行した時にArgv情報を取得する方法
Nodejsも「forever」を使って永久起動に […]
Continue reading »
[Tools] URLを入力してWebサイトの画面をキャプチャするツール
WEBページのクローリング研究の一貫として、Web […]
Continue reading »
[Tool] クローリングとスクレイピングでツール作成 #1「Webサイトのリンク一覧を取得」
WEBページをクローリングして必要な情報を取得する […]
Continue reading »
[nodejs] ライブラリ「fs」調査結果
https://nodejs.org/api/fs […]
Continue reading »
サーバーサイドで画面キャプチャ #その4 SpookyJS
サーバーサイドキャプチャも早くも4回目になりました […]
Continue reading »
サーバーサイドで画面キャプチャ #その3 CasperJS
WEBサイトキャプチャはデバッグ作業などにおいて、 […]
Continue reading »
サーバーサイドで画面キャプチャ その２ #PhantomJs
サーバーサイドのスクレイピングで前回行なった「no […]
Continue reading »