はてブログ

はてなブックマーク新着エントリーの過去ログサイトです。



タグ perl勉強メモ

新着順 人気順 5 users 10 users 50 users 100 users 500 users 1000 users
 
(1 - 1 / 1件)
 

サイトのクローリングにはScrappyがすごくいいかもしれない - perl勉強メモ

2011/07/09 このエントリーをはてなブックマークに追加 128 users Instapaper Pocket Tweet Facebook Share Evernote Clip クローリング CPAN Gungho Scraper perl

cpan, スクレイピング | 01:13 | クローリング楽しいですよね! perlで高速にクロールしたいのであればGunghoなど使うのがいいかもしれませんが、基本手軽にやりたいことが多いので WWW::Mechanize+Web::Scraperという組み合わせでクロールすることが多かったです。 しかしたまたま Scrappy を知り、少し触ってみたところすごくいいのではないか!?と思いまし... 続きを読む

 
(1 - 1 / 1件)