python+scrapyですいすい

scrapyでクローリング/スクレイピングしてmongoDBに突っ込む。

本の通りにしたらできました。すごいすごーい。パワフル―。

Pythonクローリング&スクレイピング[増補改訂版] -データ収集・解析のための実践開発ガイド