2018-11-12から1日間の記事一覧

Scrapyをちょっと触ってみて

まだまだわかっていないが現時点でわかった知見をメモ scrapy shell [url]であらかじめアドホックにCSSセレクタを調べて、それをそのままSpiderにすれば早い リンクをたどっていく形式のSpiderは CrawlSpiderを使うとよい。一般的なユースケースがカバーでき…