Section 9, Deploying Scrapy Spider to ScrapingHub

scrapinghubの使い方

ダッシュボードにプロジェクトフォルダーを作る。

次にターミナルからログインしてスパイダーをウップロードする

Runボタンを押して動かすだけ。

Jobが終了するとcomplete jobに入る。

csvなどでダウンロードすることなども可能

Periodicにすることも容易にできる