スクレイピングサービス9個まとめ

スクレイピング（またの名をクローリング）サービスをまとめてみました。

import.io

Import.io | Web Data Platform & Free Web Scraping Tool

• URLを入力してボタンを押すだけで、対象ページの内容を表形式でデータ化してくれる。
• ページングにも対応。すごい。
• フリーでもある程度使えるけど有料プランは月$249からと少々高め。

使い方

nelog.jp

Portia

Portia | Scrapinghub

• PythonのスクレイピングフレームワークScrapyの開発元、ScrapeHub社のサービス
• 固定料金制。$9/月から。

使い方

http://www.moongift.jp/2016/03/portia-dom%E3%81%A7%E6%8C%87%E5%AE%9A%E3%81%A7%E3%81%8D%E3%82%8B%E3%82%B9%E3%82%AF%E3%83%AC%E3%82%A4%E3%83%94%E3%83%B3%E3%82%B0%E3%82%A8%E3%83%B3%E3%82%B8%E3%83%B3/

80legs

80legs - Custom Web Scraping & Powerful Web Crawling

• 固定料金制。$9/月から。

diffbot

Web Data Extraction Using Artificial Intelligence - Diffbot

• 固定料金制。$299/月から。

parsehub

Scrape data from any website in minutes with ParseHub

• 固定料金制。$99/月から。

prompt cloud

Web Crawling | Web Scraping | Data Extraction | PromptCloud

• 固定料金制。$79/月から。
• サイト重い。

dexi.io

Dexi.io - web scraping and data extraction tool for professionals

• 料金不明

feed43

Feed43 : Convert any web page to news feed on the fly

• RSSフィード作成用。YahooPipes難民に人気らしい
• 有料プランは$29/年から。

使い方

d.hatena.ne.jp

Scraper

Scraper - Chrome ウェブストア

• これはChrome拡張

使い方

nelog.jp

まとめ

• 国産のサービスってないのかな。
• そういやkimonoってなくなってたんですね。。。