「スケジュールされたデータのクロール」機能を備えたアプリ

Ambar

Ambar

Ambarは、自動クロール、OCR、重複排除、超高速全文検索を備えたスマートドキュメントアーカイブです。
Screaming Frog SEO Spider

Screaming Frog SEO Spider

Screaming Frog SEO Spiderは、SEOの観点からWebサイトのリンク、画像、CSS、スクリプト、アプリをクロールする小さなデスクトッププログラム(PCまたはMac)です。