スクレイピング

スクレイピングはデータの抽出手法の一種です。「こすること」「けずること」を意味する「scraping」に由来する言葉で、データスクレイピング、Webに特化するとWebスクレイピングなどとも呼ばれます。

スクレイピングは、Webやデータベース上のデータから不要な部分を削ったり、必要な部分を抽出したりして、データを汎用的な形式に整形することを表します。抽出したデータは、市場調査や価格監視などビジネスに役立てることができたり、ビッグデータとしてAIの分析データとして使うこともできます。

スクレイピング用のツールは無料もしくは有料で公開されています。しかしスクレイピングを利用する際は、著作権法や不正アクセス禁止法などに抵触したり、Webサイトの利用規約に違反したりしないよう、細心の注意を払う必要があります。

スクレイピングに似た言葉に「クローリング（Crawling）」があります。クローリングではWebサイトを巡回して情報の「収集」を行ないます。一方、スクレイピングは特定の情報を「抽出」する手法を表します。スクレイピングとクローリングを同時に行なうケースも多く、それぞれの言葉を区別せずに使用している場合もあります。