Section 3 #

データ前処理 #

データの前処理とは、性能を確保もしくは向上させるために、データを使用する前にデータを加工したり削除したりすること。

Wikipedia データ前処理

日本語圏のデータでは、和暦や漢数字、全角・半角の揺れといった独特の前処理が必要になることが多くあります。新しく追加した「日本語データ特有の前処理」セクションでは、こうした課題にまとめて対処できるレシピを紹介しています。