元となった辞書の項目
tokenize
IPA（発音記号）
動詞
他動詞
日本語の意味
字句解析を通じて、入力されたテキストなどをトークン（基本要素）の集合に分解する処理を行うこと。 / 機密情報などの敏感なデータを意味を持たないプレースホルダに置換する処理を行うこと。
（ present singular third-person ）
（ participle present ）
（ participle past ）
（ past ）
