最終更新日 :2025/11/21

tokenizer

名詞
日本語の意味
入力ストリームを構成する各要素(トークン)に分割・解析するシステム
このボタンはなに?

字句解析器はソースコードを個々のトークンに分割し、構文解析器が抽象構文木を構築できるようにした。

plural

復習用の問題

(computing) A system that parses an input stream into its component tokens.

音声機能が動作しない場合はこちらをご確認ください
正解を見る

tokenizer

The tokenizer split the source code into individual tokens, enabling the parser to build an abstract syntax tree.

正解を見る

The tokenizer split the source code into individual tokens, enabling the parser to build an abstract syntax tree.

音声機能が動作しない場合はこちらをご確認ください

英語 - 英語

項目の編集設定
  • 項目の編集権限を持つユーザー - すべてのユーザー
  • 項目の新規作成を審査する
  • 項目の編集を審査する
  • 項目の削除を審査する
  • 重複の恐れのある項目名の追加を審査する
  • 項目名の変更を審査する
  • 審査に対する投票権限を持つユーザー - 編集者
  • 決定に必要な投票数 - 1
例文の編集設定
  • 例文の編集権限を持つユーザー - すべてのユーザー
  • 例文の削除を審査する
  • 審査に対する投票権限を持つユーザー - 編集者
  • 決定に必要な投票数 - 1
問題の編集設定
  • 問題の編集権限を持つユーザー - すべてのユーザー
  • 審査に対する投票権限を持つユーザー - 編集者
  • 決定に必要な投票数 - 1
編集ガイドライン

ログイン / 新規登録

 

アプリをダウンロード!
DiQt

DiQt(ディクト)

無料

★★★★★★★★★★