削除された内容 追加された内容
編集の要約なし
編集の要約なし
1行目:
'''トークン''' (token) は、
 
* [[プログラミング言語]]など(における広義の構文解析)で「トークン」と呼ばれるもの(「[[字句]]」の記事や[[字句解析#トークン (token)]]を参照)は、ソースコードを構中の文字の並び中の、1個ないし複数個の文字から単語文字列で、キーワード記号の識別子や演算子やリテラルとして意味を成す最小単位のこなっているもの、である。
* [[分析哲学]]で「タイプ」との対比で使われる概念。あるタイプのものの集合(たとえば「カローラというタイプの車の集合)を構成する個々のもの(「個々のカローラ」)がトークンである。
** [[タイプとトークンの区別]]のように抽象的に考察する対象概念の分類のことである。