Clicked Gallery
「トークン化」とは?
実際の技術ドキュメントでハイライトされた言葉を、Clickedが解説します。
例文
During preprocessing, tokenization splits the raw text into subword units the model actually reads.
読者がドキュメント内の単語をハイライトすると、Clickedが技術用語「tokenization」をシンプルに解説しました:
3段階での解説
事実はそのまま、ノリだけ変えて — スラングモード 😎
Clickedのやり方
Overview
Overview
まずはサッと概要 — それで十分なことも。
Detail
Detail
もっと知りたい? ワンクリックで深掘り。
Analogy
Analogy
なじみのない概念も、身近なたとえでストンと理解 — 新しいたとえは何度でも。
AIによる解説には誤りが含まれる場合があります · 専門的な助言ではありません
正式な定義 — 同じ用語の、よくある説明
「tokenization」のような言葉を、ブラウザ上でそのままClickedに解説させませんか?PDFにも対応。
Chromeに追加 — 無料無料で50回の解説 · クレジットカード不要
ギャラリーの他の記事
研究論文の「ちゃんとした」読み方
賢く流し読み、専門用語の壁を突破、学んだことは手元に — 1セッションを正しいやり方で。
「コンテキストウィンドウ」とは?
AIが一度に頭に置けるテキスト量——長いチャットが冒頭を忘れる理由。
「ベクトル埋め込み(エンベディング)」とは?
意味を座標に変える — 単語が一致しなくても機械が「似たもの」を見つける仕組み。
「誤差逆伝播法(バックプロパゲーション)」とは?
ひとつの最終誤差が、何百万の設定への正確な調整に変わる仕組み — ゴールシークの超巨大版。
「RAG(検索拡張生成)」とは?
AIを自分の文書から答えさせる — まず検索、次に生成、出典つき。
「冪等(べきとう)なAPI」とは?
10回クリックしても請求は1回 — 再試行を安全にする性質。