top-pサンプリング(核サンプリング)
top-p Sampling (Nucleus Sampling)
top-pトップ・ピーサンプリングとは、AIが次に続きそうな言葉をすべて思い浮かべ、それぞれに「可能性の高さ」を点数付けする。次に、点数が高…
全118記事
top-p Sampling (Nucleus Sampling)
top-pトップ・ピーサンプリングとは、AIが次に続きそうな言葉をすべて思い浮かべ、それぞれに「可能性の高さ」を点数付けする。次に、点数が高…
テンパチュア
AIが文章を作るとき、次に来る言葉の候補を予測している。そして、それぞれの候補に「一番ありえそうなのはコレ」「次はコレかな」と順位付けをして…
Model Distillation
従来は大量に学習した巨大なモデルをそのまま使用していたが、コストも高く、応答が遅くなりがちだった。モデル蒸留では、高度な知識を学習した「教師…
Unlearning
学習データにはプライバシー情報、不適切なコンテンツ、あるいは著作権で保護された素材が含まれてしまうリスクが常に存在する。欧州のGDPR(一般…
Prompt Injection
通常、AIプロダクトは、機密情報やプロダクトの内部的な仕組みについて、ユーザーに伝えてしまわないように制御(ガードレール)をかけている。 …
ラングチェーン
LangChainラングチェーンとは、主に6つのAI機能を活用することで高度なAIアプリケーションを開発しやすくするためのツールである。特に…
Reinforcement Learning from Human Feedback
AIを人間の好みに合わせる学習法「RLHFアールエルエイチエフ」は、2つの「教師(報酬)モデル」と「生徒モデル」を用意し、主に4段階で進めら…
Sycophancy
AIがおべっかを使うようになる「シコファンシー」と呼ばれる現象の主な原因は、「人間が評価した結果を元に学習させる仕組み」が深く関わっている。…
Context Window
コンテキストウィンドウとは、AIがあなたの質問に対して答えを生み出すとき、一度に参照し、考慮できる情報の総量である。ただし、扱える量に限界が…
まずは言葉を覚えよう
UXを取り入れるためのマインドセット
現場の声をリアルで届ける