PDFを読み込ませたら文字化けした話(RAG構築でつまずいたポイント) 最近、PythonでRAG(Retrieval-Augmented Generation)を作っていました。 「PDFを読み込んで、質問に答えてくれる仕組み」を作ろうとしたのですが、思わぬところでハマりました。 今日はその体験 ...
RAG(Retrieval-Augmented Generation) = 検索して、それを元にAIが回答する仕組み。 普通のAIは「学習データの範囲」しか答えられない。 RAGは「自分のドキュメント」を検索してから回答するので、オリジナルの情報に答えられるのが強み。 | AI(回答生成) | Groq ...
RAG(Retrieval Augmented Generation、検索拡張生成)は、生成AI(人工知能)の回答精度を高める仕組み。大規模言語モデル(LLM)を基に回答を生成する際にユーザーの質問文に応じた知識情報を参照可能にし、もっともらしい誤りを回答する「ハルシネーション(幻覚)」を防ぐ。