RAG
Retrieval Augmented Generation
RAG (Retrieval Augmented Generation) を活用！LLMで外部データを参照する方法を解説
生成AIが社内情報を参照できるようにするには、主にプロンプトで情報を与える方法とLLMそのものをFine-tuningする方法、
RAGによって外部データを保存したデータベース (Data Base; 以下DB) から呼び出す方法
の3つがあります。
GPTsより精度の高いRAGシステムの構築 - Speaker Deck
Unstructured
GPT-4
による
チャンク分け
+
RecursiveRetriever
/nishio/RAG
RAGは死んだのか？
実装法だけ見ても複数あるようだ
主流は
Langchain
+
ベクトル検索
だが
メタ検索エンジン
に並列で候補キーワードを投げ込んで多段階で処理する
AI検索エンジン
等も広義ではRAGに入るかも知れない
実際検索先をWEBからDBに変えたらRAGそのものだし、そもそも各社の検索エンジンも内部的には恐らくベクトル検索を使っているので…