Arxiv RAGによる論文サーベイの自動生成
2.4k{icon} {views} 複数のLLM(GPT/Claude3)とArxivの検索APIをRAGで統合し、論文サーベイの自動生成を作りました。検索結果の前処理や、サーベイ特有のプロンプトエンジニアリングやソー […]...
論文まとめ:HiQA: A Hierarchical Contextual Augmentation RAG for Massive Documents QA
75{icon} {views} タイトル:HiQA: A Hierarchical Contextual Augmentation RAG for Massive Documents QA 著者:Xinyue Chen […]...
LangChainのRecursiveCharacterTextSplitterの動作がおかしいので自作する
547{icon} {views}LangChainのRecursiveCharacterTextSplitter.from_tiktoken_encoderの動作が思ってたのと違ったので、それに相当するものを自作してみ […]...
LLMに検索エンジンの検索ワードを生成させる(AI王データセット)
236{icon} {views} 検索エンジンの結果を利用してRAGをするために、LLMを使って検索ワードを自動生成させたい。AI王データセットの中から、GPTの知識だけでは解けない問題を選択し、定量評価することで、プ […]...