RAG

クライアント開発
PDFファイルを使ったRAGに挑戦(3)LangChain

この記事では、LangChainライブラリを使って、前回変換したMarkdownファイルをデータベース化する方法を紹介します。これにより、前回のようにMarkdownコンテンツを直接LLM(大規模言語モデル)に送る方法に […]

続きを読む
データ分析
PDFファイルを使ったRAGに挑戦(2)

今回は、以下の記事の続きです。 Markdownを使ったRAG 単純にテキストを抽出しただけでは文書の構造情報が失われてしまうため、PDFからMarkdown形式に変換することで構造を保ちながらLLMへ入力する方法を試し […]

続きを読む
データ分析
PDFファイルを使ったRAGに挑戦(1)

今ではLLMを使う場合にRAG(Retrieval-augmented generation)の技術は必須となってきています。理屈は理解できているのですが、本当に正しく知識をつかえて言えるのか心配ですよね。 今回、SIG […]

続きを読む
自然言語処理
Difyを使ってRAGの機能を試してみた

生成AIの弱点の一つはハルシネーション(幻覚)を起こしてしまうことです。もっともらしい”ウソ”をつくので騙されてしまうこともあり得ます。 RAGはRetrieval-Augmented Generation の […]

続きを読む
サーバ開発
格安VPSでDifyを立ち上げてみた

Difyは、AIアプリケーションの開発と運用を簡単にするオープンソースのツールです。Difyのページからクラウドサービスに登録して使い始めることもできます。 お試し程度であれば、Freeプランを使うのも良いかもしれません […]

続きを読む