GFLOPS 生成AI HUB

GFLOPS -AskDona

2/3ページ

理研の富岳サポートサイトが利用しているRAGとは?GFLOPS×理研 – AskDona

  • 2024.08.23
  • RAG

「理化学研究所がGFLOPSの生成AIアシスタント「AskDona」の利用を開始」 理化学研究所(理研)は当社の生成AIアシスタント「AskDona(アスクドナ)」を富岳サポートサイトに導入されています。AskDona(アスクドナ)は、スーパーコンピューター「富岳」の利用者からの質問に対して迅速かつ正確な回答をリアルタイムにチャット形式で提供しています。導入の背景には、利用者が膨大な技術情報から必 […]

RAGのChunkingとは?(続)LLMのコンテキストウィンドウの制限を理解してチャンク化を検討する

  • 2024.08.23
  • RAG

データを分割するチャンク化とは? チャンク化(Chunking)とは、ドキュメントから抽出したテキスト等のデータを小さな「チャンク(Chunk)」に分割するプロセスです。チャンク化は検索拡張生成(RAG)を適用するときに必要となる処理ですが、そもそもチャンク化が必要な理由は、大規模言語モデル(LLM)のコンテキストウィンドウに制限があるからです。 外部情報としてドキュメント情報をLLMに送信する際 […]

PDFのテキスト抽出が難関である理由、RAGを構築するにあたって直面するハードルとは?

  • 2024.08.09
  • RAG

PDFからテキストを抽出することが難しい理由とは? PDFは、さまざまなデバイスやプラットフォームでコンテンツの正確なレイアウトを維持するように設計されています。また、ドキュメントがどこで表示または印刷されても同じように見える状態で保存されています。PDFは統一されたコンテンツをドキュメント化して共有する手段としては最も適しています。 しかし、PDFが持つこの形式がRAGのテキスト抽出をする際に障 […]

LLMのTemperatureとは?最適なTemperatureの設定はあるのか?

LLM(大規模言語モデル)の出力を調整するための重要なパラメーターの一つに「Temperature」があります。この設定は、モデルが生成するテキストのランダム性と創造性に大きく影響を与えます。Temperatureの設定を理解し、適切に調整することで、LLMの出力をより効果的に制御し、目的に応じた最適な結果を得ることができます。 Temperatureとは? Temperatureは、モデルが次に […]

プロンプトエンジニアリングの種類とは?複雑な推論にも耐えうるChain-of-Thought (CoT) Promptingについても解説

プロンプトエンジニアリングとは? プロンプトエンジニアリングとは、生成AIモデルがよりよく解釈できるように、構造化だてて作成されたプロンプトを書く技術のことです。プロンプトは、LLM(大規模言語モデル)に対してどのタスクを実行するか、どのような出力を生成するかを指示します。プロンプトには、指示、文脈、入力データ、および出力する指標の指示が含まれることがあります。プロンプトエンジニアリングを使用する […]

ChatGPTのファイルアップロード機能とは?

本記載は、OpenAI社のサポートサイトから翻訳した内容を転記しています。https://help.openai.com/en/collections/3742473-chatgpt ChatGPTのファイルアップロードに関するよくある質問 ChatGPTの新機能ファイルアップロードとは? ChatGPT内でさまざまな種類のドキュメントをアップロードして操作する新しい機能です。この機能は、既存のA […]

RAGとは?仕組みと導入メリット、導入時の事前知識や注意点をわかりやすく解説

  • 2024.07.15
  • RAG

RAG(Retrieval-Augmented Generation:検索拡張生成)とは? RAG(Retrieval-Augmented Generation:検索拡張生成)は、大規模言語モデル(LLM)によるテキスト生成に、外部情報の検索を組み合わせる技術です。この技術は、生成内容の正確さを向上させるために使用されます。具体的には、言語モデルがテキストを生成する際に、特定の知識や情報源(ナレッ […]

大規模言語モデルのトークンリミットとは?

トークンリミット(Token Limit)とは? トークンリミットとは、LLMが一度に処理できるトークンの数に対する制限のことです。トークンは、単語やフレーズ、その他のテキストの一部を表す単位です。例えば、「I love you.」というフレーズは、「I」、「love」、「you」、「.」、「 」の5つのトークンで構成されます。 トークンリミットの重要性 トークンリミットは、LLMの性能に影響を与 […]

RAGとは?LLMの回答の質を大幅に向上させるRAGの基本的なフローについて理解する

  • 2024.06.22
  • RAG

近年、生成AIの技術革新が進み、大規模言語モデル(LLM)がさまざまな分野で活用されています。しかし、LLMにはいくつかの課題があり、その解決策として注目されているのがRAG(検索拡張生成)です。本記事では、RAGがなぜ必要なのか、その理由とメリットについて解説します。 RAGとは? RAG(Retrieval-Augmented Generation)とは、大規模言語モデル(LLM)に外部情報を […]

プロンプトチェーン(Prompt Chain)とは?プロンプトエンジニアリングの応用編

プロンプトチェーン(Prompt Chain)とは? プロンプトチェーンとは、ChatGPTやClaudeのような大規模言語モデル(LLM)を使用してタスクを実行する際に、タスクを複数の小さなプロンプトに分割し、あるプロンプトの出力を次のプロンプトの入力として渡すプロンプトエンジニアリング手法のことを言います。 プロンプトチェーンのメリット プロンプトチェーンの応用 プロンプトチェーンは、LLMが […]