大規模言語モデル LLaMA 3.1モデルを使ったAIチャットボットの作成：初心者向けガイド
はじめにこの記事では、Meta社が開発した最新の大規模言語モデル「LLaMA 3.1」を使って、AIチャットボットを作成する方法を解説します。LLaMA 3.1は多言語対応の強力なモデルで、様々なタスクに適用できます。今回は、海賊風に話すチ...
大規模言語モデル
大規模言語モデル 
Python開発 Meta Llama 3.1 8Bモデルを使った自然言語処理：初心者のための完全ガイド（📒Kaggleノートブック付）
はじめにこんにちは！この記事では、Meta社が開発した最新の大規模言語モデル「Llama 3.1 8B」の使い方を、初心者の方にも分かりやすく解説します。自然言語処理の世界に一歩踏み出す準備はできていますか？一緒に学んでいきましょう！目次L...
大規模言語モデル Ollamaで始めるGoogle Gemma 2～高性能言語モデルの実践ガイド～《LangChain・LlamaIndex》
はじめにGoogle Gemma 2は、最新の高性能な言語モデルです。本記事では、Gemma 2の特徴と、Ollamaを使用した実行方法、さらにLangChainやLlamaIndexなどの人気ツールとの統合方法について詳しく解説します。G...
大規模言語モデル LangGraph入門：言語モデルを使った状態管理可能なマルチエージェントアプリケーションの構築
LangGraphとはLangGraphは、大規模言語モデル（LLM）を使用して、状態管理が可能なマルチエージェントアプリケーションを構築するためのライブラリです。このライブラリは、LangChain社によって開発されました。LangGra...
AI・機械学習 Microsoft Research が開発した GraphRAG: 企業の非公開データ分析を革新する LLM 技術
近年の AI の進化は目覚ましく、特に大規模言語モデル (LLM) は目覚ましい発展を遂げています。しかし、LLM には、学習したデータの範囲を超えた問題を解決することが難しいという課題がありました。そこで、Microsoft Resear...
AI・機械学習 Hugging Face AccelerateによるFSDPとDeepSpeedの比較と使い分け方
はじめに近年、大規模言語モデルの学習には多くのGPUリソースが必要とされています。そこで登場したのが、Zero Redundancy Optimizer (Zero)アルゴリズムを実装したDeepSpeedとPyTorch FSDPの2つの...
大規模言語モデル RecurrentGemma-9b: 革新的な自然言語処理モデルの登場
はじめに近年、自然言語処理（NLP）の分野では、大規模な言語モデルが目覚ましい進歩を遂げています。そんな中、Googleが開発したRecurrentGemmaモデルが注目を集めています。RecurrentGemmaは、従来のGemmaモデル...
AI・機械学習 進化的モデルマージでAIモデルをパワーアップ！mergekit-evolve（GoogleColab版）
進化的なモデルマージとは、複数の言語モデルを組み合わせて、特定の能力や特性を持つ新しいモデルを作成する手法です。従来の手法では、どのモデルをどのように組み合わせるかは手探りで進める必要がありましたが、進化的なモデルマージでは、目標とする特性...
AI・機械学習 Eraser 記法ガイド②
前回のガイドでは、Eraserの基本的な記法を説明しました。今回は、さらに高度な記法とより多くの例を紹介します。エンティティ関係図 (ERD)Eraserは、エンティティ関係図 (ERD) を作成するための記法も提供しています。ERDは、デ...
AI・機械学習 MergeKitを使用した言語モデルのマージとHugging Faceへのアップロード方法
はじめにこんにちは！今日は、複数の言語モデルを一つにまとめる「マージ」という技術について学びましょう。マージすることで、それぞれのモデルの良いところを組み合わせた、より高性能なモデルを作ることができるんです。でも、モデルをマージするなんて難...