大規模言語モデル

AI・機械学習

Meta Llama 3.1 8Bモデルを使った自然言語処理:初心者のための完全ガイド(📒Kaggleノートブック付)

はじめにこんにちは!この記事では、Meta社が開発した最新の大規模言語モデル「Llama 3.1 8B」の使い方を、初心者の方にも分かりやすく解説します。自然言語処理の世界に一歩踏み出す準備はできていますか?一緒に学んでいきましょう!目次L...
AI・機械学習

Ollamaで始めるGoogle Gemma 2~高性能言語モデルの実践ガイド~《LangChain・LlamaIndex》

はじめにGoogle Gemma 2は、最新の高性能な言語モデルです。本記事では、Gemma 2の特徴と、Ollamaを使用した実行方法、さらにLangChainやLlamaIndexなどの人気ツールとの統合方法について詳しく解説します。G...
AI開発

LangGraph入門:言語モデルを使った状態管理可能なマルチエージェントアプリケーションの構築

LangGraphとはLangGraphは、大規模言語モデル(LLM)を使用して、状態管理が可能なマルチエージェントアプリケーションを構築するためのライブラリです。このライブラリは、LangChain社によって開発されました。LangGra...
AI・機械学習

Microsoft Research が開発した GraphRAG: 企業の非公開データ分析を革新する LLM 技術

近年の AI の進化は目覚ましく、特に大規模言語モデル (LLM) は目覚ましい発展を遂げています。しかし、LLM には、学習したデータの範囲を超えた問題を解決することが難しいという課題がありました。そこで、Microsoft Resear...
AI・機械学習

Hugging Face AccelerateによるFSDPとDeepSpeedの比較と使い分け方

はじめに近年、大規模言語モデルの学習には多くのGPUリソースが必要とされています。そこで登場したのが、Zero Redundancy Optimizer (Zero)アルゴリズムを実装したDeepSpeedとPyTorch FSDPの2つの...
AI・機械学習

RecurrentGemma-9b: 革新的な自然言語処理モデルの登場

はじめに近年、自然言語処理(NLP)の分野では、大規模な言語モデルが目覚ましい進歩を遂げています。そんな中、Googleが開発したRecurrentGemmaモデルが注目を集めています。RecurrentGemmaは、従来のGemmaモデル...
AI・機械学習

進化的モデルマージでAIモデルをパワーアップ!mergekit-evolve(GoogleColab版)

進化的なモデルマージとは、複数の言語モデルを組み合わせて、特定の能力や特性を持つ新しいモデルを作成する手法です。従来の手法では、どのモデルをどのように組み合わせるかは手探りで進める必要がありましたが、進化的なモデルマージでは、目標とする特性...
AI・機械学習

Eraser 記法ガイド②

前回のガイドでは、Eraserの基本的な記法を説明しました。今回は、さらに高度な記法とより多くの例を紹介します。エンティティ関係図 (ERD)Eraserは、エンティティ関係図 (ERD) を作成するための記法も提供しています。ERDは、デ...
モバイルアプリ開発

iPhoneアプリ「Enchanted」でローカルLLMの「Ollama」を使い、Tailscaleで外出先からアクセスしてみよう!

はじめにローカルLLMが話題になっていますね。そんな中、iPhoneアプリの「Enchanted」を使って、ローカルLLMの「Ollama」を手軽に使う方法をご紹介します!さらに、VPNサービスの「Tailscale」を導入すれば、外出先か...