AI・機械学習 Gemma 2 2Bモデルの分散ファインチューニング: TPUを活用した効率的な学習方法（kaggleノート付）
はじめにこんにちは！今回は、Googleが新しくリリースしたGemma 2 2Bモデルを使って、TPU（Tensor Processing Unit）を活用した分散ファインチューニングを行う方法をご紹介します。この記事は、大規模言語モデル（...
AI・機械学習
AI・機械学習 
AI・機械学習 20Questionsゲームシミュレーション：勝利確率の計算
はじめにこのチュートリアルでは、有名な推理ゲーム「20Questions」のシミュレーションを行う方法を学びます。Pythonを使用して、ゲームの勝利確率を計算し、その結果をグラフ化します。初心者の方でも理解しやすいよう、ステップバイステッ...
ナチュラルランゲージプロセッシング Meta Llama 3.1 8Bモデルを使った自然言語処理：初心者のための完全ガイド（📒Kaggleノートブック付）
はじめにこんにちは！この記事では、Meta社が開発した最新の大規模言語モデル「Llama 3.1 8B」の使い方を、初心者の方にも分かりやすく解説します。自然言語処理の世界に一歩踏み出す準備はできていますか？一緒に学んでいきましょう！目次L...
AI・機械学習 サイバー安全保障を強化しよう！ 有識者会議で話し合われたこととは？
近年、世界中でサイバー攻撃の脅威が高まっており、日本も例外ではありません。企業活動や日常生活において、インターネットやコンピューターに頼ることが当たり前になった今、サイバー攻撃から身を守ることの重要性はますます高まっています。そこで、日本政...
Python開発 無料Gemini と LiteLLM で Tool Calling を使いこなそう！～初心者向け徹底解説～
はじめにGemini とは？Google AI Studio が提供する、最先端の大規模言語モデル (LLM) です。高度な言語処理能力を持ち、人間のような自然な文章生成、翻訳、要約など、様々なタスクをこなします。Gemini-Pro はそ...
AI・機械学習 Big Tiger Gemma 27B v1：Gemmaの無修正バージョン
はじめに人工知能の世界で、新たな星が誕生しました。その名も「Big Tiger Gemma 27B v1」。この記事では、このモデルの特徴や使い方、そして私たちの生活にもたらす可能性について、詳しく解説していきます。Big Tiger Ge...
AI・機械学習 SpreadsheetLLM: 大規模言語モデルによる革新的なスプレッドシート処理
はじめにスプレッドシートは、ビジネスや個人の日常生活で広く使用されているデータ管理ツールです。しかし、その複雑な構造や大量のデータを効率的に処理することは、従来の手法では困難でした。本記事では、大規模言語モデル（LLM）を活用して、スプレッ...
AI・機械学習 ローカル検索ドキュメントの更新：問題点と解決策
概要最近、GraphRAGのローカル検索機能に関するドキュメントで、いくつかの不一致が報告されました。この記事では、報告された問題と提案された解決策について詳しく説明します。報告された問題標準のインデックス作成パイプラインでcreate_f...
Python開発 ローカルLLMでGraphRAGを実装して「クリスマスキャロル」を分析してみた
「クリスマスキャロル」の真のテーマは何だったのか？ローカル環境で構築した最強の質問応答AIで、その謎に迫ります！最近、ChatGPTをはじめとする大規模言語モデル(LLM)が注目を集めていますが、LLMは大量のテキストデータから学習するため...
AI・機械学習 Claude 3 Haikuのファインチューニング：AI性能向上の新時代
はじめに：Claude 3 Haikuとは？Claude 3 Haikuは、AnthropicのAIモデルファミリーの一つで、高速で費用対効果の高いモデルとして知られています。このモデルは、日常的なタスクを迅速に処理することができ、ビジネス...