メインコンテンツへスキップ
友田 陽大

カテゴリ

ローカルLLM・自分のPCでAI(Ollama / LM Studio / プライベートRAG)の始め方ガイド

ローカルLLMは『無料・プライバシー(データが外に出ない)・オフライン』でAIを使える、いま最も需要の高いテーマです。本クラスタは、Ollama / LM Studio の始め方、最大の疑問『自分のGPU(VRAM)でどのモデルが動くか』への即答、ChatGPTとの正直なコスト・プライバシー比較、そして手元の文書に答えさせるプライベートRAGの最小実装までを扱います。普通のPCで試す入門から、自前GPU・vLLM・社内RAGの本番運用へと地続きでつながるよう、実際にLLMを本番運用するエンジニアの視点で、型安全なコードとともに解説します。

3 記事

基礎ガイド

基礎ガイド(まずはここから)

生成AI
LLM
Ollama
ローカルLLM
セルフホスト

ローカルLLMの始め方 完全ガイド:Ollama / LM Studioで自分のPCにAIを動かす(VRAM別モデル選定つき)

自分のPCで無料・プライベート・オフラインにAIを動かす「ローカルLLM」の始め方を、実際にLLMを本番運用するエンジニアが解説。Ollama / LM Studioの選び方、いちばんの疑問『自分のGPU(VRAM)でどのモデルが動くか』に答えるVRAM別モデル選定表、量子化(Q4_K_M)、速度の現実、Ollama APIで自作アプリを作るコードまで。

12分

関連する実践記事