スマホで試してみよう
最後にスマートフォンアプリ「PocketPal AI」を試してみよう。AndoridはPlayストア、iOSはApp Storeからアプリをダウンロードしよう。なお検証したスマートフォンは「Google Pixel 9 Pro XL(16 GB RAM)」だ。
ダウンロードが終わったらタップして起動しよう。
起動直後の画面、このままでは使えないので右下の「Go to Models」をタップしてモデルをダウンロードしよう。
アプリで使えるモデルのリストが表示される。ollamaやLM Studioと違い、DeepSeekのモデルはまだ登録されていなかったため、右下の「+」をタップ、「Add From Hugging Face」をタップしよう。
もちろんここにリストされているモデルを使いたい場合はそのまま「Download」をタップすればよい。
画面下部の検索ウィンドウに「DeepSeek」と入力して検索。
いつもの「DeepSeek-R1-Distill-Llama-8B」をタップ。
このモデルには4つの量子化モデルが用意されている。量子化とは先述の通りモデルの精度をある程度犠牲にする代わりに、サイズを小さくする技術だ。
これまでのollamaやLM Studioでは自動的に4ビット(Q4)モデルが選択されていたが、PocketPal AIではまだDeepSeekがデフォルトモデルとして登録されていないため、Hugging Faceから直接ダウンロードすることになる。
ファイル名に含まれる「Q3」「Q4」「Q6」「Q8」は、それぞれ3ビット、4ビット、6ビット、8ビットでの量子化を表している。3ビット(Q3)モデルは4.32GB、8ビット(Q8)モデルは8.54GBと、ビット数が小さいほどファイルサイズは小さくなるが、その分精度は低下する。
ここではollamaやLM Studioと同じようにQ4モデルを選択し、「↓」をタップしてダウンロードしよう。
ダウンロードが開始される。4GBを超えるデータなのでWi-Fi環境を利用したほうがいいだろう。
ダウンロードが終了したら表示される「Load」をタップ。
画面上部のモデル表示欄に「DeepSeek-R1-Distill-Llama-8B」と表示されれば準備OKだ。
スマホでも会話できるかな?
では、いよいよ実験だ。画面下部の入力欄にプロンプトを入力して「紙飛行機」アイコンをタップ。
プロンプト:Introduce yourself
これだけ生成するのに10秒以上時間はかかるが、無事ローカルでも動作することがわかった。
これまでと同じモデルなので日本語性能も同程度かと思われる。ただし、このモデルをベースに日本語対応を強化したファインチューニングモデルも続々と登場しているので、試してみるのもいいだろう。
この連載の記事
-
第30回
AI
グーグルAI「Gemini」 無料版と有料版の使い方を徹底解説 -
第29回
AI
動画生成AI、無料プランでも使い倒せば月200本作れます サービス同士の違いも比較しました→Runway、Pika、Hailuo、Kling、Luma、Kaiber、PixVerse -
第28回
AI
あなたの作業を超効率化する、すごいAIサービス10選【2024年最新版】 -
第27回
AI
ChatGPT「canvas」使い方と、Claude「Artifacts」との違いを解説 文章作成やコーディングがスイスイできます -
第26回
AI
プレゼン資料が一発で出せると話題 AIツール「v0」の使い方 -
第25回
AI
チャットAI「Claude」すごい新機能「Artifacts」の使い方、全部教えます -
第24回
AI
めちゃ便利になった 無料版「ChatGPT」新機能の使い方まとめ【最新版】 -
第23回
AI
最新の生成AI使うなら「Perplexity Pro」がお得です -
第22回
AI
AI検索「Perplexity」がかなり便利だったので紹介します -
第21回
AI
ChatGPTのライバル「Claude 3」の使い方 良い点、悪い点まとめ - この連載の一覧へ