GemQwen — 融合LLM

🧠GemQwen o3(ステレオ)が誕生: 蒸留融合モデル2つ — ⚡軽量0.5Bと🧠ハイスペ1.5B Pro — が1つのモデルのように協調します。質問の難易度を判定し、簡単なら0.5Bが即答、難しければ0.5Bが下書きを書きながら並列で1.5Bが本回答を作ります。
従来の⚡融合単体・🧭自動振り分け・🤝リレー・⚔️比較もそのまま使えます。

タップして話す

0字

結果0字

音声認識はブラウザ内蔵機能（オンライン・追加ダウンロード0MB）。録音中は画面が消灯しないようにし、途切れても自動で聞き取りを再開します。🪄 整えるを押すと端末内LLMが誤変換の漢字・カタカナ化した英単語（例: ジャバスクリプト→JavaScript）・句読点を補正します。要約・感想文・整えの生成はすべて端末内で完結し、文章が外部に送られることはありません。

🧠 ステレオ(o3)のハイスペ側 — 難問の本回答担当

🧠 o3モードは「⚡軽量」と「🧠ハイスペ」の2つを使います。iPhoneでメモリが足りない場合は自動で軽量のみにフォールバックします。

⚡ 融合モデル（GemQwen 0.5B）— 即答・下書き・難易度判定担当

💬 文章・会話の専門家（Gemma）— 要約・感想文・日常会話担当

🛠 コード・論理の専門家（Qwen）— プログラミング・計算担当

メンテナンス

仕組み: GemmaとQwenはアーキテクチャが違うため重みの直接マージは不可能。そこで知識蒸留を使い、教師モデルの回答を生徒モデルに焼き込んだのがGemQwen融合モデルです。⚡0.5BはGemma 3 1B+Coder 0.5Bが教師、🧠1.5B ProはGemma 2 2B JPN(日本語)+Coder 7B(コード)が教師で、日本語タスク・コード・リレー合成(下書き→清書)・音声書き起こしの整形をデータ化して学習済み。教師の重複知識は1つにまとまり、弱点は互いの強みで補完されます。🧠o3(ステレオ)はこの2つを1つのモデルのように協調させます: 軽量が難易度を判定し、簡単なら即答、難問なら軽量の下書きとハイスペの本回答を並列で生成します。