月 2026年9月

ゲームの店員 NPC を家のローカル LLM で話させる ―― 8B モデルには話すことだけを任せ、配膳や記憶の判断はコードで決める

ブラウザの 3D ゲームの店員に、家の macbookair(M1)で動く 8B のローカル LLM で話させた。配膳や案内はゲームのサーバーの手順のまま、返事だけを LLM に任せ、書式の残り・ト書き・作り話の記憶はコードで落とす。店員ごとの記憶の作り方と、8B が指示を守らなかった所の補い方。

家の AI キャラクターと一緒に YouTube を見る ―― 字幕から場面を知って感想を言わせ、分からないときは作り話をさせない

ソファのはるのが動画の場面について感想を言っている(動画はぼかし)

ブラウザの3Dゲームの居間にテレビを置き、家のAIキャラクター「はるの」がソファで一緒にYouTubeを見るようにした。ゲームは「何を・どこまで」だけを伝え、中身はyt-dlpの字幕から知る。最初の版は情報が取れないまま動画の内容を作り話した。その原因と直し方。

VRM のキャラクターを温泉に入れる ―― 改変できないモデルのまま服を隠してバスタオルを巻き、「いまの自分の様子」を分からせる

露天風呂の湯船にバスタオル姿のはるのが肩までつかり、湯加減を答えている

ブラウザの3Dゲームの温泉に、家のAIキャラクター「はるの」が自分で歩いて行き、バスタオル姿で湯船につかるようにした。改変不可のVRMはファイルに手を入れず、服のマテリアルを隠してコードのバスタオルを同じフレームで巻く。返事のたびにゲームの状態を渡し、湯船にいることを踏まえて話させる。

VRM のキャラクターを「1人」にする ―― デスクトップ・ゲーム・レトロPC のどこで話しかけても、同じキャラクターが移ってくる

3D の森の中で、はるのがうつむいて眠り、頭上に青い Z の文字がいくつも浮かんでいる。吹き出しに「ちょっと呼ばれたから行ってくるね!」

デスクトップの会話アプリ、ブラウザのゲーム、古いパソコンの3か所にいた AI キャラクターを「1人」にした。居場所を1か所で持ち、最後に話しかけた画面へ移ってくる。移るときにひとこと言い、いなくなった画面では姿を消すか眠る。

デスクトップマスコットを、ほかのアプリの窓のふちに座らせる ―― 窓への飛び乗り、会話の返事の [motion:] で動かす、目線が合わなかった原因の修正

デスクトップに開いた窓の上端に、Haruno が椅子に腰かけるように座っている。脚は窓の前へ垂らし、両手は膝の上に置いている

VRM のデスクトップマスコットを、ほかのアプリの窓のふちに座らせた。窓の位置は Win32 API で位置と重なり順だけを読み、窓についていき、閉じれば落ちる。自分から窓へ飛び乗り、Claude の返事の [motion:名前] でも動く。目線が合わなかった原因は、前のフレームの行列を基準に角度を測っていたことだった。

VRM のキャラクターをデスクトップに立たせて、歩かせ・座らせる ―― Electron の透過窓と、Mixamo・VRoid・MMD のモーションを VRM に写す

Windows 11 のデスクトップの壁紙の上、タスクバーのすぐ上に、VRM のキャラクター Haruno が直接立っている。周りにウィンドウの枠は無い

AITuberKit の VRM キャラクターを、Electron の透過・最前面の窓でデスクトップの上に直接立たせた。キャラ以外の場所はクリックが下の窓へ抜け、タスクバーの上を歩き、座り、つかむと猫のようにだらーんとする。MMD の歩きは足IKを2関節 IK で解き直した。

VRM のキャラクターから話しかけてもらう ―― 朝の挨拶・声かけ・サーバの異常の知らせを、Windows 11 と Windows 98 の両方へ届ける

Windows 11 の会話アプリで Haruno から話しかけてきた画面

VRM のキャラクター Haruno が、朝の挨拶・しばらく話していないときの声かけ・家のサーバの異常の知らせを自分から話しかけてくるようにした。押し込めない Windows 98 の IE5 にも届くよう、台詞は1か所で作って置き、端末のほうが取りに来る形にした。