ようさん
KoeAct-JP（音声から直接ロボットを動かす日本語モデル）
日本語の音声を、文字起こしを挟まずに動作の呼び出し（Action JSON）に変える 259 万パラメータのモデルです。PC の CPU と M5Stack CoreS3（ESP32-S3）で、クラウドなしに動きます。
Works
音声AI・AIキャラクター・AI×ゲーム開発を中心に、これまでの制作物をまとめています。
音声AI・マイコン
Ralomi（マイコンで動く日本語の音声認識）
日本語の音声をひらがなに変える約 205 万パラメータの音声認識モデルです。M5Stack CoreS3（ESP32-S3）の本体だけで、PC もネットワークも使わずに認識します。
JapaneseTinyAgentLM（マイコンで動く日本語 Tool Calling モデル）
ESP32-S3 だけで動く、日本語の依頼をロボットの動作の呼び出し（JSON）に変える 315 万パラメータの超小型言語モデルです。
sanoTTS-jp（マイコンで動く日本語 TTS）
55.9 万パラメータの日本語 TTS を ESP32-S3 の上だけで実時間より速く合成します。漢字かな交じり文の読みとアクセントの推定も端末の中で行います。
kodama-ja-streaming-small
英語のストリーミング音声認識モデル moonshine-streaming-small を日本語化した、日本語ストリーミング ASR モデルです。
話し終わり判定モデルの日本語化（Easy Turn / FastTurn）
発話の終わりを 4 状態で判定するターン検出モデル Easy Turn と FastTurn の日本語モデルを作成しました。
J-Moshi-ext の追加学習
日本語 full-duplex 対話モデル J-Moshi-ext に、特定の声と口調を追加学習しました。
piper-plus / uPiper
軽量な日本語対応 TTS「piper-plus」と、それを Unity から使うためのライブラリ「uPiper」。
日本語 0.3B Mistral 事前学習モデル
Mistral アーキテクチャで日本語を事前学習した 0.3B のベースモデルです。
Style-Bert-VITS2 のクリーンな事前学習モデル
Style-Bert-VITS2 向けのクリーンな事前学習モデルを作成し、Hugging Face で公開しました。
つくよみちゃんコーパスの追加学習モデル
つくよみちゃんコーパスで Style-Bert-VITS2 を追加学習したモデルを公開しました。
Koeiromap Unity
音声合成 API の Koeiromap（現 Koeiro motion）を Unity で使いやすくしたライブラリです。
AIキャラクター
uDesktopMascot
次世代型の、ユーザーがカスタマイズできるデスクトップマスコットの OSS です。
AI キャラクター「ミラ」の開発
YouTube のコメントを拾って会話を広げる AI Agent のキャラクター「ミラ」を開発しました。
AI×ゲーム開発
Oblivion Maiden
森の奥の魔法学院を舞台にした探索アドベンチャーゲームに PM / ディレクターとして参加しました。
生成AIなんでも展示会の企画・運営
生成AI を使った個人制作のデモ会「生成AIなんでも展示会」を主催し、企画と運営を担当しています。
Geranium
花屋を舞台に花束を作る ADV ゲームです（制作期間 2023 年 7 月〜11 月）。
リヒトの絆
会話と冒険で絆を深める 2D アクション RPG です（制作期間 2023 年 6 月〜11 月）。
シオリの絆
光と闇の世界を舞台にしたターン制 2D アクション RPG です（制作期間 2023 年 4 月〜7 月）。
the watchword
情報屋を取り巻く裏社会の人々を描いた ADV です（2023 年 3 月）。
Meow, the mule
人の言葉を話す猫を故郷へ送り届ける、5 分ほどで読み終わるビジュアルノベルです（2023 年）。
DreamIsland
約 5 名で開発した 3D オープンワールド探索アドベンチャーに PdM / エンジニアとして参加しました。
カスタマイズ勇者
敵を倒しながらステータスを自由にカスタマイズして強くなるゲームです。unityroom の Web 版で遊べます。
ツール・コミュニティ
uni-master-linker
Unity で Google Sheets のマスターデータを扱いやすくするライブラリです。
easy-adv
Fungus と Google Sheets で Unity の ADV 制作を簡単にするライブラリです。
コミュニティ運営（MidraLab）
PoC と技術検証を行い、知見を公開するコミュニティ MidraLab の運営に関わっています。
GitHub Actions を使ったゲーム開発（LT 登壇）
unity1week のオンライン共有会で、GitHub Actions による CI/CD の使い方を発表しました。
GameCI と GitHub Actions での自動テスト環境
GameCI と GitHub Actions で Unity の CI/CD 環境を作りました。
過去の小さな作品・試作
13 件を表示
- notion-page-visibility-checker — Notion のページが公開状態になっていないかを確認する管理ライブラリです。
- ライト表現を取り入れたサイドビューゲームのプロト — Unity URP のライト表現を試した、サイドビューゲームのプロトタイプです。
- Notion API でタスク管理を自動化 — Notion のタスクの期日更新と Discord 通知を自動化するライブラリを作りました。
- Sound Hacker — Switch 移植と収益化を目指した大規模インディーズゲームの開発で、エンジニアリーダー兼 EM を務めました。
- MagicOnion を使ったゲームプロト — gRPC ベースの MagicOnion でローカル動作のゲームらしいものを作りました。
- プルプルスライム — unity1week「ちゅう」に参加して作ったゲームです。
- スライムキャッチ！ — 伸びるスライムを操作して子供スライムを魔物から守るゲームです。
- 3D モデル制作（Blender） — Blender で作った 3D モデル 11 点を Sketchfab で公開しました。
- Backendless と Unity のオンラインショップ画面 — BaaS の Backendless と Unity でオンラインショップの画面を作りました。
- RatPark — 脳拡張をテーマにしたスマートフォン向け ADV に、エンジニアとして参加しました。
- MessagePipe を使ったサンプルゲーム — MessagePipe と VContainer で作った簡単なアクションゲームのサンプルです。
- チー子のお散歩 — unity1week で MV(R)P を使って作った、動物を避けて散歩を完走させるゲームです。
- 精密適正テスト — 素早く精密なキーボード・マウス操作が求められるゲームです。