AITuber, アイチューバー.
技術を用いて🔖VTuberとしての活動をする. 中の人はおっさんエンジニア.
コメントを会話応答AIに入れて出てきた応答内容を人工音声に話させるシステム.
仕組み
- YouTubeコメントの取得
- 取得した質問にAIで回答
- 音声の生成, 回答した文字列を合成音声に変換
- 配信ソフトにコメントと回答を出力
AITuber開発
- コンセプト設計
- キャラクター設計(Avatar)
- Live2D
- Stabble Diffusion
- 会話AI/LLM
- 商用API(ChatGPT API)
- LangChain/Defy
- Local LLM
- プロンプトエンジニアリング
- 会話のコンテキストの把握(=会話の記憶)
- 好みやしゃべり方などのキャラクターのペルソナ
- 音声合成
- VOICEVOX
- Koemotion
- Google Cloud Text-to-Speech
- Style-Bert-VITS2(これ最近よくきく)
- Live
- OBS
- Youtube Data API
Twitch
Youtube以外.
具体例
- しずく: https://x.com/shizuku_aituber
- 紡ネン: https://www.youtube.com/@TsumugiNenCh/videos
- 7.5万人. Pictriaが開発.
- りんな: 元女子高校生AI
- https://www.youtube.com/@ms_rinna
<2024-10-28 Mon 15:45>登録者のわりには失速している. SunoAIチャンネルとどっこいどっこい.
- 個人
- 音紡いま AI VTuber - YouTube, 2.3万はすごい. うたう系.
- https://x.com/Kanadadada
- https://www.youtube.com/channel/UCSHXPmFvDM32bLm0OgHblsA
- https://x.com/imaliveai
<2024-11-19 Tue 20:50>なぜ一回の再生が300視聴なのに2.5万人の登録？
- しろはなちゃん, yuki@AIヒロイン研究P｜note,
- AIギャル個人開発VTuberとしてデビューしたので応援してほしい
- 音紡いま AI VTuber - YouTube, 2.3万はすごい. うたう系.
ここにたくさんまとめられてる. https://aituber.notion.site/aituber/525138b5151244ea80747e77f7024c51?v=f1a4c6afcd6a4ee1bad0df34d20a97e8
海外
- Neuro-sama - YouTube, 海外世界一のAITuber. ネウロサマ. Twitchが主軸.
- AI Streamer: How to Make an AI Streamer with Real-Time Conversations
- 永藍レナ / Lena AI - YouTube 日本人が作成し海外で人気を得るスペイン語AI VTuber、永藍レナ｜にゃおきゃっと
- https://www.youtube.com/@MOTHERv3/videos
- https://x.com/luna_virtuals: LUNAをエアドロしてくれる.
Refs
概要系
つくる系
- 今日からあなたもAITuberデベロッパー｜ニケちゃん
- AItuberの環境を作ってみた。
- 今年の書初めコーディングはAITuberを創る！, 数週間かけてがっつりつくりました系記事. 24/01/09
- AI配信ソフトAITuberStudio解説｜遠藤円, 24/09/17
- AITuber育成完全入門（冴えないAITuberの育て方）｜みゆきP
- チャット欄に答えて雑談配信する「AI VTuber」の作り方
- AItuberの作り方を調べる・考える・触ってみる, 1ヶ月くらいで作ってみた系. 2023/06
- あなたも解説系AITuberを作ろう｜解説系AITuberを作ろう！, 24/02/20. Bookでまとまったそこそこの記事.
- ゴローくん創造の魔法：AITuberキット対話モード完全ガイド｜Anystar株式会社
- https://www.moguravr.com/what-is-aituber/
動画解説
- 【有料級情報】AIを使ってAI Vtuberを２時間でつくる方法/配信で稼ぐ!?誰でも簡単にできるやり方を解説します！ - YouTube
- 現役AITuberが解説！ AITuberを始めるのに必要な設計、技術、準備 - YouTube
企業
- AIこより: ホロライブで開発, これば強い.
- AIあんの, 【都知事選2024】AIによるマニフェストへの質疑応答システム「AIあんの」の裏側を公開します！｜Jun Ito
- AI Cast: AITuber事務所 https://www.ai-cast.jp/
- Faiver: スタートアップ. https://givee.co.jp/faiver
- Awwが手がける新たなバーチャルヒューマンの姿、Vhuman Streamer Project「ANOME」
- NYAVATAR | AI VTuber - YouTube
Pictoria
スタートアップとしてガチっている企業.
- AITuberは「バーチャルYouTuber」の夢を見るか？ キャラと物語の未来に想いをはせた「AITuber開発者オフ会」レポート | PANORA
- あいちゅーばー開発者オフ会#2に参加して｜とるん
saldra
- AITuberさくらを開発, 2023/02/10.
- 【個人開発】AIでVTuberを作るのに必要な知識は、機械学習の知識ではない【AITuber】 #OpenAI - Qiita
- 何故AITuberという概念が俺達の魂を揺さぶるのか #自然言語処理 - Qiita
- https://www.youtube.com/@saldra1213
- ChatGPT Meetup Tokyo #0 資料- 自分だけのAITuberを作ろう！ | ドクセル
📚AITuberを作ってみたら生成AIプログラミングがよくわかった件
23/11/09発売の書籍. AITuberの入門書というよりはAITuberをテーマにしてPythonを勉強する.
- 「AITuberを作ってみたら生成AIプログラミングがよくわかった件」が発売されました｜Saldra
- AI Tuberを作って学ぶ生成AIプログラミング - YouTube, 発売イベント. 2023/12/22
- https://github.com/sr2mg/aituber_python_programing_example
- はじめに：『AITuberを作ってみたら生成AIプログラミングがよくわかった件』 | 日経BOOKプラス
- 続編出そう, 24/11/22発売. https://x.com/sald_ra/status/1850124239481057664
【プログラム本の感想】『AITuberを作ってみたら生成AIプログラミングがよくわかった件』が素晴らしすぎた！！｜ごろじ
<2024-11-02 Sat 18:23> Kindleで購入した.
WSL2
WSL2で開発を進めるといろいろ問題がある.
- Windows側のVoicebox/OBSとの通信問題 -> ngrokをつかってport forward
- WSL2ではWindows側の音声デバイスがみえない. -> windows側でPulseaudioを起動して通信
🔖AI-P
ref. 【前田裕二×樹林伸×後藤秀樹×中川悠介】これからは”ボカロP”ならぬ”AI P”の時代が来る!?生成AIでライブ・リアルの価値は上がるのか? - YouTube
<2024-03-10 Sun 23:44> ハッカー未来派としてAI-Pになりたい.
Insights
💭生成AIで一発当てるための手段としてAITuber開発に興味がでてきた(24/11/02)
<2024-10-28 Mon 14:40>AITuberを通じてLLM開発に親しむ系が多い気がする.<2024-10-28 Mon 14:55>これはまるで、🗣MMD AgentのAI版だ!<2024-10-28 Mon 15:07>別にYoutubeというプラットフォームでなくてもユーザからのフィードをリアルタイムに処理できればなんでもいいかも.