カメラ一台とブラウザのタブ一つで、Live2D のアバターが自分の表情どおりに動く。Pitaoji が解こうとしたのは、そこだった。

バーチャル配信を始めようとすると、かつては機材で止まった。モーションキャプチャには専用の機器と何度も繰り返す調整が要り、グリーンバックには壁一面を空ける必要があり、切り抜きの設定は配信ソフトの中で半日がかりだった。カメラの前で話してみたいだけの人にとって、本番より準備のほうがよほど腰を重くする。

Pitaoji は別の道を選び、顔の捉え方をブラウザの中へ移した。カメラを自分に向ければ、表情がそのまま Live2D のキャラクターを動かす。ドライバーの導入も、体に付ける機器もいらない。デスクトップ版 1.2 は 11 月 3 日に公開され、足りなかったのはキャラクターを配信画面へ届ける部分だった、という穴を埋めた。

カメラがそのままモーションキャプチャ、ブラウザで配信まで

スタジオの画面を開き、カメラの利用を許可すると、眉も目も口元も自分の動きに追従する。音声による口の動きの同期も備える。話すとき口元が音に合わせて動くので、原稿を読む場合や解説では、表情だけを捉えるより自然に見える。手順はすべてブラウザの中で完結し、公式サイトは三つの不要でまとめている。導入不要、モーションキャプチャ不要、複雑な設定不要という意味だ。

キャラクターはモデルの一覧から選べるし、作成の流れで一から作ることもできる。長く続けるつもりがない人にとっては、仕様の数よりこの点のほうが大きい。まず画面に出られる子を用意し、雰囲気は後から決めればよい。

1.2 が透明背景を足した

今回のデスクトップ版の中心は透明背景だ。これまではキャラクターを配信画面に重ねるのに、グリーンバックか後処理の切り抜きが必要だった。1.2 からは配信ソフトがその透明なウィンドウを直接取り込めるので、キャラクターは画面に貼った層のように振る舞う。背後がゲームならゲームが、デスクトップならデスクトップがそのまま残る。

公式サイトには回避策の説明もある。ウィンドウの取り込みで透明なモデルを拾えない場合は、用意された起動スクリプトで顔追跡の方式のまま配信ソフトを立ち上げ、ブラウザの入力を足す。こうした但し書きが載るのは、たいてい同じ質問を何度も受けた証拠だ。

残りは作りの話になる。ネイティブのアプリ、サンドボックスの中での実行、導入版の自動更新、そして Windows、macOS、Linux の三つに導入版とポータブル版をそろえる。導入版には SHA256 の照合値が付き、計算は手元のブラウザで終わるので、ファイルはどこにも送られない。

ここで二つの版の役割もはっきりする。ブラウザ版の強みは準備がゼロなことだ。別のパソコンでも、借りた機械でも、その場で試せる。ただし透明背景は付かないので、見た目を確かめる用途に向く。本番で配信し、キャラクターを画面に重ねるなら、デスクトップ版が要る。二つの入口は互いを置き換えずに並んでいる。

ゼロからの道も短い。モデルの一覧で子を選び、スタジオに戻ってカメラを許可し、背景と小物を好みに合わせて並べ、それから配信を始める。公式サイトはモデル選び、手引き、クライアントの取得を同じ階層に置いていて、下の階層へ隠していない。初めて触る人にとって、階層が一つ減ることは、諦める機会が一つ減ることでもある。

反応は表情だけではない

配信中の反応はそのままキャラクターの動きになる。コメント、ギフト、有料のメッセージが、それぞれ対応する動作や表情を呼び出す。視聴者が見るのは、話しかければ反応する相手であって、まばたきだけの絵ではない。層と小物を使えば、文字や塗り、小さな道具をキャラクターに重ねられる。静止画や動画の背景、切り替えできる舞台の型と組み合わせれば、配信前の準備は数回のクリックに縮む。

複数人での配信はもう一つの方向だ。同じ画面に何人も並び、スマートフォンで読み取るだけで二台目のカメラになる。二人での会話やゲストの出演に、人数分の機材をそろえる必要はなくなる。

誰に向くか、先に考えておくこと

いちばん合うのは、バーチャルの姿で発信を始めたばかりの人だ。予算は限られ、機材を先に買う気はなく、続けられるかどうかを先に確かめたい。すでに配信の流れがあり、そこに姿だけを足したい配信者にも向く。デスクトップ版の透明なウィンドウは、今ある画面にそのまま差し込める。

先に考えておきたいのは二つ。一つは姿の権利で、モデルの一覧にある素材にはそれぞれ利用の範囲がある。商用の前に許諾を確かめたい。もう一つは性能で、その場での捉え方と描画はどちらも画像処理の部品とカメラの滑らかさに響く。古い機械なら一度通しで試し、配信を始めてから動きの粗さに気づく事態を避けたい。

Pitaoji の値打ちは、姿をどれだけ細かく作ったかではない。配信を始める費用を、カメラを一度許可するだけの高さまで下げたことにある。敷居がそこまで低いと、試すことに意味が出てくる。