人間の「存在のあり方」は、テクノロジーの進化とともに急速な変容を遂げてきた。
VR元年とされる2016年に世界初のバーチャルYouTuberキズナアイがデビュー。それまでデジタル空間における「現実の自分の分身」であったアバターではない「独立した新たな存在」の登場は「中の人」という概念すら曖昧にした。続く2018年にはVRChatに代表される没入型プラットフォームが台頭。バ美肉から獣人まで自由な姿での没入感の高い交流は、時に現実空間での出会い以上の親密さをもたらすなどした。さらに2020年に起きた世界的パンデミックは、それまでサブカルチャー的であったデジタルな存在を、誰もが経験する「現実」へと急速に引き込んだ。オンライン会議・授業、リモート飲み会や無観客ライブ—慣習化したスクリーンの向こう側にいる誰かとの対峙は、デジタル空間における存在を「特別な自己」から「もう一つの日常的な自己」へと変容させたのだ。
WHOがパンデミックの終息宣言を出した翌月にAppleは「空間コンピューティングデバイス」としてVision Proを発表し、翌年の2024年には世界8カ国で発売が開始された。Vision Proの「空間ペルソナ」によって生成されるアバターは、従来のキャラクター的姿であったアバターとは一線を画し、装着者の表情や目線、物理的位置までもがリアルタイムに反映され、驚くほど自然な「自分そのもの」として空間に立ち現れるのだ。SharePlay機能を通じて他のペルソナと共有される空間は、VRChatのような仮想空間とは言い切れない。それぞれ物理的な距離を保ちながら同じスクリーンで映画を観たり、3Dオブジェクトを囲んでディスカッションしたりと、自然な形で存在を重ね合わせる。この体験はデジタルともリアルとも表現しきれない、かつてない空間と存在のあり方を示唆していると言えよう。
このようにテクノロジーは常に私たちに「存在のあり方」についての新たな可能性を提供し続けている。しかしそれと同時に新たな問いが生まれる。それは「存在の真正性」である。スクリーンの向こう側にいる誰かは、本当に「実在する誰か」なのだろうか。Vision ProのPersonaは確かに「自分」の動きを正確に反映するが、それは本当に「自分」と呼べるのだろうか。デジタルとフィジカルが急速に融合する時代において、私たちは存在の確かさをどのように感じ取ればよいのだろうか。2022年以降AI技術が急速な進化を遂げ、生成される人物の画像や映像、音声は既に実在する人間のものと見分けがつかないレベルに達している。これらの発達も相まって、現代はデジタル空間における存在の真正性がかつてないほど問われ、人間の存在そのものを問い直す契機となっているのである。
本作品RESORACLEは、この問いに対する一つの応答として生まれた。「共鳴/想起」を意味する"Resonance"と、「神託/啓示」を意味する"Oracle"を組み合わせ命名されたRESORACLEは、心音という人間の生命活動に不可欠な生体音を用いて、「存在の確かさ」を感じ取るためのシステムである。その仕組みは以下の通りだ。
まず、心音を取り込んでデータ化する専用アプリとVision ProをOSC通信によって接続する。すると心音は「RESONITE(レゾナイト、存在の結晶)」という脈動する赤い粒子として可視化され、自分の空間に放たれる。システムに格納された心音はファイルとして保存でき、指定のiCloudドライブ(もしくはGoogleドライブ)にアップロードすることで、システムを利用する不特定多数の他者と共有できる。また、ドライブにアップされている、顔も知らない誰かのいつかの心音を、ダウンロードしてシステムに取り込み、同じように存在を可視化することができる。RESORACLEはVision Proが提示する「空間コンピューティング」ならではの極めて個人的な存在確認のための装置と言える。
心音は、音声として記録される瞬間的且つ確かな「生」の証明となる。そしてそれは同時に、未来への存在証明でもある。心臓が動いているという事実は、突然死や即死の場合を除けば少なくともその後約3分間の生存が見込まれる。つまり、心音は過去、現在、そして未来をつなぐ存在の証となるのだ。心音という生命そのものの信号は、複製もシミュレートもされにくく、それでいて予測もできない。このような特性こそ心音が存在確認システムに使用される最適な手段たらしめているのである。また、現実空間とデジタル空間をシームレスに接続することができるVision Proの「空間コンピューティング」でこのシステムを稼働することが最も理想的な形と思われる。
このようにRESORACLEは、デジタルとフィジカルが交錯する現代において、最も原始的な「生」の証を可視化するシステムである。それは単なる生体認証システムではなく、RESORACLEを通じて体験者は自身や他者の存在をより直接的に・確かに感じ取り、デジタル化が進む世界の中で、私たちが依然として生き、呼吸し、心臓を動かし続けている存在であることを再確認するのである。
現在のRESONITEは血液や生命を想起させる、いたって普遍的な表現だ。しかし、これは始まりに過ぎない。将来的には、より多様なバイオリズムをシステムに取り込み、例えばある心音の持ち主の体調や状態に応じて、RESONITEの色や形状が変化していくなどの可能性も秘めている。筆者(制作者)はRESORACLEがテクノロジーの発展とともに、人間の存在をより豊かに表現し、より深く理解するための手段として、さらなる可能性を探求していく所存である。
The way of human existence has undergone rapid transformation alongside technological evolution. In 2016, known as "First year of VR," Kizuna AI made her debut as the world's first Virtual YouTuber. The emergence of this "independent new existence," distinct from avatars that had merely been "digital extensions of one's real self," blurred even the concept of "a person behind the character." In 2018, immersive platforms represented by VRChat rose to prominence. The highly immersive interactions through freely chosen forms, from "Babiniku" to anthropomorphic characters, sometimes created intimacy surpassing real-world encounters. Furthermore, the global pandemic of 2020 rapidly drew what had been a subcultural digital existence into a "reality" experienced by everyone. Online meetings, classes, remote gatherings, and virtual concerts—the normalized confrontation with others across screens transformed digital existence from a "special self" into "another everyday self."
In the month following WHO's declaration of the end of the pandemic, Apple Inc. announced Vision Pro as a "Spatial Computing" device, which was subsequently released in eight countries in 2024. The avatars generated by Vision Pro's "Spatial Persona" stand distinct from conventional character-like avatars, as they reflect the wearer's expressions, gaze, and physical position in real-time, appearing as remarkably natural "representations of self" in space. The spaces shared through SharePlay functionality cannot simply be described as virtual spaces like VRChat. While maintaining physical distance, users can naturally overlay their existence as they watch movies on the same screen or engage in discussions around 3D objects. This experience suggests an unprecedented way of space and existence that cannot be fully described as either digital or real.
Thus, technology continues to offer us new possibilities for "the way of existence." However, this simultaneously gives rise to new questions—questions about "the authenticity of existence." Is the person on the other side of the screen truly a "real existing person"? While Vision Pro's Persona accurately reflects "one's own" movements, can it truly be called "oneself"? In an era where digital and physical are rapidly merging, how should we perceive the certainty of existence? Since 2022, AI technology has evolved rapidly, with generated human images, videos, and voices reaching a level indistinguishable from those of real humans. Combined with these developments, the present age has become a time when the authenticity of digital existence is questioned more than ever before, prompting us to reexamine human existence itself.
RESORACLE was born as a response to these questions. The name "RESORACLE" combines "Resonance," meaning reverberation or evocation, and "Oracle," meaning divine revelation or prophecy. Using heartbeat—a vital sound essential to human life—RESORACLE is a system designed to verify the certainty of existence. The system works as follows:
First, a dedicated app that captures and digitalizes heartbeats is connected to Vision Pro via OSC communication. The heartbeat is then visualized as pulsating red particles called "RESONITE (crystals of existence)" that are released into one's space. Heartbeats stored in the system can be saved as files and uploaded to a designated iCloud Drive (or Google Drive), enabling sharing with unspecified others who use the system. Additionally, users can download and incorporate into the system the heartbeats of unknown individuals from some moment in time that have been uploaded to the drive, visualizing their existence in the same way. RESORACLE can be described as a highly personal device for confirming existence, uniquely enabled by Vision Pro's "Spatial Computing."
A heartbeat, when recorded as sound, becomes both an instantaneous and definitive proof of "life." At the same time, it serves as proof of future existence. The fact that the heart is beating indicates an expected survival of at least three minutes, barring sudden or immediate death. Thus, a heartbeat becomes proof of existence connecting the past, present, and future. The heartbeat, as a signal of life itself, is difficult to replicate or simulate, and simultaneously impossible to predict. These characteristics are what make the heartbeat the optimal medium for use in an existence verification system. Moreover, Vision Pro's "Spatial Computing," which can seamlessly connect real and digital spaces, appears to be the ideal platform for operating this system.
Thus, RESORACLE is a system that visualizes the most primitive proof of "life" in our contemporary era where digital and physical intersect. It is not merely a biometric verification system; through RESORACLE, users can perceive their own and others' existence more directly and certainly, reaffirming that in this increasingly digital world, we continue to live, breathe, and keep our hearts beating.
The current RESONITE represents a universal expression that evokes blood and life. However, this is just the beginning. In the future, the system has the potential to incorporate more diverse biorhythms—for instance, the color and shape of RESONITE might change according to the physical condition and state of the heartbeat's owner. The author intends to continue exploring further possibilities of RESORACLE as a means to express and understand human existence more richly alongside technological advancement.
MON, DEC 16, 2024 Updated