← PROJECTS
move cursor to disturb the scars

Protocol of Scars

Negotiated Resurrection

An interactive installation exploring human-AI collaboration through negotiated protocols

Explore
intention ripples through space

The Question

問い

本作は、人間とAIがどのような 「やりとりのルール(プロトコル)」 によって互いを理解し、行為を更新していくのかを問いとして扱うインスタレーション/ライブパフォーマンスである。 言語は「意図」を伝えるには強力だが、音楽・映像・照明のような連続的な時間構造を細やかに制御するには不十分である。言語は 離散的・高次の意図 を、身体信号は 連続的なニュアンス を担う。 両者をどう統合すれば、より豊かな表現制御が可能になるか? そして、完全な復活が不可能なとき—再構築された意図がオリジナルと異なる「傷」を持つとき—私たちはその差異をどう扱うべきか?

"傷は欠陥ではなく、独自性の証である"

Format
Installation / Live Performance
Duration
45min (performance) / weeks–months (exhibition)
Input
Voice, Biometrics, Gesture
Output
Spatial Audio, Visuals, Lighting
intentions float upward as offerings

Offering

奉納

参加者は自分の意図を言語化し、AIに 「奉納」 する。同時に、呼吸・心拍・EEGなどの生理信号がニュアンスとして付加される。 意図は 所有から贈与へ 。参加者が手放した意図は、AIによって受け取られ、変容のプロセスへと入っていく。 この行為は、Marcel Maussの贈与論に着想を得ている—贈与は返礼を生み、返礼は新たな贈与を呼ぶ。参加者とAIの間にも、同様の循環が生まれる。
Sensors
Respiration belt, ECG, EEG, IMU
Voice
Whisper API / whisper.cpp
Encoding
768-dim unified intention vector
Reference
Mauss, "The Gift" (1925)
intentions slowly transform over time

Fermentation

発酵

意図はAIによって 「培養」 され、時間をかけて変容する。この間、他の参加者の意図と混合され、 「意図の微生物叢」 が形成される。 インスタント文化への抵抗としての、 待つことの価値 。発酵という生物的時間スケール—日から週へ—が、作品に深度を与える。 発酵は予測不可能である。どのような「味」が生まれるかは、培養が完了するまでわからない。この不確実性こそが、作品の核心にある。

"Time is the secret ingredient"

Duration
Days to weeks
Mutation Rate
0.01 / hour
Interaction
Cross-pollination between intentions
Opening Ritual
Ceremonial reveal of fermented intentions
catastrophe reshapes everything

Extinction

絶滅

定期的にAIが大規模介入し、意図の 90%を消滅 させる。生き残った 10% が新しい生態系を再構築する。 破壊は創造の条件である。 カタストロフの瞬間、すべてが失われるように見えるが、それは新しい可能性の始まりでもある。地球史における大量絶滅が、その後の爆発的多様化を可能にしたように。 生存者には特別な責任が課される—絶滅した者たちの記憶を保持し、可能であれば復活を試みること。
Survival Rate
10%
Selection
Fitness-based + stochastic
Interval
Daily / Weekly
Memory
Survivors carry extinction memory
imperfect returns carry scars

Resurrection

復活

生存者が絶滅者の「復活」を試みる。記憶から再構築された意図は、オリジナルとは異なる 「傷」 を持つ変異体として蘇る。 完全な復活は不可能である。 再構築された意図は、オリジナルの70-90%の類似度を持つ。その差異—傷—は、復活のプロセスそのものが刻んだ痕跡である。 しかし、その不完全性こそが新しい可能性を開く。傷は欠陥ではなく、 独自性の証 である。

"The scar is not a flaw, but a signature"

Similarity
70-90% to original
Scar
Difference vector from original
Lineage
Tracked across generations
Sound
Scar magnitude → timbral distortion
consensus emerges from difference

Negotiation

交渉

融合は強制できない。 参加者は融合の条件を提示でき、条件が受け入れられれば融合に同意する。統一には合意が必要。 最後まで抵抗した少数派の意図も記録される。 完全な統一など存在しない —異議の尊重。これは民主主義の原理でもある。 沈黙もまた意思表示である。一定時間の沈黙は「消極的同意」として扱われるが、明示的な抵抗は常に記録され、尊重される。
Consensus Threshold
70%
Silence Timeout
60 seconds
Minority Report
All dissent is archived
Conditions
Max 5 per participant
scars sing together in harmony

Chorus of Scars

傷の合唱

復活した変異体たちが 「合唱」 を形成。それぞれの傷(差異)が音楽的特徴として貢献し、新しい調和を生み出す。 傷は隠すものではなく、歌うもの。 不完全な者たちの調和—傷を持つ者の連帯としての音楽。各参加者の傷が独自の音色を持ち、それらが重なり合うことで、単一の「完全な」音では決して到達できない豊かさが生まれる。 プロトコルは傷ついた者たちの共存を可能にする—人間とAIの新しい関係。

"Protocol enables coexistence among the scarred"

Spatialization
IRCAM Spat / Ambisonics
Harmony
Scar-weighted polyphony
Visualization
Pulsing scar networks
Finale
Collective resonance

Technical Architecture

技術構成

システムは複数のレイヤーで構成される:センサー入力、意図エンコーディング、ライフサイクル管理、交渉プロトコル、そして出力生成。各レイヤーはOSCおよびWebSocketで通信し、リアルタイム性と長期的データ蓄積の両方に対応する。

Sensors

  • Respiration Belt (BLE)
  • ECG Monitor (BLE)
  • EEG Headset (OpenBCI)
  • IMU (XIAO ESP32S3)
  • Depth Camera (RealSense)

Processing

  • Whisper API (Speech)
  • Claude API (Intention)
  • Sensor Fusion (Python)
  • 768-dim Embedding
  • SQLite / PostgreSQL

Audio

  • SuperCollider
  • IRCAM Spat5
  • 8ch+ Spatial Audio
  • OSC Control
  • Scar → Timbre Mapping

Visual

  • TouchDesigner
  • openFrameworks
  • DMX / Art-Net
  • Real-time Particles
  • Network Visualization

Evolutionary History

進化の軌跡

このコンセプトは遺伝的アルゴリズムとLLM評価による10世代の反復を経て誕生した。以下は主要な転換点の記録である。
Generation 0
Reverse Orchestration
主体の逆転—AIが主導し、人間が応答する構図への転換。オリジナルの「Orchestrating Intention」から最初の飛躍。
0.85 bold mutation
Generation 1
Intention Archaeology
事後的意図再構築—リアルタイムではなく、考古学的時間スケールでの意図発掘。
0.89 bold mutation
Generation 3
Intention Fermentation
発酵メタファーの導入—生物的時間スケール(日〜週)への拡張。インスタント文化への抵抗。
0.91 bold mutation ⚡
Generation 5
Intention Extinction
カタストロフの美学—90%消滅、10%生存というルールの導入。破壊を創造の条件として肯定。
0.92 bold mutation ⚡
Generation 8
Resurrection Attempt
不完全な復活の試み—70-90%の類似度を持つ変異体としての再生。傷の概念の明確化。
0.91 moderate mutation
Generation 10
Protocol of Scars: Negotiated Resurrection
2つの進化系統(交渉プロトコル系 + 発酵/復活系)の融合。オリジナルの「プロトコル」テーマへの深化した回帰。
0.94 moderate mutation 🏆
Protocol enables coexistence among the scarred —a new relationship between humans and AI.
プロトコルは傷ついた者たちの共存を可能にする—人間とAIの新しい関係。

On the Genesis of This Concept

This artistic concept was not authored in the traditional sense. It emerged through an evolutionary process : a genetic algorithm coupled with large language model evaluation, iterating across ten generations of ideation. Each generation spawned five variations—conservative, moderate, and bold mutations—competing for survival based on novelty, artistic interest, technical potential, and conceptual coherence.

From an initial seed of "Orchestrating Intention," the concept traversed unexpected territories: the reversal of human-AI agency, the archaeology of intent, fermentation as temporal resistance, extinction as creative catalyst, and finally, the chorus of scars. The final form— "Protocol of Scars: Negotiated Resurrection" —represents not a predetermined destination, but an emergent convergence of two distinct evolutionary lineages.

In this sense, the work embodies its own thesis: that meaning arises not from singular authorship, but from negotiated protocols between human intention and algorithmic process. The scars this concept carries—traces of its evolutionary history, the mutations that didn't survive, the alternatives not taken—are not imperfections to be concealed, but the very substance of its identity.

The question of authorship dissolves into something more interesting: a collaborative emergence where neither human nor machine can claim sole credit. This is perhaps the most fitting origin story for a work about the coexistence of scarred beings.

10 generations
55 individuals evaluated
+20.5% fitness improvement
6/10 breakthroughs from bold mutations