ゼロからはじめるTouchDesigner | Audio Visualization
本日は、台風ですね。もはや、猛暑＋台風とか、あれだ、もう、TDやるしかないっすよね。 ってことで、前回、ご紹介したTDの教本から「オーディオビジュアライゼーション」について振り返りをしたいと思います。 下の映像は、教本見ながらTDで作ってみたオーディオビジュアライゼーションです。 基本的には、「Visual Thinking with TouchDesigner – プロが選ぶリアルタイムレンダリング＆プロトタイピングの極意」に沿って制作すれば、サクッとこんな感じのオーディオビジュアライザーションができるのかと思いきや、少しつまずいたところもあったので、補足的な内容を記載したいと思います。 まだ初心者なので用語の使い方が間違っている可能性も.. ※「Visual Thinking with TouchDesigner – プロが選ぶリアルタイムレンダリング＆プロトタイピングの極意」で基本操作を一通り終えている前提での説明になるので、細かい点は、本を購入してご確認頂くのが良いと思います！ https://vimeo.com/282070549 かなりざっくり言うと、CHOPでオーディオファイルを読み込み解析後、数値データをSOPに渡して、Y軸の変化量として波形描画。その後、feedbackやblurでいい感じにエフェクトかけてるって感じ。 step1~step6のブロックごとに軽く説明したいと思う。 step1. CHOPで音源を数値として扱えるようにする CHOPにも多様なオペレータが用意されている。 音源の読み込みは、「audiofilein」オペレータ、フーリエ変換は「audiospect」、チャネルのデータの時間変化を記録する「trail」オペレータ、入力された音源の最大値や最小値などを分析する「analyze」などなど.. 公式サイトを眺めていると、CHOPだけでも数十種類のオペレータがあるので機会があったら確認したいと思う（※TDはオペレータの種類と定義知っている=目標の表現のためにストラクチャーを考えられる、と言っても過言では無いので） ここでは、「audiofilein」で読み込んだ音源をそのまま、null に渡して、SOP に渡す。（※nullに渡すのが違和感を感じる方もいるかもですが、TDでは他のオペレータに値を渡すためには、nullに保持させて渡すのがお作法なのでここは何も考えずにそうすることにする） step2. CHOPの値に基づき波形を描画する 「grid SOP」「chop to SOP」「geo COMP（3Dモデルを入れるための箱のようなもの）」の順に繋いでいく。 ここで、「chop to」のパラメータパネル上の「CHOP」に、step1で作成した「null CHOP」を参照させることで、grid SOPのY座標Y(1)が、CHOPデータ（ポイントとポイントのアトリビュート（属性））に変換される。また、「Chanel Scope」には参照チャネルを設定、「Attribure Scope」にはY(1)を設定することで、Y値だけを参照するように設定する。 ※ 「geo COMP」を作成後、「chop to」と接続ができないかと。普通に本を読み進めるとここでつまずくはずです。 「geo COMP」をダブルクリックすると「Torus」が配置されているが、「Torus」を削除後に「in」「out」を配置し「out」オペレータの右端の紫ボタンを点灯させておく。上の階層に戻ると波形が描画されているはず。 あとは、「wireframe」のMATオペレータを配置し、geoのRenderでMaterialを「wireframe」に設定（ここは好きなMATで良いです） そして、最後に「geo COMP」→「render TOP」、「render TOP」に「 Camera COMP 」を割り当てることで、レンダリングされる。 step3～4. CHOPの値に基づき波形を描画する ここでは、step2でレンダリングされた波形に対して「残像」をつけてみよう。 残像を加えたい場合には、「Feedback」を活用します。Feedbackは前のフレームの映像を表示してくれるため、ループ系を構成することで残像効果をつけることができる。残像を残したいのが「comp1」になるので、「Feedback」の「Target TOP」のパラメータに「comp1」を参照させる。 これで一旦は完了だが、もう少し味付け。とうことで、キックに合わせて波形の色合いを変化させてみる。 「audioband CHOP」「analyze CHOP」「Trigger CHOP」と「analyze CHOP」「Trail
もつれ時代における創造性 | Krebs Cycle of Creativity
はじめに あなたは何の専門家だろうか？ アルゴリズム？アート？プロダクトデザイン？グラフィックデザイン？データサイエンス？ハードウェアデザイン？ビジネスデザイン？ この記事を目にしているということは、あなたもきっと上に挙げたような専門領域を複数横断して、プロジェクトや作品制作をしている、または、これから進めようとしているのではないだうか。 "Art"、"Design"、"Engineering"、"Science"（以降、4象限と呼ぼう）をピボットすることが当たり前の時代になってきているように感じる。例えば、ある美術展では、アーティストとして社会に"問い"を投げかけていたかと思いきや、あるトップカンファレンスでは研究者として最新の技術的な研究知見を発表、起業家、もしくは投資家としても研究成果の社会実装に挑戦している、といった感じだ。 様々な企業がイノベーションだとかクリエイティビティが必要だと声を挙げているが、少しだけ解像度を上げると"Antidisciplinary（脱専門的）"な態度を誰もが求められる時代になってきている。（そもそもスキル的な観点で各領域への参入障壁が下がっているからこそ、求めることができるようになったのだろう。例えば、Technologyという観点では、AWSやGCPなどが民主化していくことで小難しい技術のコア部分はどんどん隠蔽されておりコマンドをGoogleで調べれば誰でも容易に扱える） このような趨勢において、時代の先端を行こうとする個人、もしくは組織にとっては、肩書など一言で説明できない状況になっているのが当たり前なのだ。脱専門的な態度が"スタンダード"になってきている。 4象限の境界を越境して、"Antidisciplinary（脱専門的）"な態度が必要であることは、MITメディアラボのNeri Oxmanが、Age of Entanglement（もつれ時代）[1] で主張している。 "Antidisciplinary（脱専門的）"でしか成し遂げられないことを志す人は、是非、読んでほしい。どの領域に自分が位置しており、そしてどこにピボットすべきであるのか、"海図とコンパス"としても示唆に富んだ内容であった。個人的に、己の状況を俯瞰すると、時宜にかなってもいると感じたので、この場でまとめておきたいと思う。 もつれ時代"における海図とコンパスを手に入れる 4象限のうち何処で活動しているのかを判断するための海図をあなたは持っているだろうか。 例えば、John Maeda（ジョン・マエダ）氏の The Bermuda Quadrilateral が参考になるだろう（確かに何処にいるのか自分でもよく分からなくなるので"魔の海域"という言葉はしっくりくる）では、Art、Design、Engineering、Science の本質を、 Art（to express） Design（to communicate） Engineering（to invent） Science（to explore） とシンプルに説明しており、複数の興味領域があったとしても、自分のコアな位置づけは分かる。 一方で、今後、成し遂げようとすることに対して、どの象限にピボットする必要があるのか、もしくは何故、その象限にピボットしたのかを明確にするためには不足である。まあ、コンパスがほしいのだ。 そんなことを考えていた時に、たまたま、Neri Oxmanの「Age of Entanglement（もつれ時代）[1]」を JoDS（Journal of Design and Science）で目にする。ここでは、「Krebs Cycle of Creativity[2]」という創造的なエネルギーを生み出すための図式を提唱している。 ※ JoDSをご存知だろうか。学界や学術出版とは異なり、誰もが著者の書いた投稿に文脈の補足等の加筆できる「ピアツーピア」なレビュー方式を採用したプラットフォームである。思わず読み込みたくなる論文が豊富に掲載されているので、気になる方は、覗いてみると良いだろう。 Krebs Cycle of Creativity | 創造性におけるクエン酸回路（創造性を生み出すサイクル） 高校の生物学の授業で"クエン酸回路"という専門用語を聞いたことがあるだろう。 大学以降では、1937年にドイツの科学者のHans Krebs（ハンス・クレブス）が発見したことにちなんで「Krebs Cycle」とも呼ばれたりする。生物が代謝するための重要な生化学反応であり、酸素呼吸をする生物全般に見られる反応のことを指す。 詳細な説明は割愛するが、Neri氏の「Krebs Cycle of Creativity（KCC）」は、クエン酸回路をアナロジーとして、経済を循環させるためには、どのように創造的なエネルギーを循環させるべきか（Neri氏はCreative ATP, CreATPと呼ぶ）を図式化したものである。 時代の変革期においての創造性を写した図式であると捉えると、バウハウスのウォルター・グロピウスの"Bauhaus Preliminary
季節や生き物の鮮やかさとは裏腹に、世界はこんなにも灰色だ。
秋が深まり、目の前は黄金。ポケットの中のギターのリフがいつも以上に楽しげで、黄金色の落ち葉も愉快に踊る。黄金の粉が舞って、街路樹は唄う ──。 木々が色づくのは、生命活動の最適化が行われるからである。 この時期になると日差しが穏やかになり光合成で得られるエネルギーが、葉を維持するエネルギーよりも小さくなると、葉に栄養の供給をストップする。すると、緑色の色素、クロロフィルが分解される。この分解されたクロロフィルと葉の糖分が合わさって、アントシアニンが作られる。 このアントシアニンというやつが赤色の色素、赤い紅葉を生み出している。黄色の紅葉は、クロロフィルが壊されて、葉の表面のカロチノイドが現れると黄色の色素になるそうだ。 木々は、春までの間、自身の生命を維持するべく忙しく活動している様子がこの素晴らしい色合いをつくっているのだ。 上野公園 ──目の前には異様な青。 工業地帯のタンク群を彷彿とさせる。 正体は、「錦鯉品評会」 「変わり鯉」「別甲」など様々に名付けられた錦鯉達が青いビニールの中に入れられている。 きっといい餌を食べているんだろう。彼らはどっぷりと太っており、色も鮮やか。そんじょそこらの鯉とは格が違う、エリート達だ。 エリートの彼らの子孫達は、袋詰にされ、コンクリートの上に整然と並べられている。 彼らは生き物だけども、モノとしての扱われる。なんだか異様な光景で残酷に見えてくる 生命維持のために、色づく木々とは対象的に、錦鯉達は人間の手によって、より鮮やかな種のみが取捨選択され、エリート達が将来も生き続ける。 紅葉も錦鯉の鮮やかさも、同じ生命が生み出した美である。 どちらも、生命活動の結果、美しく色鮮やかなのだが、鮮やかさの背景は全く違う。 人間のエゴに操作された色合いはなんだか毒のようで、一気に世界が灰色になった。