Lyric App Framework
A Web-based Framework for Developing Interactive Lyric-driven Musical Applications

2020-2024
CHI '23
ACM CHI '23 Honorable Mention Award
SIGMUS 138 ベストプレゼンテーション賞 (Best Research部門)
関連キーワード: Communication, Creativity, Music, Toolkit

概要

歌詞が魅力的にアニメーションするインタラクティブなビジュアルアートとして新たなメディア様式「リリックアプリ」を提案しました。その開発を支援するフレームワークを実装し、プログラミング・コンテストを開催し、応募された52作品を分析することで、創作文化の未来および音楽とプログラミングの関わりについて洞察を得ました。

プログラミング・コンテスト

本フレームワークの「TextAlive App API」を活用したプログラミング・コンテストが、2020年より「初音ミク『マジカルミライ』」で開催されています。詳しくは各年のコンテスト公式サイトをご覧ください。2020-2021年の応募作品については論文でも報告されています。

発表内容

第138回音楽情報科学研究発表会 (SIGMUS)
ベストプレゼンテーション賞 (Best Research部門)

会場
明治大学 中野キャンパス
日時
論文

プレゼンテーション再録

ACM CHI 2023
Honorable Mention Award

会場
Room Y07 + Y08, Congress Center Hamburg (CCH)
日時
CHI '23 Program

CHI 2023 Video Preview(30秒)

CHI 2023 Pre-recorded Presentation Video

発表文献

引用するならコレ!2023CHI '23

Lyric App Framework: A Web-based Framework for Developing Interactive Lyric-driven Musical Applications

Jun Kato, Masataka Goto
Proceedings of the 2023 CHI Conference on Human Factors in Computing Systems
ACM CHI '23 Honorable Mention Award
クリップボードにコピー

TextAlive App API:「リリックアプリ」の提案とプログラミング・コンテストでの実証実験

2023SIGMUS 138SIGMUS 138 ベストプレゼンテーション賞 (Best Research部門)
加藤 淳, 後藤 真孝
音楽情報科学 研究報告, pp.1-21

更新履歴

09/02/2023
SIGMUSでのプレゼン再録動画を追加、「初音ミク『マジカルミライ』」プログラミング・コンテストへのリンクを追加
08/27/2023
第138回音楽情報科学研究発表会 (SIGMUS) での発表資料を追加
04/19/2023
事前録画のプレゼンテーション動画を追加
04/16/2023
Video Preview を追加
03/31/2023
プロジェクトページを仮公開

関連プロジェクト

TextAlive

音楽に同期して歌詞がアニメーションする動画を制作でき、演出をJavaScriptで拡張できる統合制作環境です。