我曾經在 “走進圖片的世界中”介紹了音樂跟 Slideshow 的結合。對於 Slideshow 該如何表現，這是其中一個主題，另外一個主題是，如何跟著音樂的節拍來變換畫面。
因此，如果有自動找到 ROI 的方式之後，在套用 Ken Burns Effect 之後，就可以作出一個可以自動幫使用者產生良好鏡頭移動的 Slideshow 影片了。然而有了鏡頭移動，有了 ROI，似乎在表現的手法上面還略有不足，好像還少了什麼? 是的，少了音樂! 有了音樂的 Slideshow，比沒有音樂的 Slideshow 來說生動了不少。而搭配良好的音樂不僅僅是加分，而是完全表達了圖片的意境。
(圖片來源: 東京都)
除了 ROI 配上移動之外，不同表現的形式也會產生不一樣的感覺。上圖是從一個很有名的作品東京都 Slideshow 中所擷取出來的畫面。這是以三個人在去東京的旅程中所拍攝的 2700 張照片中所整理出來而成。其表現的手法是利用一格一格的切割畫面來表現照片，而其中最大的特色的地方在於，同一個主體的照片會出現在同一個畫面之中，以及 照片在轉換到下一個照片的瞬間是跟後面的音樂的節拍所結合的。如果滿分是 100 分的話，那這個簡直是 200 分的作品。然而這要達成這樣子的展示的效果，作者是用手一個一個對準音軌拉出來的，圖片的擺放位置也是自己精心排列的，因此不難想見工程之浩大。
(圖片來源: Tiling Slidehsow 論文)
所謂的進步的電腦科技就是要幫助大家簡單的達到我們想要的效果。而要達到如東京都的效果，其實在電腦科技進步的現代是有機會達成的。我們之前已經說 過了，我們有找 ROI 的方式，那麼現在只差將照片自動群組以及找出音樂節拍的演算法。這個方面由台大多媒體實驗室的陳駿丞、朱威達、郭晉豪、翁仲毅在吳家麟教授的指導之下於 2006 年研發成功。而這一篇論文也發表於在這個領域中頂尖的論壇 ACM Multimedia 中，不用我說，如此重大的技術突破當然是獲得了當年的 Best Paper Award。對於欲瞭解其中實作方法的人可以參考此篇論文，在網站當中有精采的 DEMO 以及投影片，
雖然我很想讓大家看看他們的 Demo，但是當我遇查訪他們的 Project 網頁時，發現網頁已經失效了。不過，台大多媒體實驗室跟訊連科技一直有著技術合作的關係，因此可以預期在不久的未來應該可以看到這個功能在相關產品中出現。
(FlipTrack效果範例)
談到跟切換照片跟音樂節拍結合這點，其實也已經有相關的服務了，正所謂太陽底下沒什麼新鮮的事。這邊介紹一個服務叫做 FlipTrack，FlipTrack 是去年三月上線的 Slideshow 服務。使用者可以將照片上傳，然後挑一首歌之後，Slideshow 播放的效果就會隨著歌曲的節拍來切換。由於音樂有版權問題，以及分析節拍不易，因此使用者 “不能” 上傳自己的音樂，只能用他們所提供的音樂。筆者猜測，他們節拍的分析多少應該都有用手動調校，而並非全自動。效果非常的好，所製作出來的 Slideshow 也可以插入到自己的部落格當中，這個網站有支援中文，有興趣的人可以去看一下。
在當時 Animoto 還沒有 Open，因此只有介紹了FlipTrack，在 Slidehsow 的轉場的表現性上面，Animoto 更是遠遠勝過了FlipTrack，我想 Animoto 的表現可以堪稱是業界的標竿了。
[youtube=http://uk.youtube.com/watch?v=dvjRzaUYoLw]
音樂，我們人類的基因的一部分，多少的互動設計環繞著音樂。隨著科技的進步，在樂曲的分析以及 Beat detection越發精準之下，能產生的互動更是全面了。
Keepon， 由 CMU 的Marek Michalowski與日本國立通訊技術研究所的Hideki Kozima共同研發的機器人，會隨著偵測到的節拍起舞。Keepon 的眼睛是兩個 camera，鼻子是收音的 mic，因此你會看到 Keepon 會很可愛的盯著人看。而這項驚人且有趣的研究成果也在去年的 WIRED NextFest上面做出了 DEMO。
除了機器人以外，英國的 Timetec 利用 Plasma 來表現音樂也非常亮眼:
音樂，結合了科技，就有了無限的可能。
熱門程度: 68%
相關推薦
 |
 |
 |
訂閱 UIUI 