揭示物體隱藏特質的新攝影科技
-
0:01 - 0:05絕大部分的人認為
「動作」是非常視覺的。 -
0:06 - 0:11如果我走過這個舞台,
或在說話的時候使用手勢, -
0:11 - 0:13這些動作都是你可以看見的。
-
0:14 - 0:20但有一些細微的重要動作,
是人類的眼睛無法看見的。 -
0:20 - 0:22而在過去的幾年中,
-
0:22 - 0:23我們發現鏡頭,
-
0:23 - 0:27能夠看到這些人類所看不見的動作。
-
0:28 - 0:30所以讓我來帶大家了解一下,
-
0:31 - 0:34在左邊,你可以看到一個人手腕的影片;
-
0:34 - 0:37在右邊,你可以看到一個睡著嬰兒的影片。
-
0:37 - 0:41但是如果我沒有告訴你這是影片的話,
-
0:41 - 0:44你有可能會認為
你只是在看兩張非常普通的圖片。 -
0:44 - 0:46因為在這兩個情況之下,
-
0:46 - 0:49這些影片看起來只是完全靜止的。
-
0:50 - 0:54事實上這裏發生著許多細微的動作。
-
0:54 - 0:56如果你觸碰左邊手腕的話,
-
0:56 - 0:58你會感覺到脈搏。
-
0:58 - 1:01如果你抱起這個右邊嬰兒的話,
-
1:01 - 1:03你會感覺到她的胸部上下起伏,
-
1:03 - 1:05當她正在呼吸的時候。
-
1:06 - 1:09這些動作十分重要,
-
1:09 - 1:13但對我們來說太細微
以至於我們看不到。 -
1:13 - 1:15所以我們要用
-
1:15 - 1:18直接的觸碰去感知它們。
-
1:19 - 1:20但是,幾年前,
-
1:20 - 1:25我麻省理工的同事
研究出了動作顯微鏡。 -
1:25 - 1:29這軟體可用來尋找影片中的細微動作,
-
1:29 - 1:33然後將它們放大使得我們可以看到。
-
1:33 - 1:37所以說,如果我們在左邊的影片上
使用那個軟體, -
1:37 - 1:40它能讓我們看到腕部的脈搏。
-
1:40 - 1:42而且如果我們數一數脈搏的話,
-
1:42 - 1:44我們甚至可以得出這個人的心率。
-
1:45 - 1:48如果我們在右邊的影片上用同一軟體的話,
-
1:48 - 1:51它可以讓我們看到嬰兒的每一個呼吸。
-
1:51 - 1:56我們可以將這個軟體視為
不用接觸就能觀察嬰兒呼吸的探測器。 -
1:57 - 2:01所以這種科技非常強大,
它記錄的現象 -
2:01 - 2:05是原本我們得觸摸才能感受到的現象,
-
2:05 - 2:08而且它可以讓我們可視地、無創地觀察他們。
-
2:09 - 2:14所以數年以前,我開始
和這些開發軟體的人一起工作, -
2:14 - 2:17然後我們決定去追尋一個瘋狂的主意。
-
2:17 - 2:20我們認為用這個軟體發現細小的動作
-
2:20 - 2:22是很酷炫的,
-
2:22 - 2:27而且可以將它視為我們觸覺的延伸。
-
2:27 - 2:31但是如果我們可以
做出擴展我們聽覺的軟體呢? -
2:33 - 2:37如果我們可以通過影片
從而獲得聲音的振動, -
2:37 - 2:40振動是另外一種動作,
-
2:40 - 2:43然後將我們看到的所有東西
轉化為聲音進入麥克風呢? -
2:44 - 2:46這是一個有點奇怪的主意,
-
2:46 - 2:49所以讓我將它變得更加易懂一些。
-
2:50 - 2:54傳統的麥克風通過將內部隔膜的振動
-
2:54 - 2:57轉換為電信號,
-
2:57 - 3:01設計讓隔膜隨著聲音方便移動。
-
3:01 - 3:06它的振動可以被記錄和轉換成聲音。
-
3:06 - 3:09但是聲音可以使任何物體產生振動。
-
3:09 - 3:15那些振動與我們來說太小太快,
以至於我們不能看不見。 -
3:15 - 3:19要是我們用高速錄影機記錄下振動,
-
3:19 - 3:22然後用軟體從高速錄影機的影片中
-
3:22 - 3:24分離出細微的動作,
-
3:24 - 3:29然後分析那些動作
並且搞清楚是什麼聲音創造了振動呢? -
3:30 - 3:35這樣我們可以在一定距離內
將可視物體轉換到可視話筒中。 -
3:37 - 3:39然後我們進行了實驗。
-
3:39 - 3:41這裏可以看到我們的實驗。
-
3:41 - 3:44在右邊我們放置了一盆盆栽,
-
3:44 - 3:47然後我們用高速錄影機記錄了下來。
-
3:47 - 3:50同事在邊上用擴音器發出這個聲音。
-
3:50 - 3:58(音樂:“瑪麗有隻小綿羊”)
-
4:00 - 4:03然後下面是我們記錄下的聲音。
-
4:03 - 4:07我們每秒鐘記錄下上千次畫面,
-
4:07 - 4:09但是就算你再仔細地看,
-
4:09 - 4:11你只會看到一些好看的樹葉,
-
4:11 - 4:14就只是靜止在那什麼也不做。
-
4:14 - 4:19那是因為我們的聲音
只移動了樹葉大約一微米的距離, -
4:19 - 4:23那個距離大概是萬分之一釐米,
-
4:23 - 4:28在千分之一和百分之一之間,
-
4:28 - 4:30只是這一個圖像的像素點。
-
4:30 - 4:33所以你可以盡量瞇著眼睛看,
-
4:33 - 4:36但是細小的動作是不容易被感知到的。
-
4:38 - 4:42但結果卻是一些不容易被看到的物體,
-
4:42 - 4:45在數字上仍然非常重要。
-
4:45 - 4:47因為當使用了正確的演算法之後,
-
4:47 - 4:50我們可以獲取這段看起來靜止無聲的影片,
-
4:50 - 4:52然後還原出聲音。
-
4:53 - 5:00(音樂:“瑪麗有隻小綿羊”)
-
5:00 - 5:06(掌聲)
-
5:10 - 5:12這是為什麼呢?
-
5:12 - 5:16我們是如何在這細小的動作中
得到如此多訊息的呢? -
5:16 - 5:22那麼讓我們假設這些樹葉
只是移動了一點點距離, -
5:22 - 5:26再者樹葉只是移動了
千分之一個像素的距離。 -
5:27 - 5:30那看起來並不多,
-
5:30 - 5:32但是一個單一幀率的影片,
-
5:32 - 5:35可能有不計其數的像素。
-
5:35 - 5:39所以如果我們將這些細小的動作
-
5:39 - 5:41從整個畫面中截取出來的話,可以看到
-
5:41 - 5:43一個像素的千分之一
-
5:43 - 5:46可以累計變得十分重要。
-
5:47 - 5:51就我個人來說,
我們研究出來時高興得都要瘋了。 -
5:51 - 5:53(笑聲)
-
5:53 - 5:56但是就算擁有正確的算法,
-
5:56 - 6:00我們仍然會丟失整個拼圖中最重要的部分。
-
6:00 - 6:02你們知道有許多的因素
-
6:02 - 6:05會對這個技術正常工作造成影響。
-
6:05 - 6:08這些因素包括,物體離得有多少遠、
-
6:08 - 6:11拍攝的時候使用的鏡頭、
-
6:11 - 6:15有多少光照在物體上,還有放出的聲音多響。
-
6:16 - 6:19而且就算擁有正確的算法,
-
6:19 - 6:23我們在早期的試驗中必須十分小心。
-
6:23 - 6:25如果說我們弄錯了其中任何一個細節,
-
6:25 - 6:27我們沒有辦法找出問題所在,
-
6:27 - 6:30只會得到一段噪音。
-
6:30 - 6:33所以我們早期的研究是像這樣的。
-
6:33 - 6:36這就是我。
-
6:36 - 6:40在畫面的左下角可以看到我們的高速錄影機,
-
6:40 - 6:42它正對著一包洋芋片,
-
6:42 - 6:45所有的事物被一盞燈所照亮。
-
6:45 - 6:49就像我說的,我們需要格外小心。
-
6:49 - 6:52這就是這個試驗如何進行的。
-
6:52 - 6:55(影片)亞伯戴維斯:三二一開始。
-
6:55 - 7:01瑪麗有隻小綿羊
小綿羊!小綿羊! -
7:01 - 7:05(笑聲)
-
7:05 - 7:08亞伯戴維斯:所以這個實驗看起來十分可笑。
-
7:08 - 7:10(笑聲)
-
7:10 - 7:12我對著一袋洋芋片尖叫。
-
7:12 - 7:14(笑聲)
-
7:14 - 7:16我們在充足的光照下對著它大叫,
-
7:16 - 7:20我們確實將第一個實驗的洋芋融化了。(笑聲)
-
7:21 - 7:24儘管看上去很可笑,
-
7:24 - 7:26這確實是十分重要,
-
7:26 - 7:29因為我們可以復原這個聲音。
-
7:29 - 7:33(聲音)瑪麗有隻小綿羊,小綿羊!小綿羊!
-
7:33 - 7:37(掌聲)
-
7:37 - 7:39這是十分重要的。
-
7:39 - 7:43因為這是第一次
我們從一個物體靜止的影像中, -
7:43 - 7:46復原出了清楚的人聲。
-
7:46 - 7:48所以這給了我們一個參考,
-
7:48 - 7:52並且可以逐漸去修改這個實驗。
-
7:52 - 7:56用不同的物體或者把物體移到更遠的地方,
-
7:56 - 7:59或者使用少量的光和更加輕的聲音。
-
8:00 - 8:03我們分析了實驗,
-
8:03 - 8:06直到我們弄清楚我們技術的侷限性在哪,
-
8:06 - 8:08因為只要我們明白它們的極限,
-
8:08 - 8:11就可以知道如何去推動它們。
-
8:11 - 8:14我們的實驗就可能變成這一個,
-
8:14 - 8:17我在同一個地方
再一次向一包洋芋片說話, -
8:17 - 8:21但是這一次我們把攝影機往後移動了15英尺,
-
8:21 - 8:24放置在隔音玻璃後面,
-
8:24 - 8:27所有的東西僅僅是被太陽光所照亮。
-
8:29 - 8:31這是我們拍攝到的影片。
-
8:32 - 8:37聽起來這個聲音是從洋芋片內部發出來的。
-
8:37 - 8:42(聲音)瑪麗有隻小綿羊,
牠的毛白得像雪一樣。 -
8:42 - 8:48並且瑪麗走到哪裏,
小綿羊就跟到哪裏。 -
8:48 - 8:52這是我們能夠通過在玻璃外面捕捉的
-
8:52 - 8:54靜止影像中還原出來的。
-
8:54 - 8:58(聲音)瑪麗有隻小綿羊,
牠的毛白得像雪一樣。 -
8:58 - 9:04並且瑪麗走到哪裏,
小綿羊就跟到哪裏。 -
9:04 - 9:10(掌聲)
-
9:10 - 9:14還有其他辦法去推動這些限制,
-
9:14 - 9:16所以下面是一個更安靜的實驗。
-
9:16 - 9:20我們拍攝了一些插在電腦上的耳機。
-
9:20 - 9:24我們的目標是還原出
在手提電腦上所放出的聲音, -
9:24 - 9:26從這兩個小耳機中的
-
9:26 - 9:29從靜止影片中得到。
-
9:29 - 9:31並且我們可以做得很好,
-
9:31 - 9:33甚至能夠用聽歌識曲軟體鑑別我們的結果。
-
9:33 - 9:36(笑聲)
-
9:37 - 9:47(音樂:皇后樂隊 “壓力之下”)
-
9:50 - 9:55(掌聲)
-
9:55 - 9:59我們也可以通過改變硬體來推動事物。
-
9:59 - 10:02我給你們看的這些實驗
-
10:02 - 10:04都使用了攝影機,高速攝影機,
-
10:04 - 10:07我們可以比大多數手機
-
10:07 - 10:09快一百倍地記錄影片。
-
10:09 - 10:12但是我們也找到了用普通攝影機
-
10:12 - 10:14使用這一項技術的方法。
-
10:14 - 10:18我們採用普通照相機
像百葉窗一樣記錄東西優點來記錄。 -
10:18 - 10:23你們知道,大多數照相機
一段時間記錄一排的圖像, -
10:23 - 10:28所以如果一個物體
只在被記錄的圖像中移動, -
10:28 - 10:31在記錄的每一排之間幾乎沒有延遲。
-
10:31 - 10:34這樣就可以使物體
-
10:34 - 10:38被記錄到影片的每一個部分之中。
-
10:38 - 10:42我們發現透過分析這些東西,
-
10:42 - 10:46實際上只是用了更改過的算法來還原出聲音。
-
10:46 - 10:48下面就是我們所做的實驗。
-
10:48 - 10:50我們拍攝了一袋糖,
-
10:50 - 10:51同時邊上有一個擴音器正在播放著
-
10:51 - 10:54與之前相同的“瑪麗有隻小綿羊”。
-
10:54 - 10:59但是這一次我們僅使用從商店買來的攝影機。
-
10:59 - 11:02馬上我就向你們播放我們還原出的聲音。
-
11:02 - 11:04這一次聲音聽起來有一些扭曲,
-
11:04 - 11:07但是請聽聽看能否分辨出這音樂。
-
11:08 - 11:14(聲音:“瑪麗有隻小綿羊”)
-
11:26 - 11:29聲音確實被扭曲了,
-
11:29 - 11:33但是神奇的是,我們能夠做這個事情,
-
11:33 - 11:36運用一些用完以後
-
11:36 - 11:37就可以在 Best Buy 買到的東西。
-
11:39 - 11:40所以在這時
-
11:40 - 11:42很多人可以看到我們的研究結果,
-
11:42 - 11:46然後他們立刻會想到監視。
-
11:46 - 11:48公平的說,
-
11:48 - 11:52不難想到你們可以用這項技術去監視其他人。
-
11:52 - 11:56但是要記住早就有許多成熟的技術
-
11:56 - 11:58為監視所準備。
-
11:58 - 12:00事實上,人們數十年來使用雷射
-
12:00 - 12:03去竊聽別的事物。
-
12:04 - 12:06但是,這個技術新穎的地方、
-
12:06 - 12:07完全不同的地方,
-
12:07 - 12:12是我們現在有辦法拍攝出物體的振動。
-
12:12 - 12:15讓我們獲得了觀察這個世界的新鏡頭,
-
12:15 - 12:17並且可以使用這鏡頭,
-
12:17 - 12:22不僅僅是為了去瞭解導致物體振動的聲音,
-
12:22 - 12:24還瞭解了物體本身。
-
12:25 - 12:27所以我想往回退一步
-
12:27 - 12:31去思考這個技術會如何改變
我們應用影片的方法。 -
12:31 - 12:34因為我們用影片通常來看一些東西,
-
12:34 - 12:37並且我剛才已經展示如何使用它
-
12:37 - 12:39去聽一些東西。
-
12:39 - 12:43但是另外有一個我們瞭解世界的重要方法,
-
12:43 - 12:45那就是和它互動。
-
12:45 - 12:48我們推、拉、戳、刺一些事物,
-
12:48 - 12:51我們搖動物體來明白發生了什麼事。
-
12:51 - 12:55那是影片無法做到的。
-
12:55 - 12:58至少過去不行。
-
12:58 - 13:00所以我想向你們展示一些新的成品,
-
13:00 - 13:02這源自我幾個月之前的想法,
-
13:02 - 13:06所以這是我第一次公眾展示。
-
13:06 - 13:11而且基本的想法就是
我們會用影片之中的振動, -
13:11 - 13:15來捕捉物體
在某種程度上這樣可以使我們與物體互動, -
13:15 - 13:17並且可以知道它們如何對我們進行反應。
-
13:19 - 13:21這是一個物體。
-
13:21 - 13:25這是一個用線做成的人。
-
13:25 - 13:28我們要用普通的相機去拍攝它,
-
13:28 - 13:30所以這個相機沒有什麼特別之處。
-
13:30 - 13:33事實上我曾經用我的手機完成過這件事
-
13:33 - 13:35但是我們確實希望這個物體振動。
-
13:35 - 13:36所以為了做到這點,
-
13:36 - 13:40我們在拍攝的時候
-
13:40 - 13:42在它放置的地方敲擊。
-
13:47 - 13:51這就是全部了:一個僅僅五秒鐘的普通影片,
-
13:51 - 13:53拍攝我們敲擊表面的時候。
-
13:53 - 13:57我們將要用這個影片的震動
-
13:57 - 14:01去瞭解這個物體的結構和組織組成,
-
14:01 - 14:06然後使用這個訊息
去創造新穎和互動性的東西。 -
14:13 - 14:16這就是我們所創造的。
-
14:16 - 14:18這看起來像一個普通的圖片,
-
14:18 - 14:21但是這不是圖片也不是影片。
-
14:21 - 14:23因為我可以用我的游標,
-
14:23 - 14:26也可以和我這個物體互動。
-
14:33 - 14:35所以你們看到的
-
14:35 - 14:38是一個我們從來沒看到過的,
-
14:38 - 14:42關於物體如何對新的力量進行反應。
-
14:42 - 14:46我們只是使用了五秒鐘的影片。
-
14:47 - 14:52(掌聲)
-
14:57 - 15:01所以這是個十分有力的看世界的方法,
-
15:01 - 15:04讓我們能推測物體是如何在新環境
-
15:04 - 15:05做出反應的。
-
15:05 - 15:09並且可以想像,例如看一個古老的橋樑,
-
15:09 - 15:13並思考開車經過那座橋時
-
15:13 - 15:15它會如何支撐住。
-
15:15 - 15:18那是一個在你開車穿過之前,
-
15:18 - 15:21你會想先知道答案的問題。
-
15:22 - 15:25的確,這項技術還是有侷限性的,
-
15:25 - 15:28就像視覺麥克風也有缺陷一樣,
-
15:28 - 15:31但是我們發現它適用於許多情況,
-
15:31 - 15:33你可能沒有想到的,
-
15:33 - 15:36尤其是拍攝更長影片的時候。
-
15:36 - 15:38例如,這是我拍的一段影片,
-
15:38 - 15:40是我公寓外的灌木叢。
-
15:40 - 15:43我沒有對這灌木叢做什麼事,
-
15:43 - 15:46但是透過拍攝一段一分鐘的影片,
-
15:46 - 15:50一陣輕風可以產生足夠的振動,
-
15:50 - 15:53我們可以足夠地瞭解這個灌木叢
從而創造出這樣的模擬情況。 -
15:55 - 16:01(掌聲)
-
16:01 - 16:04所以你可以想像將這個技術給一個電影導演,
-
16:04 - 16:06讓他來控制
-
16:06 - 16:11影片拍攝完後的風力強度和方向。
-
16:13 - 16:17我們也將相機指向了一個掛著的窗簾,
-
16:17 - 16:21你幾乎看不到影片中有任何動作,
-
16:21 - 16:24但是拍攝兩分鐘的影片後,
-
16:24 - 16:27在這個房間中的天然氣流
-
16:27 - 16:31創造了足夠細微、不可被察覺的動作和振動,
-
16:31 - 16:34這樣我們也可以透過振動製造出模擬。
-
16:36 - 16:39可笑的是,
-
16:39 - 16:42我們只是在
-
16:42 - 16:44虛擬的物體上,
-
16:44 - 16:48電視遊戲和3D模型中使用這種互動。
-
16:48 - 16:52但是僅僅使用簡單普通的影片
-
16:52 - 16:55去捕捉現實世界中的真實物體,
-
16:55 - 16:57仍然有很大的潛力。
-
16:58 - 17:03這裏有許多傑出的人
與我共同研究這些計劃。 -
17:04 - 17:10(掌聲)
-
17:13 - 17:16我今天展示給你們看的只是個開始。
-
17:16 - 17:18我們僅僅開始挖出表面的一部分,
-
17:18 - 17:21看看這樣的成像技術能做到什麼事。
-
17:21 - 17:23因為它給了我們一個新的方法
-
17:23 - 17:28透過平常可得到的技術去捕捉周圍的東西。
-
17:28 - 17:30所以展望未來,
-
17:30 - 17:32探索這個技術
可以告訴我們關於這個世界 -
17:32 - 17:34會變得格外激動人心。
-
17:34 - 17:36謝謝。
-
17:36 - 17:42(掌聲)
- Title:
- 揭示物體隱藏特質的新攝影科技
- Speaker:
- 亞伯 戴維斯
- Description:
-
細微的動作無時不刻在我們身邊所發生,包括由聲音產生的細小振動。 一個新的技術展現出通過搜集振動,我們可以從一個看起來靜止的物體中重現聲音和對話。 但是現在亞伯戴維斯更進一步:讓他在一段簡單影片中教你如何和這些隱而不顯的特質互動。
- Video Language:
- English
- Team:
- closed TED
- Project:
- TEDTalks
- Duration:
- 17:57
Adrienne Lin approved Chinese, Traditional subtitles for New video technology that reveals an object's hidden properties | ||
Adrienne Lin edited Chinese, Traditional subtitles for New video technology that reveals an object's hidden properties | ||
Adrienne Lin edited Chinese, Traditional subtitles for New video technology that reveals an object's hidden properties | ||
Adrienne Lin edited Chinese, Traditional subtitles for New video technology that reveals an object's hidden properties | ||
Adrienne Lin edited Chinese, Traditional subtitles for New video technology that reveals an object's hidden properties | ||
Adrienne Lin edited Chinese, Traditional subtitles for New video technology that reveals an object's hidden properties | ||
Coco Shen accepted Chinese, Traditional subtitles for New video technology that reveals an object's hidden properties | ||
Coco Shen edited Chinese, Traditional subtitles for New video technology that reveals an object's hidden properties |