ABOUT THE SPEAKER
Jared Ficklin - Visualizer
In his day job, Jared Ficklin makes user interfaces at frog design. As a hobby, he explores what music looks like ... in light, in shapes, in fire.

Why you should listen

Jared Ficklin is a Senior Principal Design Technologist at frog, where he builds user experiences for clients, playing with interactions including touch and multi-touch, and applying physics to enhance the user experience. A passion for music and making things introduced him to the hobby of sound visualization, which has led him on occasion to play with fire. (As Flash on the Beach puts it, "Jared Ficklin’s sonic experiments stood out for their individuality, drama and casual disregard for health and safety.") Every March in Austin, Texas, Ficklin organizes the frog party, a collective social experiment for a few thousand people attending SXSW Interactive. It's a form of playful R&D for social technology. And he has spent 10 years helping fund, design and  build quality free public skateparks for Austin as part of the Austin Public Skatepark Action Committee. 

More profile about the speaker
Jared Ficklin | Speaker | TED.com
TED2012

Jared Ficklin: New ways to see music (with color! and fire!)

Джаред Фиклин: Новый способ видеть музыку (Цветом! И огнём!)

Filmed:
711,217 views

Дизайнер Джаред Фиклин создаёт невообразимые зрительные образы, которые позволяют нам видеть музыку, используя цвет и даже огонь (впервые на сцене TED), чтобы понять, какие чувства у нас вызывает звук. Он делает небольшое отступление, рассматривая звуки скейт-парка, и объясняет, как звучание может подсказать нам, каким образом развивать креативность.
- Visualizer
In his day job, Jared Ficklin makes user interfaces at frog design. As a hobby, he explores what music looks like ... in light, in shapes, in fire. Full bio

Double-click the English transcript below to play the video.

00:16
My passionsстрасти
0
449
1033
Мои увлечения — музыка,
00:17
are musicМузыка, technologyтехнологии and makingизготовление things.
1
1482
3689
технологии и конструирование.
00:21
And it's the combinationсочетание of these things
2
5171
3183
И сочетание именно этих вещей
00:24
that has led me to the hobbyхобби of soundзвук visualizationвизуализация,
3
8354
2696
привело меня
к увлечению визуализацией звука,
00:26
and, on occasionповод, has led me to playиграть with fireОгонь.
4
11050
4078
а иногда и к игре с огнём.
00:31
This is a Rubens'Рубенс tubeтрубка. It's one of manyмногие I've madeсделал over the yearsлет,
5
15128
2377
Это трубка Рубена. Одна из многих,
которые я создал за последние годы.
00:33
and I have one here tonightсегодня ночью.
6
17505
1746
Одну трубку я сегодня принёс с собой.
00:35
It's about an 8-foot-long-foot длиной tubeтрубка of metalметалл,
7
19251
1525
Это металлическая труба
примерно 2,5 метра длиной.
00:36
it's got a hundredсто or so holesотверстия on topВверх,
8
20776
1335
В ней сверху сделано примерно 100 дырок,
00:38
on that sideбоковая сторона is the speakerоратор, and here
9
22111
1753
с этой стороны колонка, а тут — несколько
00:39
is some labлаборатория tubingтрубы, and it's connectedсвязанный to this tankбак
10
23864
2176
лабораторных трубок,
которые соединены
00:41
of propaneпропан.
11
26040
1601
с баллоном пропана.
00:44
So, let's fireОгонь it up and see what it does.
12
29087
3369
Итак, давайте её подожжём
и посмотрим, что она делает.
00:53
So let's playиграть a 550-herz-herz frequencyчастота
13
37887
1891
Давайте включим частоту в 550 Герц
00:55
and watch what happensпроисходит.
14
39778
1515
и посмотрим, что произойдёт.
00:57
(Frequencyчастота)
15
41342
8483
(Шумовые колебания)
01:05
Thank you. (ApplauseАплодисменты)
16
49825
2713
Спасибо. (Аплодисменты)
01:08
It's okay to applaudрукоплескать the lawsзаконы of physicsфизика,
17
52538
1988
Здорово аплодировать законам физики,
01:10
but essentiallyпо существу what's happeningпроисходит here
18
54526
1456
но по сути, что тут происходит —
01:11
-- (LaughterСмех) --
19
55982
1760
(Смех)
01:13
is the energyэнергия from the soundзвук viaс помощью the airвоздух and gasгаз moleculesмолекулы
20
57742
4008
энергия звука
через молекулы воздуха и газа
01:17
is influencingвлияющий the combustionсгорание propertiesсвойства of propaneпропан,
21
61750
2504
влияет на свойства горения пропана,
01:20
creatingсоздание a visibleвидимый waveformформа волны,
22
64254
1904
создавая видимую волну,
01:22
and we can see the alternatingпеременный regionsрайоны of compressionкомпрессия
23
66158
2320
и мы видим
переменные промежутки уплотнения
01:24
and rarefactionразрежение that we call frequencyчастота,
24
68478
2040
и разрежение, которые
мы называем частотой,
01:26
and the heightвысота is showingпоказ us amplitudeамплитуда.
25
70518
1744
а высота показывает нам амплитуду.
01:28
So let's changeизменение the frequencyчастота of the soundзвук,
26
72262
2328
Давайте сменим частоту звука
01:30
and watch what happensпроисходит to the fireОгонь.
27
74590
1425
и посмотрим, что происходит с огнём.
01:31
(Higherвыше frequencyчастота)
28
76015
10130
(Более высокая частота)
01:42
So everyкаждый time we hitудар a resonantрезонирующий frequencyчастота we get a standingпостоянный waveволна
29
86145
3350
Натыкаясь на резонирующую частоту,
мы получаем устойчивую волну
01:45
and that emergentвыходящий sineсинус curveкривая of fireОгонь.
30
89495
1700
и новую синусоиду огня.
01:47
So let's turnочередь that off. We're indoorsв помещении.
31
91195
1578
Давайте это выключим. Мы в помещении.
01:48
Thank you. (ApplauseАплодисменты)
32
92773
5591
Спасибо. (Аплодисменты)
01:54
I alsoтакже have with me a flameпламя tableТаблица.
33
98364
2347
Ещё у меня с собой есть стол огня.
01:56
It's very similarаналогичный to a Rubens'Рубенс tubeтрубка, and it's alsoтакже used
34
100711
1565
Он очень похож на трубку Рубена,
и его тоже используют
01:58
for visualizingвизуализируя the physicalфизическое propertiesсвойства of soundзвук,
35
102276
2121
для визуализации
физических свойств звука,
02:00
suchтакие as eigenmodesсобственные моды, so let's fireОгонь it up
36
104397
1968
например колебаний.
Давайте его подожжём
02:02
and see what it does.
37
106365
2250
и посмотрим, что будет.
02:08
Oohух. (LaughterСмех)
38
112292
4468
Ох. (Смех)
02:12
Okay. Now, while the tableТаблица comesвыходит up to pressureдавление,
39
116760
2974
Хорошо. Пока стол доходит
до верного давления,
02:15
let me noteзаметка here that the soundзвук is not travelingпутешествие
40
119734
1672
позвольте мне заметить,
что звук не передвигается
02:17
in perfectидеально linesлинии. It's actuallyна самом деле travelingпутешествие in all directionsнаправления,
41
121406
2746
прямыми линиями. Он путешествует
во все направления,
02:20
and the Rubens'Рубенс tube'sтрубки a little like bisectingРассекайте those wavesволны
42
124152
3109
и трубка Рубена как бы рассекает
02:23
with a lineлиния, and the flameпламя table'sтаблицы a little like
43
127261
1996
эти волны полосой, а стол огня
02:25
bisectingРассекайте those wavesволны with a planeсамолет,
44
129257
1854
рассекает их на плоскости.
02:27
and it can showпоказать a little more subtleтонкий complexityсложность, whichкоторый is why
45
131111
4000
Он может показывать
более сложные нюансы колебаний.
02:31
I like to use it to watch GeoffGeoff Farinaмук`а playиграть guitarгитара.
46
135111
2353
Мне нравится использовать его,
наблюдая, как Джэфф Фарина
играет на гитаре.
02:33
(MusicМузыка)
47
137464
42281
(Музыка)
03:15
All right, so it's a delicateнежный danceтанец.
48
179745
1765
Ну вот — деликатный танец.
03:17
If you watch closelyтесно — (ApplauseАплодисменты)
49
181510
2545
Если вы присмотритесь —
(Аплодисменты)
03:19
If you watch closelyтесно, you mayмай have seenвидели
50
184055
2767
если вы присматривались,
вы, возможно, заметили
03:22
some of the eigenmodesсобственные моды, but alsoтакже you mayмай have seenвидели
51
186822
2472
некоторые колебания, но вдобавок,
вы, может быть, ещё заметили,
03:25
that jazzджаз musicМузыка is better with fireОгонь.
52
189294
4617
что джаз смотрится лучше с огнём.
03:29
ActuallyНа самом деле, a lot of things are better with fireОгонь in my worldМир,
53
193911
2010
Вообще, много вещей
лучше выглядят с огнём,
03:31
but the fire'sогонь just a foundationФонд.
54
195921
2432
но огонь — это только база.
03:34
It showsшоу very well that eyesглаза can hearзаслушивать,
55
198353
1148
Он отлично показывает то,
что слышат глаза,
03:35
and this is interestingинтересно to me because
56
199501
1395
и это меня интересует, потому что
03:36
technologyтехнологии allowsпозволяет us to presentнастоящее время soundзвук to the eyesглаза
57
200896
2854
технологии позволяют нам
воспринимать звук глазами,
03:39
in waysпути that accentuateакцентировать the strengthпрочность of the eyesглаза
58
203750
2863
улучшая силу зрения,
03:42
for seeingвидя soundзвук, suchтакие as the removalудаление of time.
59
206613
2697
чтобы видеть звук
как изменение времени.
03:45
So here, I'm usingс помощью a renderingоказание algorithmалгоритм to paintпокрасить
60
209310
3384
Здесь я использую специальный алгоритм,
чтобы нарисовать
03:48
the frequenciesчастоты of the songпесня "SmellsЗапахи Like Teenподросток SpiritДух"
61
212694
2463
частоты песни
«Повеяло духом подростка»
03:51
in a way that the eyesглаза can take them in
62
215157
2040
так, чтобы можно было
вобрать её глазами
03:53
as a singleОдин visualвизуальный impressionвпечатление, and the techniqueтехника
63
217197
2244
как единое визуальное впечатление,
и техника
03:55
will alsoтакже showпоказать the strengthsсильные стороны of the visualвизуальный cortexкора головного мозга
64
219441
1973
к тому же покажет силу
зрительного восприятия
03:57
for patternшаблон recognitionпризнание.
65
221414
1616
касательно распознавания узоров.
03:58
So if I showпоказать you anotherдругой songпесня off this albumальбом,
66
223030
1879
Если я покажу вам
ещё одну песню из этого альбома,
04:00
and anotherдругой, your eyesглаза will easilyбез труда pickвыбирать out
67
224909
3481
и ещё одну,
ваши глаза с лёгкостью определят
04:04
the use of repetitionповторение by the bandгруппа Nirvanaнирвана,
68
228390
2928
повторения, использованные Нирваной.
04:07
and in the frequencyчастота distributionраспределение, the colorsцвета,
69
231318
1857
В распределении частоты и цветов
04:09
you can see the clean-dirty-cleanчистый-грязный-чистый soundзвук
70
233175
3048
вы увидите чистый-мутный-чистый звук,
04:12
that they are famousизвестный for,
71
236223
1207
благодаря которому они прославились.
04:13
and here is the entireвсе albumальбом as a singleОдин visualвизуальный impressionвпечатление,
72
237430
4000
А вот весь альбом
в виде единого изображения;
04:17
and I think this impressionвпечатление is prettyСимпатичная powerfulмощный.
73
241430
1880
это производит довольно сильное впечатление.
04:19
At leastнаименее, it's powerfulмощный enoughдостаточно that
74
243310
1714
По крайней мере,
оно настолько сильное,
04:20
if I showпоказать you these four4 songsпесни,
75
245024
1342
что если я покажу вам четыре песни
04:22
and I remindнапоминать you that this is "SmellsЗапахи Like Teenподросток SpiritДух,"
76
246366
2441
и напомню, что вот эта —
«Повеяло духом подростка»,
04:24
you can probablyвероятно correctlyправильно guessУгадай, withoutбез listeningпрослушивание
77
248807
2319
вы, скорее всего, сможете
правильно угадать, не прослушивая
04:27
to any musicМузыка at all, that the songпесня
78
251126
1434
никакой музыки вовсе,
что песня, которая
04:28
a dieумереть hardжесткий Nirvanaнирвана fanпоклонник would enjoyнаслаждаться is this songпесня,
79
252560
2294
понравилась бы фанату Нирваны —
04:30
"I'll StickПридерживаться Around" by the FooFoo FightersБорцы,
80
254854
2256
эта песня «Я останусь»
в исполнении Фу Файтеров,
04:33
whoseчья leadвести singerпевец is DaveДейв GrohlГрол,
81
257110
2000
главный певец который Дэйв Грол,
04:35
who was the drummerударник in Nirvanaнирвана.
82
259110
3778
бывший барабанщик Нирваны.
04:38
The songsпесни are a little similarаналогичный, but mostlyв основном
83
262888
1300
Песни немного похожи, но в основном
04:40
I'm just interestedзаинтересованный in the ideaидея that somedayкогда-нибудь maybe
84
264188
1626
мне интересна идея,
что когда-нибудь, возможно,
04:41
we'llЧто ж buyкупить a songпесня because we like the way it looksвыглядит.
85
265814
4412
мы будем покупать песню, потому что
нам нравится, как она выглядит.
04:46
All right, now for some more soundзвук dataданные.
86
270226
1100
Ну, ладно,
вот ещё немного звуковых данных.
04:47
This is dataданные from a skateкататься на коньках parkпарк,
87
271326
2652
Это данные из скейт-парка.
04:49
and this is MabelМейбл DavisДэвис skateкататься на коньках parkпарк
88
273978
2032
Это парк Марбэл Дэвис
04:51
in AustinОстин, TexasТехас. (SkateboardСкейтборд soundsзвуки)
89
276010
2142
в Остин, штат Техас.
(Звуки скейтбордов)
04:54
And the soundsзвуки you're hearingслух cameпришел from eight8
90
278152
1374
Эти звуки были записаны восемью микрофонами,
04:55
microphonesмикрофоны attachedприложенный to obstaclesпрепятствий around the parkпарк,
91
279526
2216
прикреплёнными
к препятствиям по всему парку,
04:57
and it soundsзвуки like chaosхаос, but actuallyна самом деле
92
281742
2184
и звучит это, как беспорядок;
04:59
all the tricksтрюки startНачало with a very distinctотчетливый slapпощечина,
93
283926
3347
но на деле все трюки
начинаются с характерного шлепка,
05:03
but successfulуспешный tricksтрюки endконец with a popпоп,
94
287273
1604
удачные трюки заканчиваются хлопком,
05:04
whereasв то время как unsuccessfulнеудачный tricksтрюки
95
288877
1793
а неудачные трюки —
05:06
more of a scratchцарапина and a tumbleкувыркаться,
96
290670
1856
скрежетом и падением.
05:08
and tricksтрюки on the railрельс will ringкольцо out like a gongгонг, and
97
292526
4010
Трюки на перилах звенят, как гонг,
и голоса занимают
05:12
voicesголоса occupyоккупировать very uniqueуникальный frequenciesчастоты in the skateкататься на коньках parkпарк.
98
296536
2790
уникальную частоту в парке.
05:15
So if we were to renderоказывать these soundsзвуки visuallyвизуально,
99
299326
1938
Итак, если мы разложим
эти звуки визуально,
05:17
we mightмог бы endконец up with something like this.
100
301264
1407
у нас получится, что-то вроде этого.
05:18
This is all 40 minutesминут of the recordingзапись,
101
302671
2456
Это все 40 минут записи.
05:21
and right away the algorithmалгоритм tellsговорит us
102
305127
2160
Алгоритм нам сразу показывает
05:23
a lot more tricksтрюки are missedпропущенный than are madeсделал,
103
307287
2073
намного больше трюков-промахов,
чем удавшихся.
05:25
and alsoтакже a trickтрюк on the railsрельсы is a lot more likelyвероятно
104
309360
2335
Трюк на перилах,
вероятнее всего,
05:27
to produceпроизводить a cheerура, and if you look really closelyтесно,
105
311695
2872
вызывает возглас восторга,
и если присмотреться,
05:30
we can teaseдразнить out trafficтрафик patternsузоры.
106
314567
1733
мы можем выделить узоры движения.
05:32
You see the skatersфигуристов oftenдовольно часто trickтрюк in this directionнаправление. The obstaclesпрепятствий are easierПолегче.
107
316300
6087
Скейтеры чаще прыгают
в этом направлении.
Там препятствия легче.
05:38
And in the middleсредний of the recordingзапись, the micsмикрофоны pickвыбирать this up,
108
322387
1705
А в середине записи
микрофоны записали вот это,
05:39
but laterпозже in the recordingзапись, this kidдитя showsшоу up,
109
324092
2804
но потом в записи
появляется вот этот парень,
05:42
and he startsначинается usingс помощью a lineлиния at the topВверх of the parkпарк
110
326896
2928
он начинает использовать
перила в верхней части парка,
05:45
to do some very advancedпередовой tricksтрюки on something
111
329824
1802
делая очень продвинутые трюки
на чём-то, что называют
05:47
calledназывается the tallвысокий railрельс.
112
331626
1103
высокие перила.
05:48
And it's fascinatingочаровательный. At this momentмомент in time,
113
332729
1872
Это впечатляет.
В данный момент времени
05:50
all the restотдых of the skatersфигуристов turnочередь theirих linesлинии 90 degreesстепени
114
334601
3503
остальные скейтеры
поворачивают на 90 градусов,
05:54
to stayоставаться out of his way.
115
338104
1778
чтобы ему не мешать.
05:55
You see, there's a subtleтонкий etiquetteэтикет in the skateкататься на коньках parkпарк,
116
339882
2543
Видите, в скейт-парке
существует тонкий этикет,
05:58
and it's led by keyключ influencersавторитетов,
117
342425
1600
он определяется самыми продвинутыми,
05:59
and they tendиметь тенденцию to be the kidsДети who can do the bestЛучший tricksтрюки,
118
344025
3248
то есть теми, кто делает
самые сложные трюки,
06:03
or wearносить redкрасный pantsбрюки, and on this day the micsмикрофоны pickedвыбрал that up.
119
347273
2430
ну, или одевают красные штаны.
В тот день микрофоны всё это записали.
06:05
All right, from skateкататься на коньках physicsфизика to theoreticalтеоретический physicsфизика.
120
349703
3901
Итак, от физики скейтов
до теоретической физики.
06:09
I'm a bigбольшой fanпоклонник of StephenСтивен HawkingХокинг,
121
353604
1616
Я большой фанат Стивена Хокинга,
06:11
and I wanted to use all eight8 hoursчасов
122
355220
1336
и я хотел использовать все 8 часов
06:12
of his CambridgeКембридж lectureлекция seriesсерии to createСоздайте an homageдань.
123
356556
2587
его лекций из Кембриджской серии,
чтобы показать своё уважение.
06:15
Now, in this seriesсерии he's speakingГоворящий with the aidпомощь of a computerкомпьютер,
124
359143
3064
В этой серии он говорит
с помощью компьютера,
06:18
whichкоторый actuallyна самом деле makesмарки identifyingидентифицирующий the endsконцы of sentencesпредложения
125
362207
3104
что позволяет без проблем опознать
06:21
fairlyдовольно easyлегко. So I wroteписал a steeringрулевое управление algorithmалгоритм.
126
365311
3426
концы предложений.
Я написал ведущий алгоритм.
06:24
It listensслушает to the lectureлекция, and then it usesиспользования
127
368737
1960
Он слушает лекцию, а затем использует
06:26
the amplitudeамплитуда of eachкаждый wordслово to moveпереехать a pointточка on the x-axisОсь х,
128
370697
2687
амплитуду каждого слова,
чтобы двигать точку на оси X,
06:29
and it usesиспользования the inflectionсгибание of sentencesпредложения
129
373384
2633
и интонацию предложений,
06:31
to moveпереехать a sameодна и та же pointточка up and down on the y-axisось ординат.
130
376017
2154
чтобы двигать точку по оси Y.
06:34
And these trendтенденция linesлинии, you can see, there's more questionsвопросов
131
378171
2774
По этим тенденциям видно,
что в законах физики
06:36
than answersответы in the lawsзаконы of physicsфизика,
132
380945
1870
больше вопросов, чем ответов,
06:38
and when we reachдостичь the endконец of a sentenceпредложение,
133
382815
2033
а когда мы доходим
до конца предложения,
06:40
we placeместо a starзвезда at that locationместо нахождения.
134
384848
2335
ставим туда звезду.
06:43
So there's a lot of sentencesпредложения, so a lot of starsзвезды,
135
387183
2800
Итак, множество предложений —
большое количество звёзд,
06:45
and after renderingоказание all of the audioаудио, this is what we get.
136
389983
2356
и после обработки всей звукозаписи,
мы получаем вот это.
06:48
This is StephenСтивен Hawking'sХокинга universeвселенная.
137
392339
2929
Это вселенная Стивена Хокинга.
06:51
(ApplauseАплодисменты)
138
395268
6937
(Аплодисменты)
06:58
It's all eight8 hoursчасов of the CambridgeКембридж lectureлекция seriesсерии
139
402205
2487
Это все 8 часов
серии Кембриджских лекций,
07:00
takenвзятый in as a singleОдин visualвизуальный impressionвпечатление,
140
404692
1848
представленных
как единое визуальное впечатление,
07:02
and I really like this imageобраз,
141
406540
1757
и мне очень нравится эта картинка,
07:04
but a lot of people think it's fakeне настоящие.
142
408297
1808
но многие считают, что она подделана.
07:06
So I madeсделал a more interactiveинтерактивный versionверсия,
143
410105
2344
Так что я сделал
более интерактивную версию,
07:08
and the way I did that is I used theirих positionдолжность in time
144
412449
5456
используя положения звёзд
во время лекции,
07:13
in the lectureлекция to placeместо these starsзвезды into 3D spaceпространство,
145
417905
2367
размещая их в пространстве.
С помощью специального
07:16
and with some customобычай softwareпрограммного обеспечения and a KinectKinect,
146
420272
2401
программного обеспечения
и контроллера Кинект,
07:18
I can walkходить right into the lectureлекция.
147
422673
2663
я могу войти прямо в лекцию.
07:21
I'm going to waveволна throughчерез the KinectKinect here
148
425336
1800
Я помашу Кинекту,
возьму контроль на себя,
07:23
and take controlконтроль, and now I'm going to reachдостичь out
149
427136
1832
сейчас я дотянусь,
07:24
and I'm going to touchпотрогать a starзвезда, and when I do,
150
428968
3239
и дотронусь до звезды.
Когда я это сделаю,
07:28
it will playиграть the sentenceпредложение
151
432207
1944
воспроизведётся предложение,
07:30
that generatedгенерироваться that starзвезда.
152
434151
1465
которое создало эту звезду.
07:31
StephenСтивен HawkingХокинг: There is one, and only one, arrangementдоговоренность
153
435616
3816
Стивен Хокинг: Существует одно
и только одно положение,
07:35
in whichкоторый the piecesкуски make a completeполный pictureкартина.
154
439432
2799
в котором все части
создают целую картину.
07:38
JaredДжаред FicklinFicklin: Thank you. (ApplauseАплодисменты)
155
442231
4148
Джаред Фиклин: Спасибо. (Аплодисменты)
07:42
There are 1,400 starsзвезды.
156
446379
3173
Тут 1 400 звёзд.
07:45
It's a really funвесело way to exploreисследовать the lectureлекция,
157
449552
1664
Это очень интересный способ
изучать лекцию,
07:47
and, I hopeнадежда, a fittingпримерка homageдань.
158
451216
1467
и я надеюсь —
достойный знак уважения.
07:48
All right. Let me closeЗакрыть with a work in progressпрогресс.
159
452683
5472
Ну, хорошо. Позвольте закончить,
показав ещё одну работу.
07:54
I think, after 30 yearsлет, the opportunityвозможность existsсуществует
160
458155
2983
Думаю, спустя 30 лет
будет возможность
07:57
to createСоздайте an enhancedповышенная versionверсия of closedзакрыто captioningсубтитры.
161
461138
2104
создавать расширенную версию субтитров.
07:59
Now, we'veмы в all seenвидели a lot of TEDTalksTEDTalks onlineонлайн,
162
463242
2119
Мы все видели большое количество
выступлений TEDTalks в сети,
08:01
so let's watch one now with the soundзвук turnedоказалось off
163
465361
2927
так давайте сейчас посмотрим
одно с выключенным звуком
08:04
and the closedзакрыто captioningсубтитры turnedоказалось on.
164
468288
3922
и со включёнными субтитрами.
08:08
There's no closedзакрыто captioningсубтитры for the TEDТЕД themeтема songпесня,
165
472210
2146
Для музыкальной темы TED субтитров нет,
08:10
and we're missingотсутствует it, but if you've watchedсмотрели enoughдостаточно of these,
166
474356
2113
мы её пропускаем, но если
вы посмотрели достаточно таких видео,
08:12
you hearзаслушивать it in your mind'sума earухо,
167
476469
1369
вы слышите её у себя в голове.
08:13
and then applauseаплодисменты startsначинается.
168
477838
2983
Потом начинаются аплодисменты.
08:16
It usuallyкак правило beginsначинается here, and it growsрастет and then it fallsпадения.
169
480821
2190
Обычно они начинаются тут,
становятся громче, потом утихают.
08:18
SometimesИногда you get a little starзвезда applauseаплодисменты,
170
483011
1977
Иногда бывает,
что звёздам аплодируют подольше,
08:20
and then I think even BillБилл Gatesворота takes a nervousнервное breathдыхание,
171
484988
2486
и, думаю, даже Билл Гейтс
нервно вздыхает,
08:23
and the talk beginsначинается.
172
487474
1690
затем начинается речь.
08:25
All right, so let's watch this clipклип again.
173
489164
5698
Итак, давайте посмотрим
этот клип ещё раз.
08:30
This time, I'm not going to talk at all.
174
494862
1256
В этот раз я помолчу.
08:32
There's still going to be no audioаудио,
175
496118
1367
Будет звук,
08:33
but what I am going to do is I'm going to renderоказывать the soundзвук
176
497485
1904
но вот что я сделаю — я вынесу звук
08:35
visuallyвизуально in realреальный time at the bottomдно of the screenэкран.
177
499389
4316
визуально в том же времени вниз экрана.
08:39
So watch closelyтесно and see what your eyesглаза can hearзаслушивать.
178
503705
2791
Смотрите внимательно и замечайте,
что слышат ваши глаза.
09:03
This is fairlyдовольно amazingудивительно to me.
179
527880
1880
Это кажется мне
достаточно удивительным.
09:05
Even on the first viewПосмотреть, your eyesглаза will successfullyуспешно
180
529760
3333
Даже в первый раз ваши глаза
09:08
pickвыбирать out patternsузоры, but on repeatedповторный viewsПросмотры,
181
533093
3088
успешно выделят узоры,
но в последующие разы
09:12
your brainголовной мозг actuallyна самом деле getsполучает better
182
536181
1689
ваш мозг уже лучше
09:13
at turningпревращение these patternsузоры into informationИнформация.
183
537870
1656
переводит эти узоры в информацию.
09:15
You can get the toneтон and the timbreтембр
184
539526
1591
Вы можете уже понять интонацию,
09:17
and the paceтемп of the speechречь,
185
541117
1223
тембр и скорость речи, то,
09:18
things that you can't get out of closedзакрыто captioningсубтитры.
186
542340
2064
чего вы не поймёте
из простых субтитров.
09:20
That famousизвестный sceneместо действия in horrorужастик moviesкино
187
544404
2184
Знаменитая сцена из фильмов ужаса,
09:22
where someoneкто то is walkingгулять пешком up from behindза
188
546588
2648
где кто-то подкрадывается сзади —
09:25
is something you can see,
189
549236
1960
это то, что вы видите,
09:27
and I believe this informationИнформация would be something
190
551196
2704
и я думаю, что эта информация
09:29
that is usefulполезным at timesраз when the audioаудио is turnedоказалось off
191
553900
2803
была бы чем-то полезным тогда,
когда звук выключен
09:32
or not heardуслышанным at all, and I speculateспекулировать that deafглухой audiencesаудитории
192
556703
2941
или его нет вовсе,
и я предполагаю, что глухой зритель,
09:35
mightмог бы actuallyна самом деле even be better
193
559644
1177
возможно, даже лучше бы
09:36
at seeingвидя soundзвук than hearingслух audiencesаудитории.
194
560821
1781
воспринимал звук,
нежели слышащий зритель.
09:38
I don't know. It's a theoryтеория right now.
195
562602
1498
Не знаю. Это пока ещё теория.
09:40
ActuallyНа самом деле, it's all just an ideaидея.
196
564100
1521
Вообще, это всё пока только идея.
09:41
And let me endконец by sayingпоговорка that soundзвук movesдвижется in all directionsнаправления,
197
565621
4191
Закончу, сказав, что звук
передвигается по всем направлениям,
09:45
and so do ideasидеи.
198
569812
1977
так же движутся и идеи.
09:47
Thank you. (ApplauseАплодисменты)
199
571789
3112
Спасибо. (Аплодисменты)

▲Back to top

ABOUT THE SPEAKER
Jared Ficklin - Visualizer
In his day job, Jared Ficklin makes user interfaces at frog design. As a hobby, he explores what music looks like ... in light, in shapes, in fire.

Why you should listen

Jared Ficklin is a Senior Principal Design Technologist at frog, where he builds user experiences for clients, playing with interactions including touch and multi-touch, and applying physics to enhance the user experience. A passion for music and making things introduced him to the hobby of sound visualization, which has led him on occasion to play with fire. (As Flash on the Beach puts it, "Jared Ficklin’s sonic experiments stood out for their individuality, drama and casual disregard for health and safety.") Every March in Austin, Texas, Ficklin organizes the frog party, a collective social experiment for a few thousand people attending SXSW Interactive. It's a form of playful R&D for social technology. And he has spent 10 years helping fund, design and  build quality free public skateparks for Austin as part of the Austin Public Skatepark Action Committee. 

More profile about the speaker
Jared Ficklin | Speaker | TED.com