ABOUT THE SPEAKER
Pranav Mistry - Director of research, Samsung Research America
As an MIT grad student, Pranav Mistry invented SixthSense, a wearable device that enables new interactions between the real world and the world of data.

Why you should listen

When Pranav Mistry was a PhD student in the Fluid Interfaces Group at MIT's Media Lab, he worked with lab director Pattie Maes to create some of the most entertaining and thought-provoking interfaces the world had ever seen. And not just computer interfaces, mind you -- these are ways to help the digital and the actual worlds interface. Imagine: intelligent sticky notes, Quickies, that can be searched and can send reminders; a pen that draws in 3D; and TaPuMa, a tangible public map that can act as Google of physical world. And of course the legendary SixthSense, which is now open sourced

Before his studies at MIT, he worked with Microsoft as a UX researcher; he's a graduate of IIT. Now, as director of research at Samsung Research America, Mistry heads the Think Tank Team, an interdisciplinary group of researchers that hunts for new ways to mix digital informational with real-world interactions. As an example, Mistry launched the company's smartwatch, the Galaxy Gear, in 2013.

More profile about the speaker
Pranav Mistry | Speaker | TED.com
TEDIndia 2009

Pranav Mistry: The thrilling potential of SixthSense technology

Pranav Mistry: Das packende Potenzial der SixthSense Technologie

Filmed:
18,689,186 views

Pranav Mistry demonstriert in TEDIndia mehrere Werkzeuge die der physischen Welt helfen mit der Welt der Daten zu interagieren. Die Vorstellung gewährt uns einen tiefen Blick in seine Vorrichtungen der SixthSense Technologie und einen neuen "Papier-Laptop", der eine radikale Änderung der Sichtweise auf herkömmliche Laptops herbeiführt. In einer Fragerunde auf der Bühne sagt Minstry, das er die Software seiner SixthSense Technologie frei zur Verfügung stellen wird, um allen deren Möglichkeiten zur Verfügung zu stellen.
- Director of research, Samsung Research America
As an MIT grad student, Pranav Mistry invented SixthSense, a wearable device that enables new interactions between the real world and the world of data. Full bio

Double-click the English transcript below to play the video.

00:15
We grewwuchs up
0
0
2000
Wir sind damit aufgewachsen
00:17
interactinginteragierend with the physicalphysisch objectsObjekte around us.
1
2000
3000
mit den physischen Objekten um uns zu interagieren.
00:20
There are an enormousenorm numberNummer of them
2
5000
2000
Es gibt eine Menge von ihnen,
00:22
that we use everyjeden day.
3
7000
2000
die wir tagtäglich benutzen.
00:24
UnlikeIm Gegensatz zu mostdie meisten of our computingComputer devicesGeräte,
4
9000
3000
Im Gegensatz zu Computern
00:27
these objectsObjekte are much more funSpaß to use.
5
12000
3000
macht es viel mehr Spass diese Objekte zu benutzen.
00:30
When you talk about objectsObjekte,
6
15000
3000
Wenn wir über Objekte reden,
00:33
one other thing automaticallyautomatisch comeskommt attachedangebracht to that thing,
7
18000
3000
werden andere Dinge automatisch mit diesen in Verbindung gebracht.
00:36
and that is gesturesGesten:
8
21000
2000
Dies sind Gesten:
00:38
how we manipulatemanipulieren these objectsObjekte,
9
23000
2000
Wie wir diese Objekte manipulieren,
00:40
how we use these objectsObjekte in everydayjeden Tag life.
10
25000
3000
wie wir diese Objekte in unserem täglichen Leben benutzen.
00:43
We use gesturesGesten not only to interactinteragieren with these objectsObjekte,
11
28000
3000
Wir benutzen Gesten nicht nur, um mit Objekten zu interagieren,
00:46
but we alsoebenfalls use them to interactinteragieren with eachjede einzelne other.
12
31000
2000
sondern auch um miteinander zu komunizieren.
00:48
A gestureGeste of "NamasteNamaste!", maybe, to respectdie Achtung someonejemand,
13
33000
3000
Eine Geste "Namaste!" zum Beispiel, um jemandem Respekt zu erweisen.
00:51
or maybe --
14
36000
1000
oder vielleicht --
00:52
in IndiaIndien I don't need to teachlehren a kidKind that this meansmeint
15
37000
2000
In Indien weiss jedes Kind, dass dies
00:54
"fourvier runsläuft" in cricketCricket.
16
39000
2000
"Vier" in Cricket bedeutet.
00:56
It comeskommt as a partTeil of our everydayjeden Tag learningLernen.
17
41000
3000
Es ist ein Teil von unserem alltäglichen Lernen.
00:59
So, I am very interestedinteressiert,
18
44000
2000
Ich war von Anfang an sehr interessiert
01:01
from the beginningAnfang, that how --
19
46000
2000
an der Art und Weise,
01:03
how our knowledgeWissen
20
48000
2000
wie unser Wissen über
01:05
about everydayjeden Tag objectsObjekte and gesturesGesten,
21
50000
2000
alltägliche Objekte und Gesten
01:07
and how we use these objectsObjekte,
22
52000
2000
und unser Wissen über wie wir diese Objekte benutzen
01:09
can be leveragedgehegt to our interactionsWechselwirkungen with the digitaldigital worldWelt.
23
54000
3000
auf unsere Wechselwirkung mit der digitalen Welt Einfluss nehmen kann.
01:12
RatherVielmehr than usingmit a keyboardTastatur and mouseMaus,
24
57000
3000
Warum kann ich nicht anstatt eine Maus und eine Tastatur
01:15
why can I not use my computerComputer
25
60000
3000
einfach meinen Computer auf die gleiche Weise bedienen,
01:18
in the samegleich way that I interactinteragieren in the physicalphysisch worldWelt?
26
63000
3000
wie ich mit der echten Welt Interagiere?
01:21
So, I startedhat angefangen this explorationErkundung around eightacht yearsJahre back,
27
66000
3000
Ich habe also vor acht Jahren mit der Forschung begonnen,
01:24
and it literallybuchstäblich startedhat angefangen with a mouseMaus on my deskSchreibtisch.
28
69000
3000
und habe einfach mit der Maus begonnen.
01:27
RatherVielmehr than usingmit it for my computerComputer,
29
72000
3000
Anstatt sie für meinen Computer zu benutzen,
01:30
I actuallytatsächlich openedgeöffnet it.
30
75000
3000
habe ich sie geöffnet.
01:33
MostDie meisten of you mightMacht be awarebewusst that, in those daysTage,
31
78000
2000
Die meisten von Ihnen wissen sicherlich, dass zur damaligen Zeit
01:35
the mouseMaus used to come with a ballBall insideinnen,
32
80000
2000
die Maus eine Kugel in sich hatte.
01:37
and there were two rollersWalzen
33
82000
2000
An dieser Kugel waren zwei Rollen,
01:39
that actuallytatsächlich guideführen the computerComputer where the ballBall is movingbewegend,
34
84000
3000
welche dem Computer zeigen wohin sich die Kugel bewegt,
01:42
and, accordinglyentsprechend, where the mouseMaus is movingbewegend.
35
87000
2000
und damit auch wohin sich die Maus bewegt.
01:44
So, I was interestedinteressiert in these two rollersWalzen,
36
89000
3000
Ich habe mich für diese zwei Rollen interessiert,
01:47
and I actuallytatsächlich wanted more, so I borrowedausgeliehen anotherein anderer mouseMaus from a friendFreund --
37
92000
3000
und wollte mehrere von ihnen, also lieh ich mir eine andere Maus von einem Freund,
01:50
never returnedist zurückgekommen to him --
38
95000
2000
- Er hat sie bis heute nicht zurück -
01:52
and I now had fourvier rollersWalzen.
39
97000
2000
und hatte nun vier Rollen.
01:54
InterestinglyInteressanterweise, what I did with these rollersWalzen is,
40
99000
3000
Interessanterweise ist das, was ich mit diesen Rollen tat
01:57
basicallyGrundsätzlich gilt, I tookdauerte them off of these mousesMäuse
41
102000
3000
einfach nur dass ich sie von der Maus abmontierte
02:00
and then put them in one lineLinie.
42
105000
2000
und alle in einer Reihe anordnete.
02:02
It had some stringsSaiten and pulleysRiemenscheiben and some springsFedern.
43
107000
3000
Ich brachte einige Fäden, Flaschenzüge und Federn an und
02:05
What I got is basicallyGrundsätzlich gilt a gestureGeste interfaceSchnittstelle deviceGerät
44
110000
3000
bekam ein Design für ein Gesten-Interface,
02:08
that actuallytatsächlich actshandelt as a motion-sensingBewegungssensoren deviceGerät
45
113000
4000
welches wie ein Bewegungs-Sensor arbeitet.
02:12
madegemacht for two dollarsDollar.
46
117000
2000
Kostenpunkt: Zwei $
02:14
So, here, whateverwas auch immer movementBewegung I do in my physicalphysisch worldWelt
47
119000
3000
Egal welche Bewegung ich in meiner echten Welt machte
02:17
is actuallytatsächlich replicatedrepliziert insideinnen the digitaldigital worldWelt
48
122000
3000
wurde nur mithilfe meines kleinen Gerätes in der
02:20
just usingmit this smallklein deviceGerät that I madegemacht, around eightacht yearsJahre back,
49
125000
3000
digitalen Welt repliziert. Vor acht Jahren,
02:23
in 2000.
50
128000
2000
im Jahre 2000.
02:25
Because I was interestedinteressiert in integratingintegrierend these two worldsWelten,
51
130000
2000
Weil es mich sehr interessiert hat diese zwei Welten ineinander zu integrieren,
02:27
I thought of stickyklebrig notesNotizen.
52
132000
2000
dachte ich an Klebenotizen.
02:29
I thought, "Why can I not connectverbinden
53
134000
3000
Ich dachte, "Warum kann ich nicht das normale Interface einer Notiz
02:32
the normalnormal interfaceSchnittstelle of a physicalphysisch stickyklebrig noteHinweis
54
137000
2000
der realen Welt mit der
02:34
to the digitaldigital worldWelt?"
55
139000
2000
digitalen Welt verbinden?"
02:36
A messageNachricht writtengeschrieben on a stickyklebrig noteHinweis to my momMama
56
141000
2000
Eine Nachricht an meine Mutter,
02:38
on paperPapier-
57
143000
1000
die ich auf einen Notizblock schrieb
02:39
can come to an SMSSMS,
58
144000
2000
könnte sie als SMS erreichen,
02:41
or maybe a meetingTreffen reminderErinnerung
59
146000
2000
oder vielleicht kann ein Treffen-Erinnerer
02:43
automaticallyautomatisch syncsSynchronisierungen with my digitaldigital calendarKalender --
60
148000
2000
sich automatisch mit meinem Kalender synchronisieren.
02:45
a to-doto-do- listListe that automaticallyautomatisch syncsSynchronisierungen with you.
61
150000
3000
oder eine to-do Liste, die sich automatisch mit ihnen synchronisiert.
02:48
But you can alsoebenfalls searchSuche in the digitaldigital worldWelt,
62
153000
3000
Aber sie können auch in der digitalen Welt suchen,
02:51
or maybe you can writeschreiben a queryAbfrage, sayingSprichwort,
63
156000
2000
wenn sie eine Frage stellen:
02:53
"What is DrDr. Smith'sSmiths addressAdresse?"
64
158000
2000
"Was ist Dr.Smith's Adresse?"
02:55
and this smallklein systemSystem actuallytatsächlich printsDrucke it out --
65
160000
2000
druckt dieses kleine System diese für sie aus --
02:57
so it actuallytatsächlich actshandelt like a paperPapier- input-outputEingang-Ausgang systemSystem,
66
162000
2000
also arbeitet es eigentlich wie ein Papier-Eingabe-Ausgabe System,
02:59
just madegemacht out of paperPapier-.
67
164000
3000
welches aus Papier besteht.
03:05
In anotherein anderer explorationErkundung,
68
170000
2000
In einer anderen Untersuchung
03:07
I thought of makingHerstellung a penStift that can drawzeichnen in threedrei dimensionsMaße.
69
172000
3000
kam mir die Idee einen Stift zum 3D-zeichnen zu entwickeln.
03:10
So, I implementedimplementiert this penStift
70
175000
2000
Ich realisierte also diesen Stift,
03:12
that can help designersDesigner and architectsArchitekten
71
177000
2000
welcher Designern und Architekten helfen kann.
03:14
not only think in threedrei dimensionsMaße,
72
179000
2000
Sie können nun nicht nur 3-dimensional denken,
03:16
but they can actuallytatsächlich drawzeichnen
73
181000
2000
sie können 3-dimensional zeichnen,
03:18
so that it's more intuitiveintuitiv to use that way.
74
183000
2000
was ihre Arbeit viel intuitiver macht.
03:20
Then I thought, "Why not make a GoogleGoogle MapKarte,
75
185000
2000
Dann dachte ich, "Wieso mache ich keine Google Map,
03:22
but in the physicalphysisch worldWelt?"
76
187000
2000
aber in der echten Welt?"
03:24
RatherVielmehr than typingTippen a keywordStichwort to find something,
77
189000
3000
Anstatt ein Schlüsselwort einzutippen, um etwas zu finden,
03:27
I put my objectsObjekte on topoben of it.
78
192000
2000
legte ich meine Objekte auf es.
03:29
If I put a boardingeinsteigen passbestehen, it will showShow me where the flightFlug gateTor is.
79
194000
3000
Wenn ich ein Flugticket darauf lege, zeigt es mir wo mein Gate ist.
03:32
A coffeeKaffee cupTasse will showShow where you can find more coffeeKaffee,
80
197000
3000
Eine Kaffeetasse zeigt mir wo ich mehr Kaffee finde,
03:35
or where you can trashMüll the cupTasse.
81
200000
2000
oder wo ich die Tasse entsorgen kann.
03:37
So, these were some of the earliervorhin explorationsErkundungen I did because
82
202000
3000
Dies waren einige der früheren Forschungen.
03:40
the goalTor was to connectverbinden these two worldsWelten seamlesslynahtlos.
83
205000
3000
Das eigentliche Ziel war die beiden Welten nahtlos zu verbinden.
03:44
AmongUnter all these experimentsExperimente,
84
209000
2000
Während all dieser Experimente,
03:46
there was one thing in commonverbreitet:
85
211000
2000
gab es eine Gemeinsamkeit:
03:48
I was tryingversuchen to bringbringen a partTeil of the physicalphysisch worldWelt to the digitaldigital worldWelt.
86
213000
4000
Ich versuchte einen Teil der echten Welt in die digitale Welt zu bringen.
03:52
I was takingunter some partTeil of the objectsObjekte,
87
217000
3000
Ich nahm Teile der Objekte,
03:55
or any of the intuitivenessAnschaulichkeit of realecht life,
88
220000
3000
oder irgendwelche Intuitionen des echten Lebens
03:58
and bringingbringt them to the digitaldigital worldWelt,
89
223000
3000
und brachte sie in die digitale Welt,
04:01
because the goalTor was to make our computingComputer interfacesSchnittstellen more intuitiveintuitiv.
90
226000
3000
denn das Ziel war unsere Computer Eingabe intuitiver zu gestalten.
04:04
But then I realizedrealisiert that we humansMenschen
91
229000
2000
Doch dann realisierte ich, dass wir Menschen
04:06
are not actuallytatsächlich interestedinteressiert in computingComputer.
92
231000
3000
nicht wirklich an Computern interessiert sind.
04:09
What we are interestedinteressiert in is informationInformation.
93
234000
3000
Wir sind an Informationen interessiert.
04:12
We want to know about things.
94
237000
2000
Wir möchten über Dinge bescheidwissen.
04:14
We want to know about dynamicdynamisch things going around.
95
239000
2000
Wir möchten über dynamische Dinge bescheidwissen die ihren Lauf nehmen.
04:16
So I thought, around last yearJahr -- in the beginningAnfang of the last yearJahr --
96
241000
5000
Also dachte ich ca. anfang letzten Jahres daran
04:21
I startedhat angefangen thinkingDenken, "Why can I not take this approachAnsatz in the reverseumkehren way?"
97
246000
3000
"Warum kann ich diese Herangehensweise nicht umkehren?"
04:24
Maybe, "How about I take my digitaldigital worldWelt
98
249000
3000
"Ich könnte einen Teil meiner digitalen Welt nehmen
04:27
and paintFarbe the physicalphysisch worldWelt with that digitaldigital informationInformation?"
99
252000
5000
und die echte Welt mit dieser digitalen Information bereichern."
04:32
Because pixelsPixel are actuallytatsächlich, right now, confinedbeschränkt in these rectangularrechteckige devicesGeräte
100
257000
4000
Denn im moment sind Pixel auf rechteckige Maschinen beschränkt,
04:36
that fitpassen in our pocketsTaschen.
101
261000
2000
die in unsere Taschen passen.
04:38
Why can I not removeentfernen this confinebeschränken
102
263000
3000
Warum kann ich diese Beschränkung nicht entfernen
04:41
and take that to my everydayjeden Tag objectsObjekte, everydayjeden Tag life
103
266000
3000
und auf meine Alltagsgegenstände beziehen, in dem alltäglichen Leben,
04:44
so that I don't need to learnlernen the newneu languageSprache
104
269000
2000
so dass ich keine neue Sprache lernen muss
04:46
for interactinginteragierend with those pixelsPixel?
105
271000
3000
um mit diesen Pixeln zu interagieren?
04:50
So, in orderAuftrag to realizerealisieren this dreamTraum,
106
275000
2000
Um diesen Traum zu
04:52
I actuallytatsächlich thought of puttingPutten a big-sizegroße Größe projectorBeamer on my headKopf.
107
277000
3000
verwirklichen dachte ich an einen großen Projektor auf meinem Kopf.
04:55
I think that's why this is callednamens a head-mountedHead mounted projectorBeamer, isn't it?
108
280000
3000
Ich glaube darum nennen sie es head-mounted-projector, oder?
04:58
I tookdauerte it very literallybuchstäblich,
109
283000
2000
Ich nahm das sehr wörtlich,
05:00
and tookdauerte my bikeFahrrad helmetHelm,
110
285000
2000
ich nahm meinen Fahrradhelm,
05:02
put a little cutschneiden over there so that the projectorBeamer actuallytatsächlich fitspasst nicelyschön.
111
287000
3000
und setzte ihn ein wenig schieff auf, das der Projektor gut daraufpasste.
05:05
So now, what I can do --
112
290000
2000
Was ich nun tun kann --
05:07
I can augmentAugment the worldWelt around me with this digitaldigital informationInformation.
113
292000
4000
ich kann die Welt um mich herum mit digitaler Information erweitern.
05:11
But laterspäter,
114
296000
2000
Doch später
05:13
I realizedrealisiert that I actuallytatsächlich wanted to interactinteragieren with those digitaldigital pixelsPixel, alsoebenfalls.
115
298000
3000
realisierte ich, dass ich mit diesen Pixeln auch Interagieren wollte.
05:16
So I put a smallklein cameraKamera over there,
116
301000
2000
Also setzte ich auch eine kleine Kamera auf,
05:18
that actshandelt as a digitaldigital eyeAuge.
117
303000
2000
welche wie ein digitales Auge funktioniert.
05:20
LaterSpäter, we movedbewegt to a much better,
118
305000
2000
Später entwickelten wir eine viel bessere,
05:22
consumer-orientedVerbraucher orientierten- pendantAnhänger versionVersion of that,
119
307000
2000
Konsumenten orientierte Anhänger Version davon,
05:24
that manyviele of you now know as the SixthSenseSixthSense deviceGerät.
120
309000
3000
welche viele von ihnen als SixthSense Gerät kennen.
05:27
But the mostdie meisten interestinginteressant thing about this particularinsbesondere technologyTechnologie
121
312000
3000
Doch das Interessanteste über diese besondere Technologie
05:30
is that you can carrytragen your digitaldigital worldWelt with you
122
315000
4000
ist das Sie ihre digitale Welt mit ihnen herumtragen können,
05:34
whereverwo auch immer you go.
123
319000
2000
wo immer sie auch hingehen.
05:36
You can startAnfang usingmit any surfaceOberfläche, any wallMauer around you,
124
321000
3000
Sie können jede Fläche, jede Wand
05:39
as an interfaceSchnittstelle.
125
324000
2000
als Interface benutzen.
05:41
The cameraKamera is actuallytatsächlich trackingVerfolgung all your gesturesGesten.
126
326000
3000
Die Kamera verfolgt all ihre Gesten.
05:44
WhateverWas auch immer you're doing with your handsHände,
127
329000
2000
Was auch immer Sie mit ihren Händen machen,
05:46
it's understandingVerstehen that gestureGeste.
128
331000
2000
Es versteht diese Geste.
05:48
And, actuallytatsächlich, if you see, there are some colorFarbe markersMarker
129
333000
2000
Und wie Sie sehen gibt es einige Farbmarkierungen,
05:50
that in the beginningAnfang versionVersion we are usingmit with it.
130
335000
3000
welche wir seit den Anfängen benutzten.
05:53
You can startAnfang paintingMalerei on any wallMauer.
131
338000
2000
Sie können an jede Wand malen.
05:55
You stop by a wallMauer, and startAnfang paintingMalerei on that wallMauer.
132
340000
3000
Sie halten vor einer Wand und fangen an diese zu bemalen.
05:58
But we are not only trackingVerfolgung one fingerFinger, here.
133
343000
2000
Aber wir verfolgen hier nicht nur einen Finger.
06:00
We are givinggeben you the freedomFreiheit of usingmit all of bothbeide of your handsHände,
134
345000
4000
Wir geben Ihnen die Freiheit beide ihrer Hände zu benutzen,
06:04
so you can actuallytatsächlich use bothbeide of your handsHände to zoomZoomen into or zoomZoomen out
135
349000
3000
dass Sie ihre Hände zum zoomen einer Karte
06:07
of a mapKarte just by pinchingKneifen all presentGeschenk.
136
352000
2000
benutzen können, indem Sie sie bloß kneifen.
06:09
The cameraKamera is actuallytatsächlich doing --
137
354000
3000
Die Kamera nimmt
06:12
just, gettingbekommen all the imagesBilder --
138
357000
1000
eigentlich bloß alle Zeichen,
06:13
is doing the edgeRand recognitionAnerkennung and alsoebenfalls the colorFarbe recognitionAnerkennung
139
358000
3000
mithilfe der Rand- und Farberkennung
06:16
and so manyviele other smallklein algorithmsAlgorithmen are going on insideinnen.
140
361000
3000
und auf die Art und Weise gehen viele andere kleine Algorithmen darauf ein.
06:19
So, technicallytechnisch, it's a little bitBit complexKomplex,
141
364000
2000
Technisch gesehen ist es ein bisschen komplex,
06:21
but it givesgibt you an outputAusgabe whichwelche is more intuitiveintuitiv to use, in some senseSinn.
142
366000
3000
aber es gibt ihnen ein Resultat welches viel intuitiver zu benutzen ist.
06:24
But I'm more excitedaufgeregt that you can actuallytatsächlich take it outsidedraußen.
143
369000
3000
Was ich jedoch viel interessanter finde ist, dass Sie dieses Gerät mit nach draussen nehmen können.
06:27
RatherVielmehr than gettingbekommen your cameraKamera out of your pocketTasche,
144
372000
3000
Anstatt Ihre Kamera aus Ihrer Tasche zu holen
06:30
you can just do the gestureGeste of takingunter a photoFoto
145
375000
3000
machen sie bloß eine Geste,
06:33
and it takes a photoFoto for you.
146
378000
2000
und es shiesst ein Foto für Sie.
06:35
(ApplauseApplaus)
147
380000
4000
(Applaus)
06:39
Thank you.
148
384000
1000
Danke sehr.
06:41
And laterspäter I can find a wallMauer, anywhereirgendwo,
149
386000
2000
Später finde ich irgendwo eine Wand,
06:43
and startAnfang browsingSurfen those photosFotos
150
388000
2000
und beginne in diesen Fotos zu schmökern
06:45
or maybe, "OK, I want to modifyändern this photoFoto a little bitBit
151
390000
2000
oder vielleicht möchte ich dieses Foto ein bisschen verändern
06:47
and sendsenden it as an emailEmail to a friendFreund."
152
392000
2000
und zu einem Freund schicken.
06:49
So, we are looking for an eraEpoche where
153
394000
3000
Wir suchen also eine Ära in welcher
06:52
computingComputer will actuallytatsächlich mergeverschmelzen with the physicalphysisch worldWelt.
154
397000
3000
das Arbeiten mit dem Computer mit der echten Welt verschmilzt.
06:55
And, of courseKurs, if you don't have any surfaceOberfläche,
155
400000
3000
Und wenn Sie keine Oberfläche finden
06:58
you can startAnfang usingmit your palmPalme for simpleeinfach operationsOperationen.
156
403000
3000
können sie einfach ihre Handfläche für einfache Aufgaben benutzen.
07:01
Here, I'm dialingEinwahl a phoneTelefon numberNummer just usingmit my handHand.
157
406000
2000
Hier wähle ich eine Telefonnummer, wobei ich nur meine Hand benutze.
07:07
The cameraKamera is actuallytatsächlich not only understandingVerstehen your handHand movementsBewegungen,
158
412000
3000
Die Kamera versteht interessanterweise nicht nur meine Bewegungen,
07:10
but, interestinglyinteressant,
159
415000
1000
sondern ist auch
07:11
is alsoebenfalls ablefähig to understandverstehen what objectsObjekte you are holdingHalten in your handHand.
160
416000
3000
fähig zu verstehen welche Dinge ich in meiner Hand halte.
07:14
What we're doing here is actuallytatsächlich --
161
419000
3000
Was wir hier tun ist
07:17
for exampleBeispiel, in this caseFall,
162
422000
2000
zum Beispiel in diesem Fall,
07:19
the bookBuch coverAbdeckung is matchedabgestimmt
163
424000
2000
das Kuvert des Buches mit den
07:21
with so manyviele thousandsTausende, or maybe millionsMillionen of booksBücher onlineonline,
164
426000
3000
Tausenden, oder vielleicht millionen von Büchern online,
07:24
and checkingÜberprüfung out whichwelche bookBuch it is.
165
429000
2000
und prüfen welches Buch es ist.
07:26
OnceEinmal it has that informationInformation,
166
431000
1000
Wenn wir diese Information haben
07:27
it findsfindet out more reviewsBewertungen zu der Unterkunft about that,
167
432000
2000
findet es mehr über das Buch heraus.
07:29
or maybe NewNeu YorkYork TimesMale has a soundklingen overviewÜberblick on that,
168
434000
3000
Oder vielleicht hat die New York Times ein Audio Überblick darüber.
07:32
so you can actuallytatsächlich hearhören, on a physicalphysisch bookBuch,
169
437000
2000
Auf diese Weise kann ich eine Zusammenfassung des buches
07:34
a reviewÜberprüfung as soundklingen.
170
439000
2000
hören.
07:36
("famousberühmt talk at HarvardHarvard UniversityUniversität ...")
171
441000
2000
("berühmte Rede an der Harvard Universität")
07:38
This was Obama'sObama visitBesuch last weekWoche to MITMIT.
172
443000
3000
Dies war Obama's letzter Besuch der MIT.
07:42
("... and particularlyinsbesondere I want to thank two outstandinghervorragende MITMIT ...")
173
447000
4000
("...und besonderer Dank geht an zwei außenstehende MIT...")
07:46
So, I was seeingSehen the liveLeben [videoVideo] of his talk, outsidedraußen, on just a newspaperZeitung.
174
451000
5000
Also habe ich das Live Video seiner Rede draussen auf nur einer Zeitung gesehen.
07:51
Your newspaperZeitung will showShow you liveLeben weatherWetter informationInformation
175
456000
3000
Ihre Zeitung wird ihnen live-Wetterinformationen zeigen.
07:54
ratherlieber than havingmit it updatedaktualisiert -- like, you have to checkprüfen your computerComputer
176
459000
3000
Anstatt es aktualisieren zu müssen, wie Sie es an ihrem Computer machen müssen
07:57
in orderAuftrag to do that, right?
177
462000
2000
um dies zu tun, oder?
07:59
(ApplauseApplaus)
178
464000
5000
(Applaus)
08:04
When I'm going back, I can just use my boardingeinsteigen passbestehen
179
469000
3000
Wenn ich zurück gehe, kann ich nur mein Flugticket benutzen
08:07
to checkprüfen how much my flightFlug has been delayedverspätet,
180
472000
2000
um zu sehen auf welche Zeit mein Flug verlegt wurde.
08:09
because at that particularinsbesondere time,
181
474000
2000
Weil ich zu diesem Zeitpunkt
08:11
I'm not feelingGefühl like openingÖffnung my iPhoneiPhone,
182
476000
2000
einfach keine Lust habe mein iPhone herauszuholen
08:13
and checkingÜberprüfung out a particularinsbesondere iconSymbol.
183
478000
2000
und auf diesem nachzuschauen.
08:15
And I think this technologyTechnologie will not only changeVeränderung the way --
184
480000
3000
Und ich glaube, dass diese Technologie nicht nur die Art --
08:18
yes. (LaughterLachen)
185
483000
1000
Ja. (Gelächter)
08:20
It will changeVeränderung the way we interactinteragieren with people, alsoebenfalls,
186
485000
2000
Es wird auch die Art wie wir mit Menschen interagieren verändern.
08:22
not only the physicalphysisch worldWelt.
187
487000
2000
Nicht nur in der echten Welt.
08:24
The funSpaß partTeil is, I'm going to the BostonBoston metroMetro,
188
489000
3000
Ein lustiger Teil ist, Ich gehe in die U-Bahn von Boston,
08:27
and playingspielen a pongPong gameSpiel insideinnen the trainZug
189
492000
3000
und spiele Pong in dem Zug,
08:30
on the groundBoden, right?
190
495000
2000
auf dem Boden.
08:32
(LaughterLachen)
191
497000
1000
(Gelächter)
08:33
And I think the imaginationPhantasie is the only limitGrenze
192
498000
2000
Und ich denke hier setzt uns nur die Vorstellungskraft Grenzen
08:35
of what you can think of
193
500000
2000
von neuen Ideen,
08:37
when this kindArt of technologyTechnologie mergesZusammenführungen with realecht life.
194
502000
2000
wenn sich diese Art von Technologie mit dem echten Leben vermischt.
08:39
But manyviele of you argueargumentieren, actuallytatsächlich, that
195
504000
2000
Aber viele von Ihnen meinen, dass
08:41
all of our work is not only about physicalphysisch objectsObjekte.
196
506000
3000
nicht alle unsere Arbeit drehe sich um physische Objekte.
08:44
We actuallytatsächlich do lots of accountingBuchhaltung and paperPapier- editingBearbeitung
197
509000
3000
Wir haben viel gerechnet und mit Papier gearbeitet
08:47
and all those kindsArten of things; what about that?
198
512000
2000
und alle diese Dinge, was ist mit denen?
08:49
And manyviele of you are excitedaufgeregt about the nextNächster generationGeneration tabletTablette computersComputer
199
514000
4000
Und viele von Ihnen sind sehr gespannt auch die nächste Generation von tragbaren Computern,
08:53
to come out in the marketMarkt.
200
518000
2000
die auf den Markt kommt.
08:55
So, ratherlieber than waitingwarten for that,
201
520000
2000
Anstatt auf diese zu warten,
08:57
I actuallytatsächlich madegemacht my ownbesitzen, just usingmit a pieceStück of paperPapier-.
202
522000
3000
habe ich meinen eigenen gemacht, nur aus einem Stück Papier.
09:00
So, what I did here is removeentfernen the cameraKamera --
203
525000
2000
Ich habe also die Kamera entfernt
09:02
All the webcamWebcam camerasKameras have a microphoneMikrofon insideinnen the cameraKamera.
204
527000
4000
Alle Webcams haben ein Mikrofon integriert.
09:06
I removedentfernt the microphoneMikrofon from that,
205
531000
3000
Ich habe dieses Mikrofon entfernt
09:09
and then just pinchedeingeklemmter that --
206
534000
2000
und dieses angeklemmt.
09:11
like I just madegemacht a clipKlammer out of the microphoneMikrofon --
207
536000
3000
Ich habe also eine Klemme aus dem Mikrofon gemacht
09:14
and clippedabgeschnitten that to a pieceStück of paperPapier-, any paperPapier- that you foundgefunden around.
208
539000
4000
und an ein Stück Papier geklemmt, irgendein Stück Papier, das ich gefunden habe.
09:18
So now the soundklingen of the touchberühren
209
543000
3000
Also weiss es jetzt nur von dem Geräusch des Berührens,
09:21
is gettingbekommen me when exactlygenau I'm touchingBerühren the paperPapier-.
210
546000
3000
wann genau ich das Papier berühre,
09:24
But the cameraKamera is actuallytatsächlich trackingVerfolgung where my fingersFinger are movingbewegend.
211
549000
4000
während die Kamera verfolgt wohin sich meine Finger bewegen.
09:28
You can of courseKurs watch moviesFilme.
212
553000
3000
Sie können natürlich Filme gucken.
09:31
("Good afternoonNachmittag. My nameName is RussellRussell ...
213
556000
3000
("Guten Abend, Mein Name ist Russel...")
09:34
and I am a WildernessWildnis ExplorerExplorer in TribeStamm 54.")
214
559000
3000
("...und ich bin ein Wildniss Forscher von Stamm 54.")
09:37
And you can of courseKurs playspielen gamesSpiele.
215
562000
3000
Und natürlich können sie auch Spiele spielen.
09:40
(CarAuto engineMotor)
216
565000
3000
(Automotor)
09:43
Here, the cameraKamera is actuallytatsächlich understandingVerstehen how you're holdingHalten the paperPapier-
217
568000
3000
Hier, die Kamera versteht sogar wie sie das Stück Papier halten,
09:46
and playingspielen a car-racingAutorennen gameSpiel.
218
571000
2000
so kann ich ein Rennspiel spielen.
09:48
(ApplauseApplaus)
219
573000
3000
(Applaus)
09:52
ManyViele of you alreadybereits mustsollen have thought, OK, you can browseDurchsuchen.
220
577000
2000
Viele von Ihnen haben warscheinlich schon gedacht, OK, man kann schmökern.
09:54
Yeah. Of courseKurs you can browseDurchsuchen to any websitesWebseiten
221
579000
3000
Ja, natürlich, kann man jede Website durchforsten,
09:57
or you can do all sortssortiert of computingComputer on a pieceStück of paperPapier-
222
582000
3000
oder alle Arten von Computerarbeiten an einem Stück Papier machen
10:00
whereverwo auch immer you need it.
223
585000
1000
wo immer man es braucht.
10:01
So, more interestinglyinteressant,
224
586000
3000
Aber, interessanter
10:04
I'm interestedinteressiert in how we can take that in a more dynamicdynamisch way.
225
589000
3000
bin ich daran interessiert wie wir das auf eine dynamischere Art machen können.
10:07
When I come back to my deskSchreibtisch I can just pinchPrise that informationInformation
226
592000
3000
Wenn ich an meinen Schreibtisch zurück komme, kann ich diese Information einfach
10:10
back to my desktopDesktop
227
595000
2000
zurück auf meinen Schreibtisch ziehen
10:12
so I can use my full-sizein voller Größe computerComputer.
228
597000
3000
und meinen großen Computer benutzen.
10:15
(ApplauseApplaus)
229
600000
2000
(Applaus)
10:17
And why only computersComputer? We can just playspielen with papersPapiere.
230
602000
3000
Und warum nur Comuter? Wir können einfach mit Papieren spielen.
10:20
PaperPapier worldWelt is interestinginteressant to playspielen with.
231
605000
3000
Es ist interessant mit der Welt der Papiere zu spielen.
10:23
Here, I'm takingunter a partTeil of a documentDokument
232
608000
2000
Hier nehme ich ein Teil eines Dokuments
10:25
and puttingPutten over here a secondzweite partTeil from a secondzweite placeOrt --
233
610000
4000
und füge hier einen zweiten Teil von einem zweiten Ort ein --
10:29
and I'm actuallytatsächlich modifyingmodifizierend the informationInformation
234
614000
3000
und ich modifiziere die Informationen
10:32
that I have over there.
235
617000
2000
die ich hier habe.
10:34
Yeah. And I say, "OK, this lookssieht aus nicenett,
236
619000
3000
Ja. Und ich sage, "OK, das sieht gut aus,
10:37
let me printdrucken it out, that thing."
237
622000
2000
lass mich das Ding ausdrucken."
10:39
So I now have a print-outausdrucken of that thing, and now --
238
624000
2000
Nun habe ich also einen Ausdruck des Dings, und nun --
10:41
the workflowArbeitsablauf is more intuitiveintuitiv the way we used to do it
239
626000
3000
sind die Arbeitsabläufe intuitiver auf die Art wie wir es
10:44
maybe 20 yearsJahre back,
240
629000
3000
vor vielleicht 20 Jahren gemacht hätten,
10:47
ratherlieber than now switchingUmschalten betweenzwischen these two worldsWelten.
241
632000
3000
anstatt jetzt zwischen diesen zwei Welten zu tauschen.
10:50
So, as a last thought,
242
635000
3000
Als letzer Gedanke,
10:53
I think that integratingintegrierend informationInformation to everydayjeden Tag objectsObjekte
243
638000
3000
Ich denke, dass das Integrieren von Informationen in Alltagsobjekte
10:56
will not only help us to get ridloswerden of the digitaldigital divideTeilen,
244
641000
5000
uns nicht nur helfen wird die Digitalen Geräte los zu werden,
11:01
the gapSpalt betweenzwischen these two worldsWelten,
245
646000
2000
die Lücke zwischen diesen zwei Welten,
11:03
but will alsoebenfalls help us, in some way,
246
648000
2000
sondern es wird uns auch in gewisser Weise helfen,
11:05
to staybleibe humanMensch,
247
650000
2000
menschlich zu bleiben,
11:07
to be more connectedin Verbindung gebracht to our physicalphysisch worldWelt.
248
652000
3000
verbunden zu sein mit unserer physikalischen Welt.
11:13
And it will actuallytatsächlich help us not endEnde up beingSein machinesMaschinen
249
658000
3000
Und es wird uns helfen keine Maschinen zu sein,
11:16
sittingSitzung in frontVorderseite of other machinesMaschinen.
250
661000
2000
die vor anderen Maschinen sitzen.
11:18
That's all. Thank you.
251
663000
3000
Das ist alles. Vielen Dank.
11:21
(ApplauseApplaus)
252
666000
14000
(Applaus)
11:35
Thank you.
253
680000
1000
Vielen Dank.
11:36
(ApplauseApplaus)
254
681000
3000
(Applaus)
11:39
ChrisChris AndersonAnderson: So, PranavPranav,
255
684000
1000
Chris Anderson: Also, Pranav,
11:40
first of all, you're a geniusGenius.
256
685000
3000
als aller erstes: Du bist ein Genie.
11:43
This is incredibleunglaublich, really.
257
688000
3000
Das ist wirklich unglaubich.
11:46
What are you doing with this? Is there a companyUnternehmen beingSein plannedgeplant?
258
691000
3000
Was machst du damit? Ist eine Firma gaplant?
11:49
Or is this researchForschung foreverfür immer, or what?
259
694000
2000
Oder bleibt das für immer Forschung, oder was?
11:51
PranavPranav MistryMistry: So, there are lots of companiesFirmen --
260
696000
2000
Pranav Mistry: Es gibt viele Firmen --
11:53
actuallytatsächlich sponsorSponsor companiesFirmen of MediaMedien LabLab --
261
698000
1000
Sponsoren des Media Lab --
11:54
interestedinteressiert in takingunter this aheadvoraus in one or anotherein anderer way.
262
699000
3000
die interessiert sind das irgendwie fortzuführen.
11:57
CompaniesUnternehmen like mobileMobile phoneTelefon operatorsBetreiber
263
702000
2000
Firmen wie Mobiltelefonanbieter
11:59
want to take this in a differentanders way than the NGOsNRO in IndiaIndien,
264
704000
3000
möchten das auf eine andere Weise benutzen als die NGOs in Indien.
12:02
[who] are thinkingDenken, "Why can we only have 'Sixth"Sechste Sense'Sinn "?
265
707000
3000
die denken, "Warum können wir nur einen 'Sechsten Sinn' haben?
12:05
We should have a 'Fifth"Fünfte Sense'Sinn " for missing-sensefehlende Sinn people
266
710000
2000
Wir sollten einen 'Fünften Sinn' für Menschen denen ein Sinn fehlt haben,
12:07
who cannotnicht können speaksprechen.
267
712000
1000
die nicht spreachen können.
12:08
This technologyTechnologie can be used for them to speaksprechen out in a differentanders way
268
713000
3000
Diese Technik kann benutzt werden dass sie auf eine andere Weise sprechen können,
12:11
with maybe a speakerRedner systemSystem."
269
716000
1000
Vielleicht mit einem Lautsprecher-System."
12:12
CACA: What are your ownbesitzen plansPläne? Are you stayingbleiben at MITMIT,
270
717000
3000
CA: Was sind deine eigenen Pläne? Bleibst du am MIT,
12:15
or are you going to do something with this?
271
720000
1000
oder machst du etwas damit?
12:16
PMPM: I'm tryingversuchen to make this more availableverfügbar to people
272
721000
2000
PM: Ich versuche es verfügbarer für Menschen zu machen,
12:18
so that anyonejemand can developentwickeln theirihr ownbesitzen SixthSenseSixthSense deviceGerät,
273
723000
3000
damit jeder seinen eigenes SixthSense Gerät entwickeln kann,
12:21
because the hardwareHardware- is actuallytatsächlich not that hardhart to manufactureHerstellung
274
726000
5000
denn die Hardware ist eigentlich nicht so schwer herzustellen,
12:26
or hardhart to make your ownbesitzen.
275
731000
2000
oder schwer seine eigene zu machen.
12:28
We will providezu Verfügung stellen all the openöffnen sourceQuelle softwareSoftware for them,
276
733000
2000
Wir werden die gesamte Open Source Software für sie anbieten,
12:30
maybe startingbeginnend nextNächster monthMonat.
277
735000
2000
vielleicht von nächstem Monat an.
12:32
CACA: OpenOffen sourceQuelle? WowWow.
278
737000
2000
CA: Open Source? Wow.
12:34
(ApplauseApplaus)
279
739000
5000
(Applaus)
12:39
CACA: Are you going to come back to IndiaIndien with some of this, at some pointPunkt?
280
744000
3000
CA: Wirst du damit irgendwann nach Indien zurückkehren.
12:42
PMPM: Yeah. Yes, yes, of courseKurs.
281
747000
2000
PM: Ja, ja natürlich.
12:44
CACA: What are your plansPläne? MITMIT?
282
749000
2000
CA: Was sind deine Pläne? MIT?
12:46
IndiaIndien? How are you going to splitTeilt your time going forwardVorwärts-?
283
751000
2000
Indien? Wie wirst du deine Zeit aufteilen?
12:48
PMPM: There is a lot of energyEnergie here. Lots of learningLernen.
284
753000
3000
PM: Es gibt sehr viel Energie heir. Sehr viel zu lernen.
12:51
All of this work that you have seengesehen is all about
285
756000
2000
All die Arbeit die du gesehen hast dreht sich um
12:53
my learningLernen in IndiaIndien.
286
758000
2000
mein Lernen in Indien.
12:55
And now, if you see, it's more about the cost-effectivenessWirtschaftlichkeit:
287
760000
3000
Und jetzt, wenn man es mehr Kosteneffektiv betrachtet:
12:58
this systemSystem costsKosten you $300
288
763000
2000
Dieses System kostet dir 300$
13:00
comparedverglichen to the $20,000 surfaceOberfläche tablesTabellen, or anything like that.
289
765000
3000
verglichen mit 20.000$ Touch-Screen Tischen, oder so etwas.
13:03
Or maybe even the $2 mouseMaus gestureGeste systemSystem
290
768000
3000
Oder vielleicht das zwei Dollar Maus-Gesten-System
13:06
at that time was costingKalkulation around $5,000?
291
771000
3000
kostet zu dieser Zeit um 5.000$?
13:09
So, we actuallytatsächlich -- I showedzeigte that, at a conferenceKonferenz, to
292
774000
4000
Ja, wir haben das, an einer Konferenz,
13:13
PresidentPräsident AbdulAbdul KalamKalam, at that time,
293
778000
2000
dem Presidänten Abdul Kalam vorgestellet,
13:15
and then he said, "OK, we should use this in BhabhaBhabha AtomicAtomic ResearchForschung CentreZentrum
294
780000
3000
und er hat gesagt, ÄOK, wir sollen das nutzen in Badha Atomic Research Centre
13:18
for some use of that."
295
783000
2000
und eine Anwendung finden."
13:20
So I'm excitedaufgeregt about how I can bringbringen the technologyTechnologie to the massesMassen
296
785000
3000
Ich bin sehr aufgeregt, wie ich diese Technologie in der Gesellschaft implementieren kann,
13:23
ratherlieber than just keepinghalten that technologyTechnologie in the labLabor environmentUmwelt.
297
788000
3000
und diese Technologie nicht nur im Labor benutzen.
13:26
(ApplauseApplaus)
298
791000
4000
(Applaus)
13:30
CACA: BasedBasierend on the people we'vewir haben seengesehen at TEDTED,
299
795000
3000
CA: Basierend auf allen, die wir in TED gesehen haben,
13:33
I would say you're trulywirklich one of the two or threedrei
300
798000
1000
glaube ich du bist sicher einer von zweien
13:34
bestBeste inventorsErfinder in the worldWelt right now.
301
799000
2000
besten Erfindern in der Welt im Moment.
13:36
It's an honorEhre to have you at TEDTED.
302
801000
2000
Es ist eine Ehre dich hier in TED zu haben.
13:38
Thank you so much.
303
803000
2000
Vielen Dank.
13:40
That's fantasticfantastisch.
304
805000
1000
Das ist fantastisch.
13:41
(ApplauseApplaus)
305
806000
4000
(Applaus)
Translated by Asen Kalchev
Reviewed by Lex Asobo

▲Back to top

ABOUT THE SPEAKER
Pranav Mistry - Director of research, Samsung Research America
As an MIT grad student, Pranav Mistry invented SixthSense, a wearable device that enables new interactions between the real world and the world of data.

Why you should listen

When Pranav Mistry was a PhD student in the Fluid Interfaces Group at MIT's Media Lab, he worked with lab director Pattie Maes to create some of the most entertaining and thought-provoking interfaces the world had ever seen. And not just computer interfaces, mind you -- these are ways to help the digital and the actual worlds interface. Imagine: intelligent sticky notes, Quickies, that can be searched and can send reminders; a pen that draws in 3D; and TaPuMa, a tangible public map that can act as Google of physical world. And of course the legendary SixthSense, which is now open sourced

Before his studies at MIT, he worked with Microsoft as a UX researcher; he's a graduate of IIT. Now, as director of research at Samsung Research America, Mistry heads the Think Tank Team, an interdisciplinary group of researchers that hunts for new ways to mix digital informational with real-world interactions. As an example, Mistry launched the company's smartwatch, the Galaxy Gear, in 2013.

More profile about the speaker
Pranav Mistry | Speaker | TED.com