ABOUT THE SPEAKER
Supasorn Suwajanakorn - Computer scientist
Supasorn Suwajanakorn works on ways to reconstruct, preserve and reanimate anyone -- just from their existing photos and videos.

Why you should listen

Can we create a digital avatar that looks, acts and talks just like our sweet grandma? This question has inspired Supasorn Suwajanakorn, a recent PhD graduate from the University of Washington, to spend years developing new tools to make it a reality. He has developed a set of algorithms that can build a moving 3D face model of anyone from just photos, which was awarded the Innovation of the Year in 2016. He then introduced the first system that can replicate a person's speech and produce a realistic CG-animation by only analyzing their existing video footage -- all without ever bringing in the person to a Hollywood capture studio.

Suwajanakorn is working in the field of machine learning and computer vision. His goal is to bring vision algorithms out of the lab and make them work in the wild.

More profile about the speaker
Supasorn Suwajanakorn | Speaker | TED.com
TED2018

Supasorn Suwajanakorn: Fake videos of real people -- and how to spot them

Supasorn Suwajanakorn: Videoclipuri false cu oameni reali. Cum să le identifici?

Filmed:
1,453,308 views

Crezi că ești priceput la a detecta videoclipuri false cu oameni celebri care spun lucruri pe care nu le-au spus cu adevărat? Vezi cum sunt acestea făcute în acest discurs surprinzător și în această demonstrație a tehnologiei. Cercetătorul Supasorn Suwajanakorn ne arată cum a creat videoclipuri false folosind modelarea 3D și inteligența artificială. Învață mai multe despre implicațiile etice și posibilitățile creative ale acestei tehnologii și despre pașii făcuți în direcția contracarării folosirii sale greșite.
- Computer scientist
Supasorn Suwajanakorn works on ways to reconstruct, preserve and reanimate anyone -- just from their existing photos and videos. Full bio

Double-click the English transcript below to play the video.

Priviți aceste imagini.
00:12
Look at these imagesimagini.
0
876
1151
00:14
Now, tell me whichcare ObamaObama here is realreal.
1
2051
2635
Spuneți-mi care e adevăratul Obama.
00:16
(VideoPagina) BarackBarack ObamaObama: To help familiesfamilii
refinancerefinanţării theiral lor homescase,
2
4710
2861
(Video) Barack Oabama: Pentru a ajuta
familiile să își câștige traiul,
00:19
to investinvesti in things
like high-techhigh tech manufacturingde fabricație,
3
7595
2647
pentru a investi în lucruri
precum producția de tehnologie,
00:22
cleancurat energyenergie
4
10266
1159
energie verde
00:23
and the infrastructureinfrastructură
that createscreează good newnou jobslocuri de munca.
5
11449
2779
și infrastructura ce creează
locuri de muncă bune.
Supasorn Suwajankorn: Știe careva?
00:26
SupasornSupasorn SuwajanakornSuwajanakorn: AnyoneOricine?
6
14647
1484
00:28
The answerRăspuns is nonenici unul of them.
7
16155
1874
Răspunsul e: niciunul.
00:30
(LaughterRâs)
8
18053
1114
(Râsete)
00:31
NoneNici unul of these is actuallyde fapt realreal.
9
19191
1786
Niciunul nu e real.
00:33
So let me tell you how we got here.
10
21001
1840
Să vă spun cum s-a ajuns aici.
00:35
My inspirationinspirație for this work
11
23940
1578
Inspirația mea pentru această muncă
00:37
was a projectproiect meanta însemnat to preserveconserva our last
chanceşansă for learningînvăţare about the HolocaustHolocaustul
12
25542
5411
a fost un proiect menit să conserve ultima
noastră șansă de a învăța despre Holocaust
00:42
from the survivorssupraviețuitori.
13
30977
1768
de la supraviețuitori,
00:44
It's calleddenumit NewNoi DimensionsDimensiuni in TestimonyMărturia,
14
32769
2627
E denumit „Noi dimensiuni ale mărturiei”
00:47
and it allowspermite you to have
interactiveinteractiv conversationsconversații
15
35420
3126
și îți permite să porți o conversație
00:50
with a hologramhologramă
of a realreal HolocaustHolocaustul survivorSurvivor.
16
38570
2556
cu holograma unui supraviețuitor
real al Holocaustului.
00:53
(VideoPagina) Man: How did you
survivesupravieţui the HolocaustHolocaustul?
17
41793
1966
(Video) Bărbat: Cum ai supraviețuit
Holocaustului?
00:55
(VideoPagina) HologramHologramă: How did I survivesupravieţui?
18
43783
1668
(Video) Hologramă: Cum am supraviețuit?
00:57
I survivedsupraviețuit,
19
45912
1807
Am supraviețuit,
01:00
I believe,
20
48419
1527
cred,
01:01
because providenceprovidenţa watchedvizionat over me.
21
49970
3023
pentru că Dumnezeu m-a păzit.
01:05
SSSS: TurnsSe transformă out these answersrăspunsuri
were prerecordedpreînregistrate in a studiostudio.
22
53573
3454
SS: Se pare că aceste răspunsuri
au fost înregistrate într-un studiu.
01:09
YetÎncă the effectefect is astoundinguluitor.
23
57051
2452
Totuși rezultatul e incredibil.
01:11
You feel so connectedconectat to his storypoveste
and to him as a personpersoană.
24
59527
3619
Te simți atât de conectat la poveste
și la el ca persoană.
01:16
I think there's something specialspecial
about humanuman interactioninteracţiune
25
64011
3301
Cred că e ceva special
în interacțiunile umane
01:19
that makesmărci it much more profoundprofund
26
67336
2757
ce le face mult mai profunde
01:22
and personalpersonal
27
70117
2198
și personale
01:24
than what bookscărți or lecturesprelegeri
or moviesfilme could ever teacha preda us.
28
72339
3485
decât ceea ce ne pot învăța
cărțile, lecțiile sau filmele.
01:28
So I saw this and begana început to wondermirare,
29
76267
2425
Am văzut acest lucru
și am început să mă întreb:
01:30
can we createcrea a modelmodel
like this for anyoneoricine?
30
78716
2810
am putea crea un asemenea
model pentru oricine?
01:33
A modelmodel that looksarată, talkstratative
and actsacte just like them?
31
81550
2975
Un model ce arată, vorbește
și se comportă la fel ca persoana reală?
01:37
So I seta stabilit out to see if this could be doneTerminat
32
85573
2007
Așa că am încercat să văd ce se poate face
01:39
and eventuallyîn cele din urmă camea venit up with a newnou solutionsoluţie
33
87604
2310
și am venit în final cu o soluție nouă
01:41
that can buildconstrui a modelmodel of a personpersoană
usingutilizând nothing but these:
34
89938
3220
ce poate construi un model de persoană
folosind doar aceste lucruri:
01:45
existingexistent photosfotografii and videosVideoclipuri of a personpersoană.
35
93747
2214
fotografii și videoclipuri.
01:48
If you can leveragepârghie
this kinddrăguț of passivepasiv informationinformație,
36
96701
2617
Dacă poți folosi
acest tip de informații pasive,
01:51
just photosfotografii and videovideo that are out there,
37
99342
2007
doar fotografiile
și videoclipurile existente,
01:53
that's the keycheie to scalingscalare to anyoneoricine.
38
101373
2056
ai soluția pentru recrearea
oricărei persoane.
01:56
By the way, here'saici e RichardRichard FeynmanFeynman,
39
104119
1777
Aici e Richard Feynman,
01:57
who in additionplus to beingfiind
a NobelNobel PrizePremiul winnercâştigător in physicsfizică
40
105920
3413
care, pe lângă faptul că e un laureat
al Premiului Nobel în fizică,
02:01
was alsode asemenea knowncunoscut as a legendarylegendar teacherprofesor.
41
109357
2453
a fost cunoscut și ca profesor legendar.
02:05
Wouldn'tNu s-ar it be great
if we could bringaduce him back
42
113080
2198
Nu ar fi grozav să îl aducem înapoi
02:07
to give his lecturesprelegeri
and inspirea inspira millionsmilioane of kidscopii,
43
115302
3265
pentru a preda și a inspira
milioane de copii,
02:10
perhapspoate not just in EnglishEngleză
but in any languagelimba?
44
118591
2992
poate nu doar în limba engleză,
ci în orice limbă?
02:14
Or if you could askcere our grandparentsbunicii
for advicesfat and hearauzi those comfortingreconfortant wordscuvinte
45
122441
4602
Sau dacă am putea cere sfatul
bunicilor noștri
02:19
even if they're no longermai lung with us?
46
127067
1770
chiar dacă nu mai sunt printre noi?
02:21
Or maybe usingutilizând this toolinstrument,
bookcarte authorsautori, aliveîn viaţă or not,
47
129683
3396
Sau poate că folosind acest instrument,
autorii în viață sau nu,
02:25
could readcitit aloudcu voce tare all of theiral lor bookscărți
for anyoneoricine interestedinteresat.
48
133103
2937
și-ar putea citi cu voce tare cărțile
pentru cei interesați.
02:29
The creativecreator possibilitiesposibilităţi
here are endlessfără sfârşit,
49
137199
2437
Posibilitățile sunt nesfârșite
02:31
and to me, that's very excitingemoționant.
50
139660
1713
și pentru mine asta e foarte captivant.
02:34
And here'saici e how it's workinglucru so fardeparte.
51
142595
2002
Și așa funcționează acum.
02:36
First, we introduceintroduce a newnou techniquetehnică
52
144621
1667
Întâi introducem o nouă tehnică
02:38
that can reconstructreconstrui a high-detaileddetaliate de înaltă
3D facefață modelmodel from any imageimagine
53
146312
4572
ce reconstruiește modele 3D
de înaltă fidelitate din orice imagine
02:42
withoutfără ever 3D-scanningD de scanare the personpersoană.
54
150908
2119
fără o scanare 3D a persoanei.
02:45
And here'saici e the samela fel outputproducție modelmodel
from differentdiferit viewsvizualizari.
55
153890
2642
Acesta e modelul creat
din diferite perspective.
02:49
This alsode asemenea workslucrări on videosVideoclipuri,
56
157969
1502
Acest lucru funcționează
și cu videoclipuri,
02:51
by runningalergare the samela fel algorithmAlgoritmul
on eachfiecare videovideo framecadru
57
159495
2852
prin folosirea algoritmului
pentru fiecare cadru
02:54
and generatinggenerator a movingin miscare 3D modelmodel.
58
162371
2222
și prin generarea
unui model 3D în mișcare.
02:57
And here'saici e the samela fel
outputproducție modelmodel from differentdiferit anglesunghiurile.
59
165538
2772
Aici e același model
din diferite unghiuri.
03:01
It turnstransformă out this problemproblemă
is very challengingprovocator,
60
169933
2534
Se pare că această problemă e foarte grea,
03:04
but the keycheie tricktruc
is that we are going to analyzea analiza
61
172491
2525
dar cheia e să analizăm
03:07
a largemare photofotografie collectionColectie
of the personpersoană beforehanddinainte.
62
175040
2966
o colecție mare de poze înainte de asta.
03:10
For GeorgeGeorge W. BushBush,
we can just searchcăutare on GoogleGoogle,
63
178650
2539
Pentru George W. Bush
putem căuta pe Google,
03:14
and from that, we are ablecapabil
to buildconstrui an averagein medie modelmodel,
64
182309
2499
și de aici putem crea un model standard,
03:16
an iterativeiterativ, refinedrafinat modelmodel
to recoverrecupera the expressionexpresie
65
184832
3111
apoi e îmbunătățit
pentru a recrea expresia
03:19
in fine detailsDetalii,
like creasesCute and wrinklesridurile.
66
187967
2336
în detaliu, precum ridurile.
03:23
What's fascinatingfascinant about this
67
191326
1403
Ceea ce e fascinant
03:24
is that the photofotografie collectionColectie
can come from your typicaltipic photosfotografii.
68
192753
3423
e că acea colecție de fotografii
poate fi dintr-un album obișnuit.
03:28
It doesn't really mattermaterie
what expressionexpresie you're makingluare
69
196200
2603
Nu contează ce expresie facială ai în poze
03:30
or where you tooka luat those photosfotografii.
70
198827
1885
sau unde ai făcut acele fotografii.
03:32
What matterschestiuni is
that there are a lot of them.
71
200736
2400
Contează doar să fie multe.
03:35
And we are still missingdispărut colorculoare here,
72
203160
1736
Dar mai avem nevoie de culoare,
03:36
so nextUrmător →, we developdezvolta
a newnou blendingamestecare techniquetehnică
73
204920
2348
deci, mai întâi dezvoltăm o tehnică
03:39
that improvesîmbunătățește uponpe
a singlesingur averagingîn medie methodmetodă
74
207292
2836
ce se îmbunătățește printr-o metodă
de aproximare
03:42
and producesproduce sharpascuțit
facialtratament facial texturestexturi and colorscolorate.
75
210152
2818
și produce textura și culoarea facială.
03:45
And this can be doneTerminat for any expressionexpresie.
76
213779
2771
Și acest lucru poate fi făcut
pentru orice expresie.
03:49
Now we have a controlControl
of a modelmodel of a personpersoană,
77
217485
2499
Avem deci controlul unui model uman,
03:52
and the way it's controlleddirijat now
is by a sequencesecvenţă of staticstatice photosfotografii.
78
220008
3795
iar modul în care e controlat
acum e prin intermediul unor poze statice.
03:55
NoticeNotificare how the wrinklesridurile come and go,
dependingîn funcție on the expressionexpresie.
79
223827
3126
Observați cum apar și dispar
ridurile în funcție de expresie.
04:00
We can alsode asemenea use a videovideo
to driveconduce the modelmodel.
80
228109
2746
Putem folosi și un videoclip.
04:02
(VideoPagina) DanielDoina CraigCraig: Right, but somehowoarecum,
81
230879
2593
(Video) Daniel Craig: Da, dar cumva,
04:05
we'vene-am manageda reușit to attracta atrage
some more amazinguimitor people.
82
233496
3771
am reușit să atragem
niște oameni extraordinari.
04:10
SSSS: And here'saici e anothero alta fundistracţie demodemo.
83
238021
1642
SS: Și aici e un alt exemplu hazliu.
04:11
So what you see here
are controllablecontrolabile modelsmodele
84
239687
2246
Aici avem modele controlabile
ale unor persoane construite
folosind poze de pe internet.
04:13
of people I builtconstruit
from theiral lor internetInternet photosfotografii.
85
241957
2444
04:16
Now, if you transfertransfer
the motionmişcare from the inputintrare videovideo,
86
244425
2904
Dacă transferăm mișcarea din videoclip,
04:19
we can actuallyde fapt driveconduce the entireîntreg partyparte.
87
247353
2152
putem pune în mișcare toate modelele.
04:21
GeorgeGeorge W. BushBush:
It's a difficultdificil billfactură to passtrece,
88
249529
2172
George W. Bush:
E o lege dificil de trecut,
04:23
because there's a lot of movingin miscare partspărți,
89
251725
2303
deoarece are multe părți complicate,
04:26
and the legislativelegislativ processesprocese can be uglyurât.
90
254052
5231
iar procesul legislativ poate fi dificil.
04:31
(ApplauseAplauze)
91
259307
1630
(Aplauze)
04:32
SSSS: So comingvenire back a little bitpic,
92
260961
1837
SS: Ne întoarcem puțin,
04:34
our ultimatefinal goalpoartă, rathermai degraba,
is to capturecaptură theiral lor mannerismsmanierele
93
262822
3191
scopul nostru final
e să le copiem manierismele
04:38
or the uniqueunic way eachfiecare
of these people talkstratative and smileszâmbete.
94
266037
3045
sau modul unic de a vorbi
și zâmbi al acestor persoane.
04:41
So to do that, can we
actuallyde fapt teacha preda the computercomputer
95
269106
2313
Pentru a face asta,
putem oare învăța computerul
04:43
to imitateimita the way someonecineva talkstratative
96
271443
2222
să imite modul în care cineva vorbește
04:45
by only showingarătând it
videovideo footagemetraj of the personpersoană?
97
273689
2420
doar arătându-i un videoclip
cu acea persoană?
04:48
And what I did exactlyexact was,
I let a computercomputer watch
98
276898
2577
Ceea ce am făcut a fost
să las un computer să vizioneze
04:51
14 hoursore of purepur BarackBarack ObamaObama
givingoferindu- addressesadrese.
99
279499
3277
14 ore de discursuri ale lui Barack Obama.
04:55
And here'saici e what we can producelegume şi fructe
givendat only his audioaudio.
100
283443
3516
Și acesta a fost rezultatul,
folosind doar vocea sa.
04:58
(VideoPagina) BOBO: The resultsrezultate are clearclar.
101
286983
1777
(Video): BO: Rezultatele sunt clare.
05:00
America'sAmerica's businessesîntreprinderi have createdcreată
14.5 millionmilion newnou jobslocuri de munca
102
288784
4349
Afacerile Americii au creat 14,5 milioane
de noi locuri de muncă
05:05
over 75 straightdrept monthsluni.
103
293157
2774
în 75 de luni de zile.
05:07
SSSS: So what's beingfiind synthesizedsintetizat here
is only the mouthgură regionregiune,
104
295955
2905
SS: Aici a fost creată
doar regiunea bucală,
05:10
and here'saici e how we do it.
105
298884
1540
și așa am făcut-o.
05:12
Our pipelineconducte usesutilizări a neuralneural networkreţea
106
300764
1826
Algoritmul nostru folosește
o rețea neuronală
05:14
to convertconvertit and inputintrare audioaudio
into these mouthgură pointspuncte.
107
302614
2936
pentru a transforma informația
audio în aceste puncte.
05:18
(VideoPagina) BOBO: We get it throughprin our jobloc de munca
or throughprin MedicareMedicare or MedicaidMedicaid.
108
306547
4225
(Video): BO: O obținem de la locul
de muncă sau prin Medicare sau Medicaid.
05:22
SSSS: Then we synthesizesintetiza the texturetextură,
enhancespori detailsDetalii and teethdantură,
109
310796
3420
SS: Apoi creăm textura
și amplificăm detaliile și dinții,
05:26
and blendamestec it into the headcap
and backgroundfundal from a sourcesursă videovideo.
110
314240
3074
și o integrăm în fundalul
videoclipului original.
05:29
(VideoPagina) BOBO: WomenFemei can get freegratuit checkupscontroale,
111
317338
1905
(Video) BO: Femeile pot obține
consultații gratuite,
05:31
and you can't get chargedîncărcat more
just for beingfiind a womanfemeie.
112
319267
2968
și nu vei plăti mai mult
doar pentru că ești femeie.
05:34
YoungYoung people can staystau
on a parent'ssocietăţii-mamă planplan untilpana cand they turnviraj 26.
113
322973
3306
Tinerii pot rămâne în planificarea
parentală până la 26 de ani.
05:39
SSSS: I think these resultsrezultate
seempărea very realisticrealist and intriguingintrigant,
114
327267
2952
SS: Cred că aceste rezultate
par foarte realistice și intrigante,
05:42
but at the samela fel time
frighteningînfricoşător, even to me.
115
330243
3173
dar în același timp și amenințătoare,
chiar și pentru mine.
05:45
Our goalpoartă was to buildconstrui an accurateprecis modelmodel
of a personpersoană, not to misrepresentdenatura them.
116
333440
4015
Scopul nostru e să construim
un model fidel al unei persoane,
nu să construim discursuri false.
05:49
But one thing that concernspreocupările me
is its potentialpotenţial for misuseabuz.
117
337956
3111
Dar ceea ce mă îngrijorează
e potențialul de a fi utilizat greșit.
05:53
People have been thinkinggândire
about this problemproblemă for a long time,
118
341958
2971
Oamenii s-au gândit la această
problemă de mult timp,
din ziua în care Photoshop
a ieșit pe piață.
05:56
sincede cand the dayszi when PhotoshopPhotoshop
first hitlovit the marketpiaţă.
119
344953
2381
05:59
As a researchercercetător, I'm alsode asemenea workinglucru
on countermeasurecontramăsură technologytehnologie,
120
347862
3801
Ca cercetător, lucrez de asemenea
la măsuri de contracarare
06:03
and I'm partparte of an ongoingÎn curs de desfășurare
effortefort at AIAI FoundationFundaţia,
121
351687
2942
și fac parte dintr-o misiune
a AI Fundation,
06:06
whichcare usesutilizări a combinationcombinaţie
of machinemaşină learningînvăţare and humanuman moderatorsModeratori
122
354653
3397
ce folosește o combinație
de machine learning și moderatori umani
06:10
to detectdetecta fakefals imagesimagini and videosVideoclipuri,
123
358074
2144
pentru a detecta imaginile
și videoclipurile false,
06:12
fightingluptă againstîmpotriva my ownpropriu work.
124
360242
1514
luptând împotriva muncii mele.
06:14
And one of the toolsunelte we planplan to releaseeliberare
is calleddenumit RealityRealitatea DefenderApărător,
125
362675
3190
Iar unul dintre instrumentele
pe care plănuim
să le lansăm e Reality Defender,
06:17
whichcare is a web-browserbrowser-ul web plug-inplug-in-
that can flagPavilion potentiallypotenţial fakefals contentconţinut
126
365889
4039
ce e un plug-in al browser-ului
ce poate marca conținutul potențial fals,
06:21
automaticallyautomat, right in the browserbrowser-ul.
127
369952
2533
automatic, direct din pagina de internet.
06:24
(ApplauseAplauze)
128
372509
4228
(Aplauze)
06:28
DespiteÎn ciuda all this, thoughdeşi,
129
376761
1453
În ciuda acestor lucruri,
06:30
fakefals videosVideoclipuri could do a lot of damagedeteriora,
130
378238
1840
videoclipurile false pot face multe rele,
06:32
even before anyoneoricine has a chanceşansă to verifyverifica,
131
380102
3294
chiar înainte ca cineva
să aibă șansa să le verifice,
06:35
so it's very importantimportant
that we make everyonetoata lumea awareconștient
132
383420
2722
deci e foarte important
ca fiecare să conștientizeze
06:38
of what's currentlyîn prezent possibleposibil
133
386166
2007
ceea ce e posibil în prezent
06:40
so we can have the right assumptionpresupunere
and be criticalcritic about what we see.
134
388197
3369
pentru a presupune corect și a fi critici
în legătură cu ceea ce vedem.
06:44
There's still a long way to go before
we can fullycomplet modelmodel individualindividual people
135
392423
5007
Mai este mult de muncă până să putem
construi modele umane complete
06:49
and before we can ensureasigura
the safetySiguranță of this technologytehnologie.
136
397454
2786
și până când această tehnologie
va fi sigură.
06:53
But I'm excitedexcitat and hopefulplin de speranță,
137
401097
1587
Dar sunt entuziasmat și optimist,
06:54
because if we use it right and carefullycu grija,
138
402708
3539
deoarece dacă îl folosim
corect și cu grijă,
06:58
this toolinstrument can allowpermite any individual'sindivid pe
positivepozitiv impactefect on the worldlume
139
406271
4309
acest instrument poate permite
oricărui individ, ca impactul său pozitiv
07:02
to be massivelymasiv scaledscalate
140
410604
2190
asupra lumii să fie amplificat masiv
07:04
and really help shapeformă our futureviitor
the way we want it to be.
141
412818
2742
și ne poate ajuta să ne construim
viitorul așa cum ne dorim.
07:07
Thank you.
142
415584
1151
Mulțumesc.
07:08
(ApplauseAplauze)
143
416759
5090
(Aplauze)
Translated by Mirel-Gabriel Alexa
Reviewed by Cristina Nicolae

▲Back to top

ABOUT THE SPEAKER
Supasorn Suwajanakorn - Computer scientist
Supasorn Suwajanakorn works on ways to reconstruct, preserve and reanimate anyone -- just from their existing photos and videos.

Why you should listen

Can we create a digital avatar that looks, acts and talks just like our sweet grandma? This question has inspired Supasorn Suwajanakorn, a recent PhD graduate from the University of Washington, to spend years developing new tools to make it a reality. He has developed a set of algorithms that can build a moving 3D face model of anyone from just photos, which was awarded the Innovation of the Year in 2016. He then introduced the first system that can replicate a person's speech and produce a realistic CG-animation by only analyzing their existing video footage -- all without ever bringing in the person to a Hollywood capture studio.

Suwajanakorn is working in the field of machine learning and computer vision. His goal is to bring vision algorithms out of the lab and make them work in the wild.

More profile about the speaker
Supasorn Suwajanakorn | Speaker | TED.com