ABOUT THE SPEAKER
Noriko Arai - AI expert
Could an AI pass the entrance exam for the University of Tokyo? Noriko Arai oversees a project that wants to find out.

Why you should listen

Noriko Arai is the program director of an AI challenge, Todai Robot Project, which asks the question: Can AI get into the University of Tokyo? The project aims to visualize both the possibilities and the limitation of current AI by setting a concrete goal: a software system that can pass university entrance exams. In 2015 and 2016, Todai Robot achieved top 20 percent in the exams, and passed more than 70 percent of the universities in Japan.

The inventor of Reading Skill Test, in 2017 Arai conducted a large-scale survey on reading skills of high and junior high school students with Japan's Ministry of Education. The results revealed that more than half of junior high school students fail to comprehend sentences sampled from their textbooks. Arai founded the Research Institute of Science for Education to elucidate why so many students fail to read and how she can support them.

More profile about the speaker
Noriko Arai | Speaker | TED.com
TED2017

Noriko Arai: Can a robot pass a university entrance exam?

노리코 아라이(Noriko Arai): 로봇도 대학에 입학할 수 있을까요?

Filmed:
1,550,497 views

토다이 로봇을 만나보십시오. 토다이 로봇은 AI 프로젝트를 통해 도쿄대학 입학 시험에서 상위 20% 이내의 성적을 이루었습니다. 실제로 내용을 이해하지 못했는데도 말이지요. 비록 지금은 로봇이 대학에 입학하지 못했지만, 토다이 로봇 실험의 성공은 앞으로 우리 인간 교육이 나아갈 방향에 대한 질문을 던져주었습니다. 우리의 아이들은 앞으로 AI와 경쟁하는 사회에서 어떤 교육을 받아야 할까요?
- AI expert
Could an AI pass the entrance exam for the University of Tokyo? Noriko Arai oversees a project that wants to find out. Full bio

Double-click the English transcript below to play the video.

00:13
Today오늘, I'm going to talk about AIAI and us.
0
1014
3660
오늘 저는 AI와 우리에 대하여
이야기하고자 합니다.
00:18
AIAI researchers연구원 have always said
1
6206
2143
AI 연구자들은 항상
00:20
that we humans인간 do not need to worry걱정,
2
8373
2594
우리 인간은 걱정할 필요는
없다고 주장해왔습니다.
00:22
because only menial하인 jobs일자리
will be taken취한 over by machines기계들.
3
10991
3580
단순 노동을 필요로 하는 직업만
기계가 대신할 거라면서 말이죠.
00:27
Is that really true참된?
4
15274
1603
사실일까요?
00:30
They have also또한 said
that AIAI will create몹시 떠들어 대다 new새로운 jobs일자리,
5
18365
3827
그리고 AI 덕분에
새로운 직업이 생겨나고
00:34
so those who lose잃다 their그들의 jobs일자리
will find a new새로운 one.
6
22216
3411
AI 때문에 직업을 잃은 사람도
새 직업을 얻게 될 거라고 주장하죠.
00:38
Of course코스.
7
26264
1355
맞는 말입니다.
00:39
But the real레알 question문제 is:
8
27643
2172
하지만 여기서 질문하고
싶은 것이 있습니다.
00:41
How many많은 of those
who may할 수있다 lose잃다 their그들의 jobs일자리 to AIAI
9
29839
4105
AI 때문에 직업을 잃은 사람 중 몇 명이나
00:45
will be able할 수 있는 to land땅 a new새로운 one,
10
33968
2489
새로운 일에 다시 적응할 수 있을까요?
00:48
especially특히 when AIAI is smart똑똑한 enough충분히
to learn배우다 better than most가장 of us?
11
36481
5850
특히나 AI의 발달로 우리 인간보다
더 많은 것을 배울 수 있을 텐데요.
00:55
Let me ask청하다 you a question문제:
12
43397
2185
여러분께 질문 하나 하겠습니다.
00:58
How many많은 of you think
13
46666
1798
여러분 중에서
01:00
that AIAI will pass패스 the entrance입구 examination시험
of a top상단 university대학 by 2020?
14
48488
6094
2020년이 되면 AI가 상위권 대학의
입학 시험에 합격할 수 있으리라
생각하시는 분 계신가요?
01:07
Oh, so many많은. OK.
15
55836
2457
오, 많군요. 좋아요.
01:10
So some of you may할 수있다 say, "Of course코스, yes!"
16
58317
4358
당연히 합격할 거라고
많은 분들이 손을 드셨는데요.
01:15
Now singularity특이 is the issue발행물.
17
63369
2134
하지만 모두가 똑같이
생각하는 건 아니지요.
01:18
And some others다른 사람 may할 수있다 say, "Maybe,
18
66590
3095
이렇게 말하는 분도 계실 거예요.
"가능할지도 모르겠어.
AI가 최고의 바둑기사도 이겼으니까."
01:21
because AIAI already이미 won원
against반대 a top상단 Go player플레이어."
19
69709
4508
01:27
And others다른 사람 may할 수있다 say, "No, never. Uh-uh어 - 어."
20
75213
3681
"절대 못할 거야!"라고
생각하는 분도 계실 겁니다.
01:32
That means방법 we do not know
the answer대답 yet아직, right?
21
80195
3593
이렇게 나뉘는 건 우리가 아직
정답을 모르기 때문일 거예요.
01:36
So that was the reason이유 why
I started시작한 Todai도다이 Robot기계 인간 Project계획,
22
84268
4960
그래서 저는 토다이(Todai) 로봇
프로젝트를 시작했습니다.
01:41
making만들기 an AIAI which어느 passes통과
the entrance입구 examination시험
23
89252
3872
AI를 일본의 일류대학인
도쿄 대학의 입학 시험에
01:45
of the University대학 of Tokyo도쿄,
24
93148
2589
01:47
the top상단 university대학 in Japan일본.
25
95761
2537
합격시키려는 프로젝트입니다.
01:51
This is our Todai도다이 Robot기계 인간.
26
99464
2548
이것이 토다이 로봇입니다.
01:56
And, of course코스, the brain뇌 of the robot기계 인간
is working일 in the remote먼 server섬기는 사람.
27
104131
5810
물론 로봇은 원격 서버에
연결되어 작동합니다.
02:02
It is now writing쓰기 a 600-word-워드 essay수필
28
110747
4222
보고 계신 것은 이 로봇이
17세기 해상 무역을 주제로 600자
분량의 논술문을 쓰고 있는 모습입니다.
02:06
on maritime해상 trade무역 in the 17th일 century세기.
29
114993
4119
02:11
How does that sound소리?
30
119136
1765
어떠신가요?
02:14
Why did I take the entrance입구 exam시험
as its benchmark기준?
31
122113
4104
왜 입학 시험을 기준으로 삼았을까요?
02:19
Because I thought we had to study연구
the performance공연 of AIAI
32
127098
4741
AI의 성과를 인간과 비교하기 위해서는
02:23
in comparison비교 to humans인간,
33
131863
2114
인간만이 할 수 있다고 여겨지고
02:26
especially특히 on the scales저울 and expertise전문적 지식
34
134001
2860
교육을 통해서만 획득할 수 있다고
믿어졌던 고급 기술을
02:28
which어느 are believed믿었다
to be acquired획득 한 only by humans인간
35
136885
4088
AI가 어떻게 처리하는지
연구해야 한다고
02:32
and only through...을 통하여 education교육.
36
140997
2335
생각했기 때문입니다.
02:35
To enter들어가다 Todai도다이, the University대학 of Tokyo도쿄,
37
143782
4043
도쿄 대학에 입학하기 위해서는
02:39
you have to pass패스
two different다른 types유형 of exams시험.
38
147849
4421
두 번의 시험을 통과해야 합니다.
02:44
The first one is
a national전국의 standardized표준화 된 test테스트
39
152294
3760
첫째로는 객관식으로 되어있는
02:48
in multiple-choice다중 선택 style스타일.
40
156078
2403
국가 공인 시험을 풀어야 합니다.
02:50
You have to take seven일곱 subjects과목들
41
158505
2455
7 과목의 시험을 치루는데
02:52
and achieve이루다 a high높은 score점수 --
42
160984
1955
높은 성적을 받아야 하지요.
02:54
I would say like an 84 percent퍼센트
or more accuracy정확성 rate율 --
43
162963
4772
84점 이상은 되어야
02:59
to be allowed허용 된 to take
the second둘째 stage단계 written쓴 test테스트
44
167759
4087
다음 단계인 작문 시험을 볼 수 있습니다.
03:03
prepared준비된 by Todai도다이.
45
171870
2159
도쿄대학이 직접 출제하는 시험이죠.
03:06
So let me first explain설명
how modern현대 AIAI works공장,
46
174994
5317
현대의 AI가 어떻게 작업해서
"단어 연상 퀴즈"를 푸는지
03:12
taking취득 the "Jeopardy위험!" challenge도전
as an example예.
47
180335
3069
예를 들어 설명하겠습니다.
03:17
Here is a typical전형적인 "Jeopardy위험!" question문제:
48
185539
3079
"단어 연상 퀴즈"의 전형적인
문제 형태는 다음과 같습니다.
03:20
"Mozart's모차르트의 last symphony교향곡
shares주식 its name이름 with this planet행성."
49
188642
4461
"모짜르트의 마지막 교향곡 제목은
이 행성의 이름과 같다."
03:26
Interestingly재미있게, a "Jeopardy위험!"
question문제 always asks묻다,
50
194195
4013
흥미롭게도 "단어 연상 퀴즈" 문제는
항상 "이것"으로 질문하고
03:30
always ends끝이다 with "this" something:
51
198232
3328
"이것"으로 끝납니다.
03:33
"this" planet행성, "this" country국가,
52
201584
2827
"이" 행성, "이" 국가,
03:36
"this" rock록 musician음악가, and so on.
53
204435
2608
"이" 록 뮤지션 등등이지요.
03:39
In other words말, "Jeopardy위험!" doesn't ask청하다
many많은 different다른 types유형 of questions질문들,
54
207067
4299
다시 말하자면, "단어 연상 퀴즈"는
여러가지 다른 형태의 질문이 아니라
03:43
but a single단일 type유형,
55
211390
1837
하나의 형태로
03:45
which어느 we call "factoid사실상의 questions질문들."
56
213251
2536
"팩토이드(Factoid) 문제"라고 합니다.
03:48
By the way, do you know the answer대답?
57
216975
2167
아까 그 질문의 정답을 아시나요?
03:53
If you do not know the answer대답
and if you want to know the answer대답,
58
221980
4055
만약 정답을 모르거나
답을 알고 싶을 때는
03:58
what would you do?
59
226059
1287
여러분은 어떻게 하시나요?
04:00
You GoogleGoogle, right? Of course코스.
60
228160
3132
검색을 하지요.
04:03
Why not?
61
231316
1480
당연하죠.
04:04
But you have to pick선택 appropriate적당한 keywords키워드
62
232820
3592
하지만 적절한 검색어를
입력해야 합니다.
04:08
like "Mozart모차르트," "last"
and "symphony교향곡" to search수색.
63
236436
4364
"모짜르트"나 "마지막",
"교향곡" 같은 검색어가 필요하죠.
04:13
The machine기계 basically원래 does the same같은.
64
241462
2400
로봇의 경우도 비슷합니다.
04:16
Then this Wikipedia위키피디아 page페이지
will be ranked순위가 매겨진 top상단.
65
244457
4660
위키피디아 사이트가
제일 먼저 검색될 겁니다.
04:21
Then the machine기계 reads읽기 the page페이지.
66
249840
1908
그리고 그 페이지를 읽어보면 되겠죠.
04:23
No, uh-uh어 - 어.
67
251772
1171
사실은 아닙니다.
04:25
Unfortunately운수 나쁘게, none없음 of the modern현대 AIs인공 지능,
68
253470
3462
불행하게도 현대의 AI 중에서
04:28
including포함 Watson왓슨, Siri시리 and Todai도다이 Robot기계 인간,
69
256956
3968
왓슨, 시리, 토다이 로봇 등
그 어떤 것도
04:32
is able할 수 있는 to read독서.
70
260948
1661
아직 읽는 능력은 없습니다.
04:35
But they are very good
at searching수색 and optimizing최적화.
71
263437
3800
하지만 검색하고 결과를
최적화하는 능력은 뛰어나죠.
04:40
It will recognize인정하다
72
268158
2023
따라서 로봇은
04:42
that the keywords키워드 "Mozart모차르트,"
"last" and "symphony교향곡"
73
270866
2935
"모짜르트", "마지막",
"교향곡" 같은 검색어가
04:45
are appearing나타나는 heavily무겁게 around here.
74
273825
2903
주로 나타난다는 사실을 알아냅니다.
04:49
So if it can find a word워드 which어느 is a planet행성
75
277790
4375
따라서 만약 행성 이름을 발견하고
04:54
and which어느 is co-occurring동시 발생
with these keywords키워드,
76
282189
3648
그 행성이 이 검색어들과
함께 검색된다면
04:57
that must절대로 필요한 것 be the answer대답.
77
285861
1989
정답이라고 생각하지요.
05:00
This is how Watson왓슨 finds발견하다
the answer대답 "Jupiter목성," in this case케이스.
78
288762
5186
왓슨은 정답인 "목성"을
이런 방법으로 찾아냅니다.
05:08
Our Todai도다이 Robot기계 인간 works공장 similarly비슷하게,
but a bit비트 smarter똑똑한
79
296433
4049
토다이 로봇도 비슷하게 작동하지만
역사에 관한 예/아니오 문제를 풀 때
좀 더 똑똑한 방식으로 처리합니다.
05:12
in answering응답 history역사 yes-no예 아니오 questions질문들,
80
300506
3239
05:16
like, "'Charlemagne'샤를 마뉴 repelled격퇴 한 the MagyarsMagyars.'
Is this sentence문장 true참된 or false그릇된?"
81
304560
5663
"샤를마뉴는 마자르인을 쫒아냈다"
이 문제는 사실일까요, 거짓일까요?
05:23
Our robot기계 인간 starts시작하다 producing생산
a factoid사실상의 question문제,
82
311181
4073
이 문장을 보고 토다이 로봇은
팩토이드 문제로 재구성합니다.
05:27
like: "Charlemagne샤를 마뉴 repelled격퇴 한
[this person사람 type유형]" by itself그 자체.
83
315278
4899
로봇은 "샤를마뉴는 [누구누구를]
쫒아냈다."라고 스스로 만들어내지요.
05:32
Then, "Avars아바스" but not
"MagyarsMagyars" is ranked순위가 매겨진 top상단.
84
320995
4732
그러면 "마자르인"이 아니라
"아바르인"이 검색됩니다.
05:38
This sentence문장 is likely아마도 to be false그릇된.
85
326357
3049
결국, 이 문장은 거짓이라고
판단하게 되지요.
05:42
Our robot기계 인간 does not read독서,
does not understand알다,
86
330772
4860
우리 로봇은 읽지도,
이해하지도 못하지만
05:48
but it is statistically통계적으로
correct옳은 in many많은 cases사례.
87
336335
4144
통계적으로 보면
대부분 정답을 맞춥니다.
05:54
For the second둘째 stage단계 written쓴 test테스트,
88
342147
2508
둘째 단계인 작문 시험에서는
05:56
it is required필수 to write쓰다
a 600-word-워드 essay수필 like this one:
89
344679
5106
다음과 같이 600자
논술문을 써야 합니다.
06:01
[Discuss즐기며 먹다 the rise오르기 and fall가을
of the maritime해상 trade무역
90
349809
2278
[17세기 동아시아와 동남아시아 간의
06:04
in East동쪽 and Southeast남동 Asia아시아
in the 17th일 century세기 ...]
91
352111
2422
해상 무역의 흥망과 성쇠를 논하시오.]
06:06
and as I have shown표시된 earlier일찍이,
92
354557
1387
그러면 앞에서 말씀드린 것과
마찬가지로
06:07
our robot기계 인간 took~했다 the sentences문장
from the textbooks교과서 and Wikipedia위키피디아,
93
355968
4194
로봇은 위키피디아와
교과서의 문장을 검색하고
06:12
combined결합 된 them together함께,
94
360186
1961
결합하고 최적화해서
06:14
and optimized최적화 된 it to produce생기게 하다 an essay수필
95
362171
3619
하나의 논술문을 완성합니다.
06:17
without없이 understanding이해 a thing.
96
365814
2207
내용은 하나도 이해하지
못하면서 말이죠.
06:20
(Laughter웃음)
97
368045
1737
(웃음)
06:21
But surprisingly놀랍게도, it wrote쓴 a better essay수필
98
369806
4895
하지만 놀라운 것은
대부분의 학생들이 쓴
논술문보다 낫다는 사실입니다.
06:26
than most가장 of the students재학생.
99
374725
1561
06:28
(Laughter웃음)
100
376310
2391
(웃음)
06:30
How about mathematics수학?
101
378725
1529
수학은 어떨까요?
06:33
A fully충분히 automatic오토매틱 math-solving수학적 해결 machine기계
102
381354
3158
"인공 지능"이라는 단어가 탄생한 후로
06:36
has been a dream꿈
103
384536
1631
전자동으로 수학 문제를 풀 수 있는
기계를 만들 수 있을 거라고
06:38
since이후 the birth출생 of the word워드
"artificial인공의 intelligence지성,"
104
386191
4679
꿈꿔왔습니다.
06:43
but it has stayed머물렀던 at the level수평
of arithmetic산수 for a long, long time.
105
391785
6007
하지만 계산할 수 있는 연산의 수준은
오랫동안 더이상 발전하지 못했지요.
06:51
Last year년, we finally마침내 succeeded성공한
in developing개발 중 a system체계
106
399530
5350
지난해에는 우리가 개발한 시스템이
예비 대학 수준의 문제를 처음부터
끝까지 푸는 데에 마침내 성공했습니다.
06:56
which어느 solved해결 된 pre-university-level대학 수준 이전
problems문제들 from end종료 to end종료,
107
404904
5173
07:02
like this one.
108
410101
1262
바로 이런 문제죠.
07:05
This is the original실물 problem문제
written쓴 in Japanese일본어,
109
413648
4002
이것은 일본어로 된
원래의 문제입니다.
07:09
and we had to teach가르치다 it
2,000 mathematical매우 정확한 axioms공리
110
417674
4397
우리는 2,000가지의 수학적 원리와
07:14
and 8,000 Japanese일본어 words말
111
422095
2774
8,000개의 일본어 단어를
가르쳐야 했습니다.
07:16
to make it accept받아 들인다 the problems문제들
written쓴 in natural자연스러운 language언어.
112
424893
4558
그래야 기계가 언어를 받아들이고
문제를 수용할 수 있으니까요.
07:22
And it is now translating번역
the original실물 problems문제들
113
430234
3542
이제 문제를 기계가
해독할 수 있는 형태로
07:25
into machine-readable기계 가독성 formulas방식.
114
433800
3139
번역을 합니다.
07:30
Weird기묘한, but it is now ready준비된
to solve풀다 it, I think.
115
438578
6099
이상하게 보이긴 하지만,
이제 풀 준비가 된 것 같군요.
07:36
Go and solve풀다 it.
116
444701
1411
자, 문제를 풉니다.
07:38
Yes! It is now executing실행 중
symbolic상징적 인 computation계산.
117
446818
4284
이제 기호화 된 계산을
실행하고 있습니다.
07:44
Even more weird기묘한,
118
452030
1580
더 이상하게 보일 겁니다.
07:45
but probably아마 this is the most가장
fun장난 part부품 for the machine기계.
119
453634
4825
가장 재미있는 부분인데요.
07:50
(Laughter웃음)
120
458483
2351
(웃음)
07:52
Now it outputs산출물 a perfect완전한 answer대답,
121
460858
2815
드디어 정답을 맞추었습니다.
07:55
though그래도 its proof증명 is impossible불가능한 to read독서,
even for mathematicians수학자.
122
463697
4707
수학 전공자도 이해 못하는
증명식으로 말이지요.
08:02
Anyway어쨌든, last year년 our robot기계 인간
was among사이에 the top상단 one percent퍼센트
123
470773
6961
어쨌든 작년에 우리 로봇은
2단계 수학 논술 시험에서
08:10
in the second둘째 stage단계 written쓴
exam시험 in mathematics수학.
124
478199
3633
상위 1%에 들었습니다.
08:14
(Applause박수 갈채)
125
482652
3210
(박수)
08:18
Thank you.
126
486412
1311
감사합니다.
08:19
So, did it enter들어가다 Todai도다이?
127
487747
2471
그래서 토다이는 대학에
입학을 할 수 있었을까요?
08:22
No, not as I expected예상 한.
128
490981
3058
예상과 달리 못했습니다.
08:26
Why?
129
494783
1399
이유는 무엇일까요?
08:28
Because it doesn't understand알다 any meaning의미.
130
496206
2639
의미를 전혀 이해하지
못했기 때문입니다.
08:32
Let me show보여 주다 you a typical전형적인 error오류
it made만든 in the English영어 test테스트.
131
500308
4079
영어 시험에서 로봇은
다음과 같은 실수를 저지릅니다.
08:36
[Nate네이트: We're almost거의 at the bookstore서점.
Just a few조금 more minutes의사록.
132
504411
2977
[네이트: 서점에 거의 도착했어.
몇 분만 더 가면 돼.]
08:39
Sunil선일: Wait. ______ .
Nate네이트: Thank you! That always happens일이 ...]
133
507412
3039
[선일: 잠깐. _________.
네이트: 고마워. 난 항상 이런다....]
08:42
Two people are talking말하는.
134
510475
1151
두 사람이 대화를 하고 있습니다.
08:43
For us, who can understand알다
the situation상태 --
135
511650
2054
이 상황을 이해했다면 정답은..
08:45
[1. "We walked걸었다 for a long time."
2. "We're almost거의 there."
136
513704
2773
[1. "우리 오랫동안 걸었어."
2. "거의 다왔다."
08:48
3. "Your shoes구두 look expensive비싼."
4. "Your shoelace구두끈 is untied묶이지 않은."]
137
516501
3032
3. "너 신발 비싸보인다."
4. "너 신발 끈 풀렸어."]
08:51
it is obvious분명한 number번호 four사
is the correct옳은 answer대답, right?
138
519557
2873
정답은 4번이지요.
08:54
But Todai도다이 Robot기계 인간 chose선택한 number번호 two,
139
522454
2238
하지만 토다이 로봇은
2번이라고 답했습니다.
08:56
even after learning배우기 15 billion십억
English영어 sentences문장
140
524716
5360
딥러닝(deep learning) 기술로
150억 개의 영어 문장을
09:02
using~을 사용하여 deep깊은 learning배우기 technologies기술.
141
530100
2728
배웠음에도 불구하고 말이죠.
09:07
OK, so now you might힘
understand알다 what I said:
142
535600
4172
여러분도 이제 제 얘기가
이해되실 거예요.
09:12
modern현대 AIs인공 지능 do not read독서,
143
540399
2648
현대의 AI는 읽지도
09:15
do not understand알다.
144
543071
1413
이해하지도 못한다는 것을요.
09:17
They only disguise변장 as if they do.
145
545516
3169
읽고 이해하는 것처럼
행동할 뿐입니다.
09:24
This is the distribution분포 graph그래프
146
552867
2981
이것은 토다이 로봇과
같은 시험을 치룬
09:27
of half절반 a million백만 students재학생
who took~했다 the same같은 exam시험 as Todai도다이 Robot기계 인간.
147
555872
5777
50만명 학생들의 분포도입니다.
09:34
Now our Todai도다이 Robot기계 인간
is among사이에 the top상단 20 percent퍼센트,
148
562558
5165
우리 토다이 로봇이
상위 20% 내에 있기 때문에
09:40
and it was capable유능한 to pass패스
149
568986
2415
일본에 있는 대학 중에서
09:43
more than 60 percent퍼센트
of the universities대학 in Japan일본 --
150
571425
3941
60% 이상의 대학에
입학할 수 있었지만
09:47
but not Todai도다이.
151
575390
1377
동경대 입학은 실패했습니다.
09:50
But see how it is beyond...을 넘어서 the volume음량 zone존
152
578116
4025
하지만 미래에 사무직에 종사하게 될
09:54
of to-be되려고 white-collar화이트 칼라 workers노동자.
153
582165
2864
중산층 계급 이상의 수준이지요.
10:00
You might힘 think I was delighted기쁜.
154
588060
2858
제가 이 성과로 기뻐했을까요?
10:03
After all, my robot기계 인간 was surpassing뛰어난
students재학생 everywhere어디에나.
155
591939
3971
제 로봇이 여느 학생들보다
뛰어날 테니까요.
10:09
Instead대신, I was alarmed놀란.
156
597022
2691
그와 반대로 전 두려웠습니다.
10:13
How on earth지구 could this unintelligent비 지능적인
machine기계 outperform실적이 좋다 students재학생 --
157
601086
5607
이렇게 무식한 기계가 학생들을
이긴다는 게 말이 되나요?
10:18
our children어린이?
158
606717
1292
우리 아이들을요.
10:20
Right?
159
608033
1153
그렇지 않나요?
10:22
I decided결정적인 to investigate파다
what was going on in the human인간의 world세계.
160
610101
4402
저는 인간 세상에 무슨 일이 일어나고
있는지 조사하기로 했습니다.
10:28
I took~했다 hundreds수백 of sentences문장
from high높은 school학교 textbooks교과서
161
616542
4729
고등학교 교과서에서
수백 개의 문장을 뽑아
10:33
and made만든 easy쉬운 multiple-choice다중 선택 quizzes퀴즈,
162
621859
3313
쉬운 객관식 문제를 만들었고
10:37
and asked물었다 thousands수천
of high높은 school학교 students재학생 to answer대답.
163
625196
4143
수천 명의 고등학생들에게
답을 고르도록 해봤습니다.
10:42
Here is an example예:
164
630690
1176
예를 들면 이런 것입니다.
10:43
[Buddhism불교 spread전파 to ... ,
Christianity기독교 to ... and Oceania오세아니아,
165
631890
2818
[불교는 동남아시아와
동아시아로 퍼졌다.
기독교는 유럽, 북미, 남미,
오세아니아로 퍼졌다. 이슬람은- ]
10:46
and Islam이슬람교 to ...]
166
634732
1151
10:47
Of course코스, the original실물 problems문제들
are written쓴 in Japanese일본어,
167
635907
2740
물론 문제는 일본어 혹은
학생들의 모국어였고요.
10:50
their그들의 mother어머니 tongue혀.
168
638671
1155
10:51
[ ______ has spread전파 to Oceania오세아니아.
169
639850
1515
[______은 오세아니아로 퍼졌다.
10:53
1. Hinduism힌두교 2. Christianity기독교
3. Islam이슬람교 4. Buddhism불교 ]
170
641389
2417
1. 힌두교 2. 기독교
3. 이슬람교 4. 불교]
10:55
Obviously명백하게, Christianity기독교
is the answer대답, isn't it?
171
643830
2299
정답은 물론 기독교입니다.
10:58
It's written쓴!
172
646153
1214
문제에 이미 나와 있죠.
11:01
And Todai도다이 Robot기계 인간 chose선택한
the correct옳은 answer대답, too.
173
649482
4026
토다이 로봇 역시 정답을 맞추었습니다.
11:06
But one-third삼분의 일 of junior후진
high높은 school학교 students재학생
174
654758
4879
하지만 3분의 1의 중학생들은
11:11
failed실패한 to answer대답 this question문제.
175
659661
2612
오답을 선택했습니다.
11:16
Do you think it is only the case케이스 in Japan일본?
176
664456
3159
일본만의 문제일까요?
11:19
I do not think so,
177
667639
1976
아니라고 생각합니다.
11:21
because Japan일본 is always ranked순위가 매겨진
among사이에 the top상단 in OECDOECD PISAPISA tests검사들,
178
669639
6371
15세 학생들의 수학, 과학,
읽기 실력을 측정하기 위해
3년마다 열리는 OECD PISA 시험에서
11:28
measuring자질 15-year-old예전의
students'재학생' performance공연 in mathematics수학,
179
676034
3927
일본 학생들은 항상 상위권을
유지하고 있기 때문입니다.
11:31
science과학 and reading독서
180
679985
1964
11:33
every...마다 three세 years연령.
181
681973
1636
11:39
We have been believing믿는
182
687390
2053
우리는 누구나 배울 수 있고
11:41
that everybody각자 모두 can learn배우다
183
689467
2043
누구나 잘 배울 수 있다고
11:43
and learn배우다 well,
184
691534
1905
믿었습니다.
11:45
as long as we provide~을 제공하다
good learning배우기 materials기재
185
693463
3697
우리가 온라인으로 좋은 교육 자료를
11:49
free비어 있는 on the web편물
186
697184
1455
무료로 제공한다면 가능한 일입니다.
11:50
so that they can access접속하다
through...을 통하여 the internet인터넷.
187
698663
3069
11:53
But such이러한 wonderful훌륭한 materials기재
may할 수있다 benefit이익 only those who can read독서 well,
188
701756
5859
하지만 훌륭한 자료는 읽기 실력이
좋은 사람들만이 혜택을 받을 수 있죠.
12:00
and the percentage백분율
of those who can read독서 well
189
708534
3935
사실 그런 실력을 지닌 사람은
12:04
may할 수있다 be much less적게 than we expected예상 한.
190
712493
3378
우리가 예상한 수보다 훨씬 적었습니다.
12:10
How we humans인간 will coexist공존하다 with AIAI
191
718040
4241
우리 인간이 AI와 함께
존재한다는 것이 무슨 의미인지
12:14
is something we have
to think about carefully면밀히,
192
722305
3522
확실한 증거를 통해서
12:17
based기반 on solid고체 evidence증거.
193
725851
2137
신중히 생각해 보아야 할 것입니다.
12:21
At the same같은 time,
we have to think in a hurry서두르다
194
729063
3977
동시에 우리는 서두를 필요가 있습니다.
12:25
because time is running달리는 out.
195
733064
2402
시간이 없기 때문입니다.
12:28
Thank you.
196
736106
1162
감사합니다.
12:29
(Applause박수 갈채)
197
737626
3933
(박수)
12:34
Chris크리스 Anderson앤더슨: Noriko노리코, thank you.
198
742211
2080
크리스 앤더슨(CA):
노리코씨, 감사합니다.
12:36
Noriko노리코 Arai아라이: Thank you.
199
744315
1765
노리코 아라이(NA): 감사합니다.
12:38
CA캘리포니아 주: In your talk, you so beautifully아름답게
give us a sense감각 of how AIs인공 지능 think,
200
746104
5304
CA: 이번 강연을 통해
AI가 어떻게 생각하는지
12:43
what they can do amazingly놀랍게도
201
751432
1564
얼마나 놀라운 일을 하는지
12:45
and what they can't do.
202
753020
1695
못하는 것은 무엇인지
알게 되었습니다.
12:46
But -- do I read독서 you right,
203
754739
1494
하지만 제가 이해하기에
12:48
that you think we really need
quite아주 an urgent긴급한 revolution혁명 in education교육
204
756257
5270
우리에게 교육 혁명이 시급한
과제라고 말씀하시는 것 같은데요.
12:53
to help kids아이들 do the things
that humans인간 can do better than AIs인공 지능?
205
761551
4155
아이들이 AI보다 잘할 수 있는 것을
찾도록 도와주어야 한다는 말씀이죠?
12:57
NA없음: Yes, yes, yes.
206
765730
1328
NA: 네, 네.
12:59
Because we humans인간
can understand알다 the meaning의미.
207
767082
4035
우리 인간은 의미를
이해할 수 있기 때문입니다.
13:03
That is something
which어느 is very, very lacking부족한 in AIAI.
208
771141
4906
AI에게는 전혀 불가능한 일이죠.
13:08
But most가장 of the students재학생
just pack팩 the knowledge지식
209
776071
4368
하지만 대부분의 학생 역시
지식을 이해하기 보다는
13:12
without없이 understanding이해
the meaning의미 of the knowledge지식,
210
780463
3903
지식을 단지 흡수하죠.
13:16
so that is not knowledge지식,
that is just memorizing암기하는,
211
784390
2809
그렇게 되면 지식이 아닌
단순 암기가 되는 겁니다.
13:19
and AIAI can do the same같은 thing.
212
787223
2450
AI와 같은 일을 하고 있는 셈이지요.
13:21
So we have to think about
a new새로운 type유형 of education교육.
213
789697
3631
따라서 우리는 새로운 형태의
교육에 대하여 생각해봐야 합니다.
13:25
CA캘리포니아 주: A shift시프트 from knowledge지식,
rote기계적 기억 knowledge지식, to meaning의미.
214
793352
3289
CA: 암기 위주에서 의미를 이해하는
교육으로 변화시키는 것이 중요하겠네요.
13:28
NA없음: Mm-hmm음 ~ 흠.
215
796665
1151
NA: 네. 맞습니다.
13:29
CA캘리포니아 주: Well, there's a challenge도전
for the educators교육자. Thank you so much.
216
797840
3240
CA: 교육자들의 큰 숙제겠군요.
대단히 감사합니다.
13:33
NA없음: Thank you very much. Thank you.
217
801104
1698
NA: 감사합니다.
13:34
(Applause박수 갈채)
218
802826
1185
(박수)
Translated by Yousun Kang
Reviewed by JY Kang

▲Back to top

ABOUT THE SPEAKER
Noriko Arai - AI expert
Could an AI pass the entrance exam for the University of Tokyo? Noriko Arai oversees a project that wants to find out.

Why you should listen

Noriko Arai is the program director of an AI challenge, Todai Robot Project, which asks the question: Can AI get into the University of Tokyo? The project aims to visualize both the possibilities and the limitation of current AI by setting a concrete goal: a software system that can pass university entrance exams. In 2015 and 2016, Todai Robot achieved top 20 percent in the exams, and passed more than 70 percent of the universities in Japan.

The inventor of Reading Skill Test, in 2017 Arai conducted a large-scale survey on reading skills of high and junior high school students with Japan's Ministry of Education. The results revealed that more than half of junior high school students fail to comprehend sentences sampled from their textbooks. Arai founded the Research Institute of Science for Education to elucidate why so many students fail to read and how she can support them.

More profile about the speaker
Noriko Arai | Speaker | TED.com
THE ORIGINAL VIDEO ON TED.COM