ABOUT THE SPEAKER
Peter Norvig - Computer scientist
Peter Norvig is a leading American computer scientist, expert on artificial intelligence and the Director of Research at Google Inc.

Why you should listen

Peter Norvig is a computer scientist and expert in both artificial intelligence and online search. Currently the Director of Research at Google Inc., Norvig was responsible for maintaining and improving the engine's core web search algorithms from 2002 to 2005. Prior to his work at Google, Norvig was NASA's chief computer scientist.

A fellow of the American Association for Artificial Intelligence and the author of the book Artificial Intelligence: A Modern Approach, Norvig (along with Sebastian Thrun) taught the Stanford University class "Introduction to Artificial Intelligence," which was made available to anyone in the world. More than 160,000 students from 209 countries enrolled.

Norvig is also known for penning the world's longest palindromic sentence.

More profile about the speaker
Peter Norvig | Speaker | TED.com
TED2012

Peter Norvig: The 100,000-student classroom

피터 노빅: 10만명의 학생들이 공부하는 강의실

Filmed:
1,166,568 views

2011년 가을에 스텐포드 대학의 피터 노빅과 서바스티안 스런 교수는 재학생 175명과 인터랙티브한 웹캐스트를 통해 전세계에 걸친 10만명 이상의 학생들에게 인공지능 코스를 가르켰는데 피터 노빅은 그 자신이 그 코스를 통해 무엇을 배웠는지 이야기 한다.
- Computer scientist
Peter Norvig is a leading American computer scientist, expert on artificial intelligence and the Director of Research at Google Inc. Full bio

Double-click the English transcript below to play the video.

00:17
Everyone각자 모두 is both양자 모두 a learner학습자
0
1135
1976
우리는 모두 학생인 동시에
00:19
and a teacher선생.
1
3111
1512
스승입니다.
00:20
This is me being존재 inspired영감을 얻은
2
4623
2456
이건 저의 첫 스승인 제 어머니로 부터
00:22
by my first tutor가정 교사,
3
7079
1191
제가 무엇인지 열심히
00:24
my mom엄마,
4
8270
945
배우고 있는 사진이고,
00:25
and this is me teaching가르치는
5
9215
2623
이건 제가 스탠포드 대학에서
00:27
Introduction소개 to Artificial인공 Intelligence지성
6
11838
1953
200명의 학생들에게
00:29
to 200 students재학생
7
13791
1240
인공지능의 기초에 대해
00:30
at Stanford스탠포드 University대학.
8
15031
1272
강의하는 사진이죠.
00:32
Now the students재학생 and I
9
16303
1456
저나 학생들이나
00:33
enjoyed즐겁게 the class수업,
10
17759
1176
모두 강의를 즐깁니다.
00:34
but it occurred발생한 to me
11
18935
1416
그런데 생각해 보면
00:36
that while the subject제목 matter문제
12
20351
1711
우리가 지금 강의실에서
00:37
of the class수업 is advanced많은
13
22062
1289
가르치는 내용은
00:39
and modern현대,
14
23351
688
최신 첨단기술일지 몰라도
00:39
the teaching가르치는 technology과학 기술 isn't.
15
24039
2319
교육 방법 자체는 그렇지 않죠.
00:42
In fact, I use basically원래
16
26358
2336
사실 우리가 지금 사용하는
00:44
the same같은 technology과학 기술 as
17
28694
2370
교육 방법은 14세기 때와
00:46
this 14th-century제 세기 classroom교실.
18
31064
2630
근본적으로 차이가 없으니까요.
00:49
Note노트 the textbook교과서,
19
33694
2800
교과서를 요약하고
00:52
the sage세이지 on the stage단계,
20
36494
2944
선생님들은 단상에 서고
00:55
and the sleeping자고있는 guy
21
39438
1899
그리고 뒤에서
00:57
in the back. (Laughter웃음)
22
41337
901
잠자는 친구들까지요. (웃음)
00:58
Just like today오늘.
23
42238
2937
지금과 똑 같죠.
01:01
So my co-teacher공동 선생,
24
45175
3111
저와 제 동료인 서바스티안 스런은
01:04
Sebastian세바스찬 ThrunThrun, and I thought,
25
48286
1640
더 좋은 교육 방법이
01:05
there must절대로 필요한 것 be a better way.
26
49926
1774
있을 것이라고 생각했죠.
01:07
We challenged도전 한 ourselves우리 스스로
27
51700
1654
그래서 우리는
01:09
to create몹시 떠들어 대다 an online온라인 class수업
28
53354
1291
우리가 스탠포드 대학에서 하는
01:10
that would be equal같은 or better
29
54645
1631
강의와 같거나 또는 더 질이 좋은
01:12
in quality품질 to our Stanford스탠포드 class수업,
30
56276
2336
강의를 세계의 누구에게나 무료로
01:14
but to bring가져오다 it to anyone누군가
31
58612
2210
제공해 줄 수 있는 온라인 강의를
01:16
in the world세계 for free비어 있는.
32
60822
1630
만드는 작업에 도전했죠.
01:18
We announced발표하다 the class수업 on July칠월 29th,
33
62452
2568
드디어 우리는 온라인 강의를 하겠다고
01:20
and within이내에 two weeks, 50,000 people
34
65020
3209
7월29일에 발표했는데 2주내로
01:24
had signed서명 한 up for it.
35
68229
1407
5만명이 강의에 등록했고
01:25
And that grew자랐다 to 160,000 students재학생
36
69636
3105
그 후에 그 숫자는 209개국의
01:28
from 209 countries국가.
37
72741
2064
16만명으로 늘어났죠.
01:30
We were thrilled감동적인 to have
38
74805
1808
우리는 그렇게 많은 학생들이
01:32
that kind종류 of audience청중,
39
76613
1121
등록한 것에 매우 흥분했지만
01:33
and just a bit비트 terrified겁에 질린 that we
40
77734
2639
강의 준비가 완전히 끝나지 않은 상태라서
01:36
hadn't~하지 않았다 finished끝마친 preparing준비중 인 the class수업 yet아직. (Laughter웃음)
41
80373
2311
겁도 무척 났었습니다. (웃음)
01:38
So we got to work.
42
82684
1612
그래서 우리는 강의 준비를 해야 했습니다..
01:40
We studied공부 한 what others다른 사람 had done끝난,
43
84296
1636
우리는 다른 사람들이 이미 사용했던 방법을 연구해서
01:41
what we could copy and what we could change변화.
44
85932
2323
배울 점은 배우고 바꿀 것은 바꿨죠.
01:44
Benjamin베냐민 Bloom had showed보여 주었다
45
88255
2661
우리는 수만명을 상대로
01:46
that one-on-one하나에 하나 tutoring과외 works공장 best베스트,
46
90916
1809
강의해야 한다는 것을 알고 있었지만
01:48
so that's what we tried시도한 to emulate에뮬레이트하다,
47
92725
2128
벤자민 블룸은 제가 어머니에게 배웠듯이
01:50
like with me and my mom엄마,
48
94853
1440
1:1 교육 방법이 제일 좋다는 점을 지적해 주었고
01:52
even though그래도 we knew알고 있었다
49
96293
1505
우리는 저와 제 어머니가 했던 것과 유사한 상황을
01:53
it would be one-on-thousands1 대 1로.
50
97798
1918
따라해 보기로 했습니다.
01:55
Here, an overhead간접비 video비디오 camera카메라
51
99716
2201
이것은 제가 말하고 종이위에 그림 그리는 것을
01:57
is recording녹음 me as I'm talking말하는
52
101917
1832
오버헤드 비디오 카메라로
01:59
and drawing그림 on a piece조각 of paper종이.
53
103749
1679
녹화한 겁니다.
02:01
A student학생 said, "This class수업 felt펠트
54
105428
2409
한 학생은 “이 온라인 강의는
02:03
like sitting좌석 in a bar
55
107837
1152
마치 어떤 똑똑한 친구가
02:04
with a really smart똑똑한 friend친구
56
108989
1479
바에서 저랑 같이 맥주를 마시며
02:06
who's누가 explaining설명하는 something
57
110468
1204
애매한 부분을 설명해 주는 것 같은
02:07
you haven't~하지 않았다. grasped잡는, but are about to."
58
111672
2301
그런 분위기의 강의입니다"라고 말했죠.
02:09
And that's exactly정확하게 what we were aiming조준 for.
59
113973
2116
우리가 원하는 것이 바로 그거였죠.
02:11
Now, from Khan Academy학원, we saw
60
116089
2788
칸 아카데미는 한시간짜리 강의를
02:14
that short짧은 10-minute-분 videos비디오
61
118877
1824
녹화해서 작은 화면에
02:16
worked일한 much better than trying견딜 수 없는
62
120701
1776
보여 주는 것 보다
02:18
to record기록 an hour-long한시간 lecture강의
63
122477
2071
10분짜리 짧은 비디오들을 사용하는 것이
02:20
and put it on the small-format소형 screen화면.
64
124548
2417
훨씬 더 효과적이라는 것을 알게 됐습니다.
02:22
We decided결정적인 to go even shorter더 짧은
65
126965
2192
그래서 우리는 더 짧고
02:25
and more interactive상호 작용하는.
66
129157
1648
더 대화형인 형태로 해보기로 결정했습니다.
02:26
Our typical전형적인 video비디오 is two minutes의사록,
67
130805
2247
우리의 비디오는 주로 2분 정도 길이지만
02:28
sometimes때때로 shorter더 짧은, never more
68
133052
1752
더 짧은것도 가끔 있고, 6분 이상되는건
02:30
than six, and then we pause중지 for
69
134804
2689
하나도 없고 비디오가 끝난 후엔
02:33
a quiz놀리다 question문제, to make it
70
137493
1367
간략한 질문을 할 수 있도록 해서
02:34
feel like one-on-one하나에 하나 tutoring과외.
71
138860
1878
1:1로 강의를 받는 느낌이 들도록 했습니다.
02:36
Here, I'm explaining설명하는 how a computer컴퓨터 uses용도
72
140738
2402
여기서 저는 컴퓨터가
02:39
the grammar문법 of English영어
73
143140
1248
어떻게 영어 문법을 사용해서
02:40
to parse해석하다 sentences문장, and here,
74
144388
2177
문장을 분석하는지 설명한 후
02:42
there's a pause중지 and the student학생
75
146565
2064
강의를 잠깐 중단해서 학생들 자신이
02:44
has to reflect비추다, understand알다 what's going on
76
148629
2237
강의를 생각해보고 내용을 이해했는지 생각해 본 후에
02:46
and check검사 the right boxes상자들
77
150866
1640
옳은 답을 골라야
02:48
before they can continue잇다.
78
152506
1417
강의를 계속 받을 수 있게 합니다.
02:49
Students재학생 learn배우다 best베스트 when
79
153923
2448
학생들은 그들이 강의에 적극적으로
02:52
they're actively활발히 practicing연습하는.
80
156371
1248
참여할 때 제일 잘 배우죠.
02:53
We wanted to engage끌다 them, to have them grapple잡다
81
157619
2296
우리는 학생들이 강의에 적극적으로 참여하여
02:55
with ambiguity모호 and guide안내서 them to synthesize종합하다
82
159915
2968
문제를 제기하고 스스로 해결하도록 장려하고
02:58
the key ideas아이디어 themselves그들 자신.
83
162883
1665
그들 스스로가 핵심적인 아이디어를 찾기를 바랐습니다.
03:00
We mostly대개 avoid기피 questions질문들
84
164548
1712
우리는 주로 "이 공식을 사용해서
03:02
like, "Here's여기에 a formula공식, now
85
166260
1711
x가 2일때 y의 값이
03:03
tell me the value of Y
86
167971
1075
무엇이냐?" 하는 식의
03:04
when X is equal같은 to two."
87
169046
1212
질문을 피합니다.
03:06
We preferred선호하는 open-ended개방형 questions질문들.
88
170258
1817
우리는 개방형 질문을 더 선호하죠.
03:07
One student학생 wrote, "Now I'm seeing
89
172075
3178
한 학생은 "저는 이제 어디서 무엇을 보든지
03:11
Bayes베이 즈 networks네트워크 and examples예제들 of
90
175253
1862
베이즈 네트워크와 게임 이론이
03:13
game경기 theory이론 everywhere어디에나 I look."
91
177115
1568
실제로 작용하는 것을 봐요."라고 말했죠.
03:14
And I like that kind종류 of response응답.
92
178683
1738
저는 학생들로 부터 그런 반응을 받는 것을 좋아하죠.
03:16
That's just what we were going for.
93
180421
1806
우리 강의의 목적이 바로 그런 것이니까요.
03:18
We didn't want students재학생 to memorize암기하다 the formulas방식;
94
182227
2194
우리는 학생들이 공식을 기억하는 것보다는
03:20
we wanted to change변화 the way
95
184421
1190
그들이 세계를 바라보는 방법이
03:21
they looked보았다 at the world세계.
96
185611
1090
달라지기를 바랍니다.
03:22
And we succeeded성공한.
97
186701
1326
그리고 우리는 그 목적을 달성했죠.
03:23
Or, I should say, the students재학생 succeeded성공한.
98
188027
2400
아니, 우리의 학생들이 그 목적을 달성했죠.
03:26
And it's a little bit비트 ironic아이러니 한
99
190427
1919
우리는 사실 애초에 의도적으로
03:28
that we set세트 about to disrupt방해하다 traditional전통적인 education교육,
100
192346
2913
전통적인 교육방식을 벗어나려고 했는데도
03:31
and in doing so, we ended끝난 up
101
195259
2016
결과적으로는
03:33
making만들기 our online온라인 class수업
102
197275
1584
다른 온라인 강의 보다 훨씬 더
03:34
much more like a traditional전통적인 college칼리지 class수업
103
198859
2327
전통적인 대학 강의실 분위기를 조성했다는
03:37
than other online온라인 classes수업.
104
201186
1841
사실은 아이러니컬합니다.
03:38
Most가장 online온라인 classes수업, the videos비디오 are always available유효한.
105
203027
3215
대부분의 온라인 강의에서는 항상 비디오를 볼 수 있죠.
03:42
You can watch them any time you want.
106
206242
1817
학생들이 원할 때, 언제든지 볼 수 있습니다.
03:43
But if you can do it any time,
107
208059
2287
그런데 문제는 언제든지
03:46
that means방법 you can do it tomorrow내일,
108
210346
1505
비디오를 볼 수 있으면 내일로 미루기 쉽고,
03:47
and if you can do it tomorrow내일,
109
211851
1408
내일로 미룰수 있으면
03:49
well, you may할 수있다 not ever
110
213259
2162
강의를 전혀 안볼 가능성이
03:51
get around to it. (Laughter웃음)
111
215421
1758
많아 진다는 것이죠. (웃음)
03:53
So we brought가져온 back the innovation혁신
112
217179
2192
그래서 우리는 온라인 강의에 마감일자라는
03:55
of having due정당한 dates날짜들. (Laughter웃음)
113
219371
2087
혁신적인 아이디어를 도입했죠. (웃음)
03:57
You could watch the videos비디오
114
221458
1312
학생들은 주중에 언제든지
03:58
any time you wanted during...동안 the week,
115
222770
1912
비디오를 볼 수 있지만
04:00
but at the end종료 of the week,
116
224682
1155
주말까지는
04:01
you had to get the homework숙제 done끝난.
117
225837
1717
숙제를 해야 합니다.
04:03
This motivated동기 부여 된 the students재학생 to keep going, and it also또한
118
227554
1913
이것은 학생들에게 계속 공부를 할 동기를 주기도 하지만
04:05
meant의미심장 한 that everybody각자 모두 was working
119
229467
2856
모든 학생이 같은 시간에
04:08
on the same같은 thing at the same같은 time,
120
232323
1518
같은 내용을 공부를 하기 때문에
04:09
so if you went갔다 into a discussion토론 forum법정,
121
233841
1497
토론 포럼에 들어가면
04:11
you could get an answer대답 from a peer같은 패 within이내에 minutes의사록.
122
235338
2704
동료 학생들로 부터 몇 분 이내로
의문점에 대한 답을 받을 수 있게 하기 위한 것이죠.
04:13
Now, I'll show보여 주다 you some of the forums포럼, most가장 of which어느
123
238042
2939
제가 이제 이런 포럼을 몇개 보여드리겠는데
04:16
were self-organized자기 조직화 된 by the students재학생 themselves그들 자신.
124
240981
2766
대부분의 포럼은 학생들 스스로 만든 것입니다.
04:19
From Daphne다프네 Koller콜러 and Andrew앤드류 NgNg, we learned배운
125
243747
3224
저희들은 우리 대학의 다픈 콜러와 앤드류 누엔 교수로 부터
04:22
the concept개념 of "flipping뒤집기" the classroom교실.
126
246971
1996
학생들이 강의 전에 비디오를 미리 보고
04:24
Students재학생 watched보았다 the videos비디오
127
248967
1295
강의시간에는 비디오 내용을
04:26
on their그들의 own개인적인, and then they
128
250262
1588
토론하는 소위 '번복' 방식을
04:27
come together함께 to discuss즐기며 먹다 them.
129
251850
1710
사용하는 강의 개념을 배웠죠.
04:29
From Eric에릭 Mazur마 줄르, I learned배운 about peer같은 패 instruction교수,
130
253560
3157
그리고 에릭 메이져 교수로 부터는
04:32
that peers동료 can be the best베스트 teachers교사,
131
256717
2624
다른 학생들로 부터 배우는 것이
가장 좋은 방법일 수 있다는 것을 배웠는데
04:35
because they're the ones그들
132
259341
1432
그 이유는
04:36
that remember생각해 내다 what it's like to not understand알다.
133
260773
2848
어떤 부분이 이해하기 힘든가는 학생들이 가장 잘 알기 때문이죠.
04:39
Sebastian세바스찬 and I have forgotten잊혀진 some of that.
134
263621
2681
세바스챤과 저는 어떤게 어려웠었는지 많이 잊고 있었죠.
04:42
Of course코스, we couldn't할 수 없었다 have
135
266302
2399
우리는 물론 수만명의 학생들이
04:44
a classroom교실 discussion토론 with
136
268701
1632
강의실에서 토론하게는 할 수 없기 때문에
04:46
tens수십 of thousands수천 of students재학생,
137
270333
1546
저희들은 처음부터
04:47
so we encouraged격려의 and nurtured육성 된 these online온라인 forums포럼.
138
271879
3486
온라인 포럼을 장려하고 지지했죠.
04:51
And finally마침내, from Teach가르치다 For America미국,
139
275365
3048
그리고 마지막으로 저희들은
04:54
I learned배운 that a class수업 is not
140
278413
1481
'Teach For America'로 부터 강의의 주 목적은
04:55
primarily주로 about information정보.
141
279894
1496
정보 전달이 아니라는 것을 배웠죠.
04:57
More important중대한 is motivation자극 and determination결심.
142
281390
2831
그보다 더 중요한 것은 배우겠다는
동기와 결심을 갖게 하는 거죠.
05:00
It was crucial결정적인 that the students재학생 see
143
284221
1840
우리가 학생들을 위해 열심히 일하며
05:01
that we're working hard단단한 for them and
144
286061
1800
학생끼리 서로 도와야 한다는 것을
05:03
they're all supporting지원 each마다 other.
145
287861
1409
학생 스스로 이해하는 것이 절대적으로 중요하죠.
05:05
Now, the class수업 ran달렸다 10 weeks,
146
289270
2968
우리는 10주간 강의를 했는데
05:08
and in the end종료, about half절반 of the 160,000 students재학생 watched보았다
147
292238
3911
16만명의 학생중 약 절반 가량이
05:12
at least가장 작은 one video비디오 each마다 week,
148
296149
1563
최소한 매주 1번씩 강의를 봤고
05:13
and over 20,000 finished끝마친 all the homework숙제,
149
297712
2693
2만명 이상이 50 내지100시간의 시간을 들여
05:16
putting퍼팅 in 50 to 100 hours시간.
150
300405
1664
숙제를 전부 다 마쳤는데
05:17
They got this statement성명서 of accomplishment성취.
151
302069
1553
그런 학생들은 이런 수료증을 받았죠.
05:19
So what have we learned배운?
152
303622
2119
우리는 지금까지 온라인 강의에 대해 무엇을 배웠나요?
05:21
Well, we tried시도한 some old늙은 ideas아이디어
153
305741
2816
우리는 오래된 아이디어와
05:24
and some new새로운 and put them together함께,
154
308557
1657
새로운 아이디어를 섞어서 사용했고
05:26
but there are more ideas아이디어 to try.
155
310214
2082
앞으로 시도할 새로운 아이디어도 알아냈습니다.
05:28
Sebastian's세바스찬 teaching가르치는 another다른 class수업 now.
156
312296
1814
세바스챤은 지금 새 온라인 클라스를 진행하고 있고
05:30
I'll do one in the fall가을.
157
314110
1368
저는 올 가을에 온라인 강의를 또 할 겁니다.
05:31
Stanford스탠포드 Coursera꾸 세라, Udacity우디 시티, MITxMITx
158
315478
3760
Stanford Coursera, Udacity, MITx 등
여러 곳에서
05:35
and others다른 사람 have more classes수업 coming오는.
159
319238
2271
앞으로 많은 코스들을 제공할 것이기 때문에
05:37
It's a really exciting흥미 진진한 time.
160
321509
1488
앞으로 큰 발전을 기대하고 있습니다.
05:38
But to me, the most가장 exciting흥미 진진한
161
322997
1472
하지만 저한테 가장 흥미로운 것은
05:40
part부품 of it is the data데이터 that we're gathering모임.
162
324469
2976
우리가 수집하는 데이터입니다.
05:43
We're gathering모임 thousands수천
163
327445
2696
우리는 매 강의에서 각 학생들로 부터
05:46
of interactions상호 작용 per student학생 per class수업,
164
330141
1656
수천개에 달하는 강의에 대한
05:47
billions수십억 of interactions상호 작용 altogether전부,
165
331797
2208
그들의 반응과 관련한 데이터를 수집하는데
05:49
and now we can start스타트 analyzing분석하는 that,
166
334005
2504
이렇게 해서 수집되는 수십억개의 데이터를 분석해서
05:52
and when we learn배우다 from that,
167
336509
1464
우리가 배울 것을 배우고
05:53
do experimentations실험,
168
337973
1241
새로운 강의 방법을 개발하면
05:55
that's when the real레알 revolution혁명 will come.
169
339214
2240
진정한 교육 혁명을 시작할 수 있을 겁니다.
05:57
And you'll be able할 수 있는 to see the results결과들 from
170
341454
2776
그렇게 되면 우리는 새로운 세대의 훌륭한 학생들로 부터
06:00
a new새로운 generation세대 of amazing놀랄 만한 students재학생.
171
344230
2263
이런 교육적 혁신의 결과를 보게 될 것입니다.
06:02
(Applause박수 갈채)
172
346493
2253
(박수)
Translated by Young-ho Park
Reviewed by K Bang

▲Back to top

ABOUT THE SPEAKER
Peter Norvig - Computer scientist
Peter Norvig is a leading American computer scientist, expert on artificial intelligence and the Director of Research at Google Inc.

Why you should listen

Peter Norvig is a computer scientist and expert in both artificial intelligence and online search. Currently the Director of Research at Google Inc., Norvig was responsible for maintaining and improving the engine's core web search algorithms from 2002 to 2005. Prior to his work at Google, Norvig was NASA's chief computer scientist.

A fellow of the American Association for Artificial Intelligence and the author of the book Artificial Intelligence: A Modern Approach, Norvig (along with Sebastian Thrun) taught the Stanford University class "Introduction to Artificial Intelligence," which was made available to anyone in the world. More than 160,000 students from 209 countries enrolled.

Norvig is also known for penning the world's longest palindromic sentence.

More profile about the speaker
Peter Norvig | Speaker | TED.com