from big data to deep learning

25
!"#$%&'() +#","-$#) +&.$#'( ',/ 0%1'( 2.'((%,1%3 "4 &.% 5$1$&'( 6%7"(8&$",9 :;"- <$1 5'&' &" 5%%= 0%';,$,1) >;&$4$#$'( ?,&%(($1%,#%) ',/ @',$=8('&$7% A%#.,"("1$%3 B  !" $%&' ()*!%+, -./( 01&%234 !" $%& '()& *+ $%& *",-*."- /.-.$(0 1&2*03$.*"4 '& '.00 5&& ( /1(6($.7 $1("5+*16($.*" *+ *31 &7*"*68 ("/ 6*5$ *+ *31 5*7.&$(0 ."5$.$3$.*"59 :%.0& $%& ;&"&+.$5 *+ $%.5 $1("5+*16($.*" 7(" ;& 6(55.2&4 $%&1& (1& (05* $1&6&"/*35 1.5)5 $* *31 5*7.&$89 <+$&1 $%& (3$*6($.*" *+ 6("8 =1*/37$.*" =1*7&55&5 ("/ $%& 71&($.*" *+ 5&0+,/1.2."- 2&%.70&54 $%& (3$*6($.*" *+ 5*7.&$8 .5 "&>$9 ?%.5 .5 6*2."- 35 $* ( $.==."-  =*."$ ("/ $* ( 71*551*(/5@ '& 63 5$ /&7./& ;&$'&&" ( 5*7.&$8 ." '%.7% $%& (7$.*" 5 (1& /&$&16."&/ ." ( $*=,/*'" '(8 ("/ $%&" .6=0&6&"$&/ ;8 7*&17.*" *1 6(".=30($.2& $&7%"*0*-.&5 A537% (5 =&15*"(0.B&/ (/5 ("/ "3/-."-C *1 ( 5*7.&$84 ." '%.7% /&7.5.*"5 (1& $()&" ." ( +1&& ("/ =(1$.7.=($*18 '(8 ("/ 63$3(008 7**1/."($&/9 D*/&1" ."+*16($.*" ("/ 7*663".7($.*" 585$&65 A!E?C &"(;0& ;*$%4 ;3$ $%& 0($$&1 %(5 &7*"*6.7 ("/ 5$1($&-.7 ;&"&+.$59 ?%& +3"/(6&"$5 *+ %36(" /.-".$84 (3$*"*6*35 /&7.5.*",6()."-4 ("/ /&6*71(7.&5 (1& 5%()."-4 ;3$ ! ;&0.&2& $%($ $%&8 "&&/ $* ;& 2.-*1*3508 /&+&"/&/4 (5 $%&8 (1& "*$ *"08 7*1& =1."7.=0&5 *+ 0.2(;0& 5*7.&$.&54 ;3$ (05* $%& ;(5.5 *+ -1&($&1 &++.7.&"78 ("/ 5377&559 5/367) 836 71&&)+9)& :&))96; :6& 7)21&%<" =  8%** +6< 3>?)@ +6& 96 <3)" 9)7)&?)@ )%<3)& 6+)A5 B)+C>;%+ D&>+'*%+ C7%;7$%D "4 !"-% E%D 5$1$&'( A%#.,"("1F A;%,/3 <$1 5'&' E+ > ,*6!>*%F)9 86&*9@ 26;G>+%)7 >+9 261+<&%)7 >&) )HG67)9 <6 > 3>&73 26;G)<%<%6+A /3%7 G&6912)7 > 26+7%9)&>!*) G&)771&) <6 2&)><) ;6&) )::%2%)+< 7"7<);7 I > <)+9)+2" 83%23 %7 &)I%+:6&2)9 !" 3%,3 9)!< *)?)*7A B%, $><> 7));7 <6 !) > 71%<>!*) >+78)& <6 <3%7A J%+%+, B%, $><> 6::)&7 <3) G6<)+<%>* <6 2&)><) +)8 8>"7 <6 6G<%;%F) G&62)77)7@ %9)+<%:" %+<)&9)G)+9)+2%)7 >+9 ;>') %+:6&;)9 9)2%7%6+7A /3)&)K7 +6 961!< <3>< B%, $><> 2&)><)7 +)8 L  /3%7 9621;)+< %+2*19)7 >+9 &)G&6912)7 76;) G>&>,&>G37 6: <3) :6**68%+, 9621;)+<7M 5B%, $><> I 0>1!)&7<>! 1+9 N637<6:: 9)7 =LA O>3&31+9)&<7KK G1!*%73)9 %+ $%) P6*'78%&<723>: < I  !"# !"#"$%& ()*+%*,-./"(,-012%,%3 456789:;< -== /,,0>66???@A%=B123-?%*,-./"(,@./6(%2=-6 )9%<%6+7Q=RLSRTQ G9:QRSU()*!%+ ,U$.AG9:V :6& >+ .+,*%73 <&>+7*><%6+ 7)) 23>G<)& W 6: $A ()*!%+, -=RLT4 /3%+'%+, X3)>9 I .77>"7 6+ B%, $><>@ $%,%<>* N)?6*1<%6+@ >+9 Y>&<%2%G><6&" J>&')< Z62%)<" -ZG&%+,)&@ B)&*%+4A =  E 861*9 >99 5)::%2%)+2"5 6& 5G)&:6&;>+2)5 3)&) >7 8)**A

Upload: felipe-angel

Post on 18-Feb-2018

214 views

Category:

Documents


0 download

TRANSCRIPT

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 1/25

!"#$%&'() +#","-$#) +&.$#'( ',/ 0%1'( 2.'((%,1%3 "4 &.% 5$1$&'( 6%7"(8&$",9

:;"- <$1 5'&' &" 5%%= 0%';,$,1) >;&$4$#$'( ?,&%(($1%,#%) ',/ @',$=8('&$7%

A%#.,"("1$%3B 

!" $%&' ()*!%+, -./( 01&%234

!" $%& '()& *+ $%& *",-*."- /.-.$(0 1&2*03$.*"4 '& '.00 5&& ( /1(6($.7

$1("5+*16($.*" *+ *31 &7*"*68 ("/ 6*5$ *+ *31 5*7.&$(0 ."5$.$3$.*"59 :%.0& $%&

;&"&+.$5 *+ $%.5 $1("5+*16($.*" 7(" ;& 6(55.2&4 $%&1& (1& (05* $1&6&"/*35 1.5)5 $*

*31 5*7.&$89 <+$&1 $%& (3$*6($.*" *+ 6("8 =1*/37$.*" =1*7&55&5 ("/ $%& 71&($.*" *+

5&0+,/1.2."- 2&%.70&54 $%& (3$*6($.*" *+ 5*7.&$8 .5 "&>$9 ?%.5 .5 6*2."- 35 $* ( $.==."-

 =*."$ ("/ $* ( 71*551*(/5@ '& 635$ /&7./& ;&$'&&" ( 5*7.&$8 ." '%.7% $%& (7$.*"5

(1& /&$&16."&/ ." ( $*=,/*'" '(8 ("/ $%&" .6=0&6&"$&/ ;8 7*&17.*" *1

6(".=30($.2& $&7%"*0*-.&5 A537% (5 =&15*"(0.B&/ (/5 ("/ "3/-."-C *1 ( 5*7.&$84 ."

'%.7% /&7.5.*"5 (1& $()&" ." ( +1&& ("/ =(1$.7.=($*18 '(8 ("/ 63$3(0087**1/."($&/9 D*/&1" ."+*16($.*" ("/ 7*663".7($.*" 585$&65 A!E?C &"(;0& ;*$%4

;3$ $%& 0($$&1 %(5 &7*"*6.7 ("/ 5$1($&-.7 ;&"&+.$59 ?%& +3"/(6&"$5 *+ %36("

/.-".$84 (3$*"*6*35 /&7.5.*",6()."-4 ("/ /&6*71(7.&5 (1& 5%()."-4 ;3$ ! ;&0.&2&

$%($ $%&8 "&&/ $* ;& 2.-*1*3508 /&+&"/&/4 (5 $%&8 (1& "*$ *"08 7*1& =1."7.=0&5 *+

0.2(;0& 5*7.&$.&54 ;3$ (05* $%& ;(5.5 *+ -1&($&1 &++.7.&"78 ("/ 5377&559

5/367) 836 71&&)+9)& :&))96; :6& 7)21&%<"= 8%** +6< 3>?)@ +6& 96 <3)" 9)7)&?)@

)%<3)& 6+)A5

B)+C>;%+ D&>+'*%+

C7%;7$%D "4 !"-% E%D 5$1$&'( A%#.,"("1F A;%,/3

<$1 5'&'

E+ > ,*6!>*%F)9 86&*9@ 26;G>+%)7 >+9 261+<&%)7 >&) )HG67)9 <6 > 3>&73

26;G)<%<%6+A /3%7 G&6912)7 > 26+7%9)&>!*) G&)771&) <6 2&)><) ;6&) )::%2%)+<7"7<);7 I > <)+9)+2" 83%23 %7 &)I%+:6&2)9 !" 3%,3 9)!< *)?)*7A

B%, $><> 7));7 <6 !) > 71%<>!*) >+78)& <6 <3%7A J%+%+, B%, $><> 6::)&7 <3)G6<)+<%>* <6 2&)><) +)8 8>"7 <6 6G<%;%F) G&62)77)7@ %9)+<%:" %+<)&9)G)+9)+2%)7>+9 ;>') %+:6&;)9 9)2%7%6+7A /3)&)K7 +6 961!< <3>< B%, $><> 2&)><)7 +)8

L /3%7 9621;)+< %+2*19)7 >+9 &)G&6912)7 76;) G>&>,&>G37 6: <3) :6**68%+, 9621;)+<7M 5B%,$><> I 0>1!)&7<>! 1+9 N637<6:: 9)7 =LA O>3&31+9)&<7KK G1!*%73)9 %+ $%) P6*'78%&<723>:< I !"#

!"#"$%& ()*+%*,-./"(,-012%,%3 456789:;< -== /,,0>66???@A%=B123-?%*,-./"(,@./6(%2=-6

)9%<%6+7Q=RLSRTQG9:QRSU()*!%+,U$.AG9:V :6& >+ .+,*%73 <&>+7*><%6+ 7)) 23>G<)& W 6: $A ()*!%+,

-=RLT4 /3%+'%+, X3)>9 I .77>"7 6+ B%, $><>@ $%,%<>* N)?6*1<%6+@ >+9 Y>&<%2%G><6&" J>&')< Z62%)<"-ZG&%+,)&@ B)&*%+4A= E 861*9 >99 5)::%2%)+2"5 6& 5G)&:6&;>+2)5 3)&) >7 8)**A

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 2/25

!17%+)77 6GG6&<1+%<%)7@ +6< C17< !)2>17) 6: %<7 >GG*%2><%6+ %+ ;>&')<%+,@ !1< >*76!)2>17) %+:6&;><%6+ %<7)*: %7 !)26;%+, ;6+)<%F)9A

/)23+6*6," ,1&17 G&)>23 <3>< B%, $><> %7 !)26;%+, <3) 6%* 6: <3) =L7< 2)+<1&"@ >+)8 26;;69%<" <3>< 2>+ !) <>GG)9 :6& G&6:%<A X7 <3) ?%&<1>* 21&&)+2" B%<[6%+

<);G6&>&%*" !)2>;) ;6&) ?>*1>!*) <3>+ ,6*9@ %< 2>+ !) )?)+ *%<)&>**" 7>%9 <3><9><> 2>+ !) ;%+)9 %+<6 ;6+)" %+ > 8>" 83%23 861*9 G&)?%617*" 3>?) !))+26+7%9)&)9 > :>%&" <>*)A X*<361,3 ;>+" B%, $><> 7)<7 >&) G&6G&%)<>&"@ <3)26+71*<>+2" 26;G>+" J2\%+7)" &)2)+<*" )7<%;><)9 <3>< <3) >99%<%6+>* ?>*1) 6:]G)+ $><> >*6+) >;61+<7 <6 !) ^_IT <&%**%6+ G)& ")>&A_ E: <3) 86&<3 6: <3%7 G1!*%2*">?>%*>!*) %+:6&;><%6+ 8)&) )?)+*" 9%?%9)9 >;6+, <3) 86&*9K7 G6G1*><%6+@ )?)&"G)&76+ 6+ .>&<3 861*9 &)2)%?) >+ >99%<%6+>* ^WRR G)& ")>&A `) +68 7)) ]G)+a6?)&+;)+< %+%<%><%?)7 >** 6?)& <3) 86&*9@ >%;%+, <6 %;G&6?) 7)&?%2)7 <6 2%<%F)+783%*) 3>?%+, <6 21< 267<7A .?)+ <3) ab %7 G173%+, :6& ]G)+ $><> >7 <3%7 %7 2&12%>* <6;6!%*%F) <3) :1** 762%)<>* >+9 )26+6;%2 2>G>2%<"AS 

/3) G6<)+<%>* 6: B%, $><> 7G>+7 )?)&" >&)> 6: 762%>* >2<%?%<"@ :&6; <3) G&62)77%+,6: 31;>+ *>+,1>,) >+9 <3) ;>+>,);)+< 6: :%+>+2%>* >77)<7@ <6 <3) 3>&+)77%+, 6:%+:6&;><%6+ )+>!*%+, *>&,) 2%<%)7 <6 ;>+>,) <3) !>*>+2) !)<8))+ )+)&,"26+71;G<%6+ >+9 G&6912<%6+A D1&<3)&;6&)@ B%, $><> 36*97 <3) G&6;%7) <6 3)*GG&6<)2< 61& )+?%&6+;)+<@ <6 9)<)2< >+9 &)912) &%7'7@ >+9 <6 9%726?)&6GG6&<1+%<%)7 <3>< 861*9 6<3)&8%7) 3>?) !))+ ;%77)9A E+ <3) >&)> 6: ;)9%2%+)@B%, $><> 261*9 ;>') %< G677%!*) <6 <>%*6& ;)9%2><%6+7 <6 G><%)+<7@ <3)&)!"%+2&)>7%+, <3)%& )::)2<%?)+)77 >+9 &)912%+, <3)%& 7%9) )::)2<7A B%, $><> 261*9 >*76>22)*)&><) <3) &)7)>&23 >+9 9)?)*6G;)+< 6: +)8 9&1,7 >+9 :6217 &)761&2)7 6+<3) >&)>7 6: ,&)><)7< +))9A

B%, $><> >GG*%2><%6+7 >&) 7G&)>9%+, *%') 8%*9:%&)A /3)" :>2%*%<><) G)&76+>*%F)96::)&7@ 7)&?%2)7 >+9 G&6912<7A ]+) 6: <3) ,&)><)7< 7122)77)7 6: B%, $><> %7>1<6;><%2 7G))23 &)26,+%<%6+ >+9 G&62)77%+,A XGG*)c7 Z%&% 1+9)&7<>+97 "61 83)+>7'%+, :6& > &)7<>1&>+<@ >+9 a66,*) J>G7 2>+ *)>9 "61 <3)&)A a66,*) <&>+7*><)%+<)&G&)<7 :6&)%,+ *>+,1>,)7 !" 26;G>&%+, <3); 8%<3 > 31,) 26**)2<%6+ 6:<&>+7*><)9 <)H<7A EBJc7 `><76+ 26;G1<)& )?)+ 1+9)&7<>+97 31;>+ *>+,1>,)A E<2>+ +6< 6+*" !)>< )HG)&%)+2)9 d1%F 7368 G*>")&7@ !1< <>') 2>&) 6: 217<6;)&36<*%+)7 >+9 G><%)+<7 I G)&3>G7 !)<<)& <3>+ 31;>+7A EBJ 3>7 C17< 9)2%9)9 <6%+?)7< ^L !%**%6+ <6 :1&<3)& 9)?)*6G >+9 26;;)&2%>*%F) <3) 7"7<);A

]: 261&7)@ B%, $><> G*>" >+ %;G6&<>+< &6*) %+ <3) :%+>+2%>* 7)2<6&A XGG&6H%;><)*"7)?)+<" G)&2)+< 6: >** :%+>+2%>* ;>&')< <&>+7>2<%6+7 >&) +68 ;>9) !" >1<6;><)9<&>9%+, >*,6&%<3;7A E+ C17< 6+) 9>"@ <3) )+<%&) ;6+)" 71GG*" 6: <3) 86&*9 %7<&>9)9A Z6 ;123 ;6+)" >*76 ><<&>2<7 6&,>+%F)9 2&%;)A /3)&):6&)@ :%+>+2%>*<&>+7>2<%6+7 >&) 72>++)9 !" B%, $><> >*,6&%<3;7 :6& >!+6&;>*%<%)7 <6 9)<)2<717G%2%617 >2<%?%<%)7A /3) 26;G>+" B*>2'&62' 17)7 > 7%;%*>& 76:<8>&)@ 2>**)9

_ J2\%+7)" >+9 [6A ]G)+ 9><>M e+*62'%+, %++6?><%6+ >+9 G)&:6&;>+2) 8%<3 *%d1%9 %+:6&;><%6+@3<<GMQQ888A;2'%+7)"A26;Q%+7%,3<7Q!17%+)77U<)23+6*6,"Q6G)+U9><>U1+*62'%+,U%++6?><%6+U>+9UG)&:6&;>+2)U8%<3U*%d1%9U%+:6&;><%6+  

S 3<<GMQQ6G)+761&2)A26;Q,6?)&+;)+<QL_QWQ6G)+I9><>I23>&<)&I,b 

3<<GMQQ)2A)1&6G>A)1Q9%,%<>*I>,)+9>Q)+Q+)87Q)1I%;G*);)+<><%6+I,bI6G)+I9><>I23>&<)&3<<GMQQ)2A)1&6G>A)1Q%+:6&;><%6+U762%)<"Q+)87&66;Q2:Q9>)Q9621;)+<A2:;f962U%9g_Sbh

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 3/25

5X*>99%+5@ <6 7122)77:1**" 7G)21*><) 8%<3 :1+97 >;61+<%+, >GG&6H%;><)*" <6 <3),&677 96;)7<%2 G&6912< -a$Y4 6: .1&6G)A

/3) B%, $><> >GG&6>23 %7 ;>&')9*" 9%::)&)+< :&6; 2*>77%2>* 9><> ;%+%+,>GG&6>23)7@ 83)&) 9><>7)<7 3>?) !))+ 2>&):1**" 26**)2<)9 >+9 2>&):1**" 21&><)9

%+ 9><>!>7)7 !" 72%)+<%7<7 6& 6<3)& )HG)&<7A (68)?)&@ )>23 ")>& 8) +68 G&6912)>7 ;123 9><> >7 %+ <3) )+<%&) 3%7<6&" 6: 31;>+'%+9@ %A)A %+ >** <3) ")>&7 !):6&)A/3%7 )H2))97 !" :>& 31;>+ 2>G>2%<%)7 <6 21&><) >** 9><>A E+ C17< 6+) ;%+1<)@WRR@RRR ,66,*) d1)&%)7 >+9 TRR@RRR :>2)!66' 26;;)+<7 >&) 7)+<A B)7%9)7 <3%7@)+6&;617 >;61+<7 6: 9><> >&) G&6912)9 !" >** <3) <&>2)7 <3>< 31;>+ >2<%?%<%)7>&) +68 *)>?%+, %+ <3) E+<)&+)<A /3%7 %+2*19)7 736GG%+, >+9 :%+>+2%>* 9><>@ ,)6IG67%<%6+%+, >+9 ;6!%*%<" 9><>@ 762%>* 26+<>2<7@ 6G%+%6+7 G67<)9 %+ 762%>* +)<86&'7@:%*)7 7<6&)9 %+ 9&6G!6H 6& 76;) 6<3)& 2*619 7<6&>,)@ );>%*7 G67<)9 6& &)2)%?)9<3&61,3 :&)) >2261+<7@ )!66'7 &)>9@ %+2*19%+, <%;) 7G)+< 6+ )>23 G>,) >+97)+<)+2)7 ;>&')9@ a66,*) 6& XGG*) Z%&% d1)&%)7 >7')9@ "61<1!) 6& /P ;6?%)7

8><23)9 6+ 9);>+9@ >+9 ,>;)7 G*>")9A J69)&+ ,>;) )+,%+)7 >+9 7;>&< 36;))d1%G;)+< 861*9 >*76 7)+7) "61& >2<%?%<%)7 >< 36;)@ 9%,%<>* ,*>77)7 861*9<&>+7;%< 83>< "61 7))@ >+9 ,)+) 9><> >&) >*76 ;>77%?)*" ,><3)&)9 +68A

J)>+83%*)@ <3) 9><> 7)<7 26**)2<)9 !" 26;G>+%)7 7123 >7 )!>"@ `>*;>&< 6&D>2)!66'@ &)>23 <3) 7%F) 6: G)<>!"<)7 -L ;%**%6+ !%**%6+ !"<)74 I 6+) 31+9&)9<%;)7 <3) %+:6&;><%6+ 26+<)+< 6: <3) *>&,)7< *%!&>&" %+ <3) 86&*9M <3) eAZA i%!&>&"6: [6+,&)77A /3) ;%+%+, 6: B%, $><> 6G)+7 1G )+<%&)*" +)8 G677%!%*%<%)7 :6&G&62)77 6G<%;%F><%6+@ <3) %9)+<%:%2><%6+ 6: %+<)&9)G)+9)+2%)7@ >+9 9)2%7%6+71GG6&<A (68)?)&@ B%, $><> >*76 26;)7 8%<3 +)8 23>**)+,)7@ 83%23 >&) 6:<)+23>&>2<)&%F)9 !" :61& 2&%<)&%>M

•  2*036&@ <3) :%*) 7%F)7 >+9 +1;!)& 6: &)26&97 >&) 31,)@•  2&0*7.$8@ <3) 9><> )?>*1><%6+ 3>7 6:<)+ <6 !) 96+) %+ &)>*I<%;)@•  2(1.&$8@ <3) 9><> >&) 6:<)+ ?)&" 3)<)&6,)+)617 >+9 1+7<&12<1&)9@•  2&1(7.$8@ <3) 9><> >&) G&6!>!*" %+26;G*)<)@ +6< &)G&)7)+<><%?)@ >+9

26+<>%+ )&&6&7A

/3)&):6&)@ 26;G*)<)*" +)8 >*,6&%<3;7 3>9 <6 !) 9)?)*6G)9@ %A)A +)826;G1<><%6+>* ;)<3697A

@'#.$,% 0%';,$,1) 5%%= 0%';,$,1) ',/ !8=%;G?,&%(($1%,#% 

/6 2&)><) ?>*1) :&6; 9><>@ %< %7 2&12%>* <6 <1&+ &>8 9><> %+<6 17):1* %+:6&;><%6+>+9 >2<%6+>!*) '+68*)9,)@ 76;) )?)+ >%; >< G&6912%+, 58%796;5 >+952*>%&?6">+2)5 -G&)9%2<%?) 2>G>!%*%<%)74A /3%7 G&62)77 &)d1%&)7 G68)&:1*26;G1<)& >*,6&%<3;7A J>23%+) *)>&+%+, >*,6&%<3;7 96 +6< 6+*" 8><23 61< :6&G>&<%21*>& G><<)&+7@ !1< :%+9 G><<)&+7 )?)+ !" <3);7)*?)7A /3%7 3>7 *)9 [3&%7X+9)&76+ <6 :>;617*" G67<1*><) 5<3) )+9 6: <3)6&"5@ %A)A <3) 3"G6<3)7%7 <3>< <3)9><> 9)*1,) ;>')7 <3) 72%)+<%:%2 ;)<369 6!76*)<)AT E: <3)&) 861*9 !) C17< > !%,)+61,3 d1>+<%<" 6: 9><>@ ;>23%+) *)>&+%+, 261*9 <1&+ %< %+<6 3%,3Id1>*%<" 9><>

T [3&%7 X+9)&76+@ /3) .+9 6: /3)6&"M /3) $><> $)*1,) J>')7 <3) Z2%)+<%:%2 J)<369 ]!76*)<)A`EN.$ J>,>F%+ LjARW@ 3<<GMQQ>&23%?)A8%&)9A26;Q72%)+2)Q9%726?)&%)7Q;>,>F%+)QLjIRWQG!U<3)6&"

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 4/25

>+9 26;) <6 <3) &%,3< 26+2*17%6+7A /3%7 3"G6<3)7%7 3>7 !)26;) <3) 2&)96 6: B%,$><> >+>*"<%27@ )?)+ <361,3 <3%7 >*;67< &)*%,%617 !)*%): *>2'7 > G&6G)& :61+9><%6+AE >; <3)&):6&) 2>**%+, 3)&) :6& > G&66: 6: 26+2)G<@ !" :6&;1*><%+, <3) :6**68%+,<)7<M [>+ 1+%?)&7>* ;>23%+) *)>&+%+, >*,6&%<3;7@ 83)+ ;%+%+, 31,) ;>77)7 6:)HG)&%;)+<>* G3"7%27 9><>@ 9%726?)& <3) *>87 6: +><1&) <3);7)*?)7@ 8%<361< <3)

71GG6&< 6: 31;>+ '+68*)9,) >+9 %+<)**%,)+2)f

E+ 7G%<) 6: <3)7) %771)7@ 9))G *)>&+%+, >*,6&%<3;7 >&) 2)*)!&><%+, ,&)>< 7122)77)7%+ )?)&"9>" >GG*%2><%6+7 <3>< 96 +6< &)d1%&) >+ 1+9)&7<>+9%+, 6: > 3%99)+ *6,%26& 2>17>* %+<)&9)G)+9)+2%)7Aj /3)7) >*,6&%<3;7 >&) 1+%?)&7>* *)>&+%+,G&62)91&)7 83%23@ <3)6&)<%2>**"@ 261*9 *)>&+ >+" G><<)&+ 6& %+G1<I61<G1< &)*><%6+@,%?)+ )+61,3 <%;) >+9 9><>A Z123 >*,6&%<3;7 >&) G>&<%21*>&*" 7<&6+, %+ G><<)&+&)26,+%<%6+ <>7'7@ %A)A &)>9%+,@ *%7<)+%+,@ 8><23%+,@ >+9 2*>77%:"%+, 26+<)+<7AW X7 >26+7)d1)+2)@ )HG)&<7 !)*%)?) <3>< >!61< TRk 6: >** 21&&)+< C6!7 %+ <3) %+917<&%>*>+9 7)&?%2) 7)2<6&7 8%** !) *67< %+ <3) +)H< LRI=R ")>&7A J6&)6?)&@ >!%*%<%)726;G>&>!*) <6 <3) 31;>+ !&>%+ >&) )HG)2<)9 <6 !) &)>23)9 8%<3%+ <3) +)H< T <6

=T ")>&7Ab /3%7 3>7 *)9 <6 > &)?%?>* 6: X&<%:%2%>* E+<)**%,)+2)@ +68 6:<)+ 26;%+,1+9)& <3) *>!)* 5[6,+%<%?) [6;G1<%+,5A

/6 !) 26;G)<%<%?) 8%<3 %+<)**%,)+< ;>23%+)7@ 31;>+7 8%** %+ :1<1&) %+2&)>7%+,*"+))9 526,+%<%?) >77%7<>+<75A /3)7) >&) 9%,%<>* <66*7 7123 >7 a66,*) l68A (68)?)&@>7 26,+%<%?) >77%7<>+<7 ,)< ;6&) G68)&:1* >< )HG6+)+<%>**" >22)*)&><%+, G>2)@<3)" 861*9 766+ !)26;) 76;)<3%+, *%') ?%&<1>* 26**)>,1)7@ <3)+ 76;)<3%+, *%')9%,%<>* 26>23)7@ >+9 :%+>**" 61& !677)7A N6!6<7 >2<%+, >7 !677)7 >&) >*&)>9" !)%+,<)7<)9Ah 

Z2%)+<%7<7 >&) >*76 86&'%+, 6+ 5!%6*6,%2>* 1G,&>9)75 :6& 31;>+7A /3) :%&7<

2"!6&,7@ %A)A 31;>+7 <3>< 3>?) !))+ <)23+6*6,%2>**" 1G,&>9)9@ >*&)>9" )H%7<A /3);67< 8)**I'+68+ 6: <3); %7 l)%* (>&!%776+A X< <3) 7>;) <%;)@ <3)&) %7 *>&,)G&6,&)77 %+ G&6912%+, &6!6<7 <3>< *66' >+9 !)3>?) %+2&)>7%+,*" *%') 31;>+7A E<;17< !) >771;)9 <3>< ;>+" 72%)+2) :%2<%6+ G3>+<>7%)7 7368+ %+ 2%+);>7 >+9 6+/P ;>" 766+ !)26;) &)>*%<"ALR 

N)2)+<*"@ 368)?)&@ <3)&) >&) %+2&)>7%+, 26+2)&+7 >!61< >&<%:%2%>* 71G)&I%+<)**%,)+2)7@ %A)A ;>23%+)7 <3>< 861*9 !) ;6&) %+<)**%,)+< <3>+ 31;>+7A E+ :>2<@26;G1<)&7 >&) +68 !)<<)& >< 2>*21*><%+,@ >< G*>"%+, 23)77 >+9 ;67< 6<3)&7<&><),%2 ,>;)7@ >< 9&%?%+, 2>&7@ >+9 <3)" >&) G)&:6&;%+, ;>+" 6<3)& 7G)2%>*%F)9<>7'7 %+2&)>7%+,*" 8)**A [)&<>%+*"@ %+<)**%,)+< ;1*<%IG1&G67) ;>23%+)7 8%** 766+

)H%7<A

j ]+) 6: <3) *)>9%+, )HG)&<7 %+ <3%7 :%)*9 %7 Om&,)+ Z23;%931!)&A7 Jeremy Howard, The wonderful and terrifying implications of computers that can learn, TEDx

Brussels, 3<<GMQQ888A<)9A26;Q<>*'7QC)&);"U368>&9U<3)U86+9)&:1*U>+9U<)&&%:"%+,U%;G*%2><%6+7U6:U26;G1<)&7U<3><U2>+U*)>&+b /3) G6%+< %+ <%;) 83)+ <3%7 3>GG)+7 %7 76;)<%;)7 2>**)9 57%+,1*>&%<"5@ >226&9%+, <6 N>"\1&F8)%*A h Zm99)1<723) -LLA_A=RLT4 N6!6<)& >*7 [3):@ 3<<GMQQ888A71)99)1<723)A9)Q*)!)+Q&6!6<)&I>;I

>&!)%<7G*><FI!%**%,I:&)1+9*%23I'*>,<I+%23<ILA=_W_WLTLR Z123 ;6?%)7 6:<)+ 7)&?) <6 :>;%*%>&%F) <3) G1!*%2 8%<3 +)8 <)23+6*6,%)7 >+9 &)>*%<%)7@ >+9 <6,%?) <3); > G67%<%?) <6123 -%+2*19%+, 5B%, B&6<3)&54A

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 5/25

]+*" <86 6& <3&)) ")>&7 >,6@ ;67< G)6G*) 861*9 3>?) 26+7%9)&)9 %< %;G677%!*)<3>< >*,6&%<3;7@ 26;G1<)&7@ 6& &6!6<7 861*9 )?)& 23>**)+,) 31;>+7 >7 2&68+ 6:2&)><%6+A /3%7 3>7 23>+,)9ALL E+<)**%,)+< ;>23%+)7 >&) *)>&+%+, <3);7)*?)7@ >+9%<c7 +68 26+2)%?>!*) <3>< &6!6<7 !1%*9 6<3)& &6!6<7 <3>< >&) 7;>&<)&A /3)&)71*<%+, )?6*1<%6+>&" G&6,&)77 %7 d1%2'*" >22)*)&><%+,@ >+9 %< %7 <3)&):6&) C17< >

;><<)& 6: <%;) 1+<%* <3)&) >&) ;>23%+)7 7;>&<)& <3>+ 17A Y)&3>G7 7123 71G)&I%+<)**%,)+2)7 >*&)>9" )H%7<A E+ <3) :6**68%+,@ E >; G&)7)+<%+, 76;) &)*><)9 d16<)76: 76;) +6<>!*) 72%)+<%7<7 >+9 <)23+6*6," )HG)&<7@ 836 &>%7) 26+2)&+7 >+9 <&" <6>*)&< <3) G1!*%2 6: <3) G&6!*);7 8) >&) &1++%+, %+<6M

D6& )H>;G*)@ .*6+ J17' 6: /)7*> J6<6&7 ?6%2)9ML= 5E <3%+' 8) 7361*9 !) ?)&"2>&):1* >!61< >&<%:%2%>* %+<)**%,)+2)A E: E 3>9 <6 ,1)77 >< 83>< 61& !%,,)7<)H%7<)+<%>* <3&)>< %7@ %<c7 G&6!>!*" <3><A Z6 8) +))9 <6 !) ?)&" 2>&):1*A AAA E >;%+2&)>7%+,*" %+2*%+)9 <6 <3%+' <3>< <3)&) 7361*9 !) 76;) &),1*><6&" 6?)&7%,3<@;>"!) >< <3) +><%6+>* >+9 %+<)&+><%6+>* *)?)*@ C17< <6 ;>') 71&) <3>< 8) 96+c< 9676;)<3%+, ?)&" :66*%73A AAA 5

Z%;%*>& 2&%<%d1) 26;)7 :&6; l%2' B67<&6; >< ]H:6&9 e+%?)&7%<"AL_ 

Z<)G3)+ (>8'%+,@ <3) ;67< :>;617 G3"7%2%7< <6 9><)@ &)2)+<*" 7>%9MLS 5(1;>+7836 >&) *%;%<)9 !" 7*68 !%6*6,%2>* )?6*1<%6+ 261*9+c< 26;G)<) >+9 861*9 !)71G)&7)9)9A AAA /3) 9)?)*6G;)+< 6: :1** >&<%:%2%>* %+<)**%,)+2) 261*9 7G)** <3) )+96: <3) 31;>+ &>2)A AAA E< 861*9 <>') 6:: 6+ %<7 68+@ >+9 &)I9)7%,+ %<7)*: >< >+ )?)&%+2&)>7%+, &><)A5

D1&<3)&;6&)@ B%** a><)7 6: J%2&676:< 8>7 d16<)9MLT 5E >; %+ <3) 2>;G <3>< %726+2)&+)9 >!61< 71G)& %+<)**%,)+2)A AAA E >,&)) 8%<3 .*6+ J17' >+9 76;) 6<3)&7

6+ <3%7 >+9 96+c< 1+9)&7<>+9 83" 76;) G)6G*) >&) +6< 26+2)&+)9A5

Z<)?) `6F+%>'@ 26I:61+9)& 6: XGG*)@ :6&;1*><)9 3%7 86&&%)7 >7 :6**687MLj 5[6;G1<)&7 >&) ,6%+, <6 <>') 6?)& :&6; 31;>+7@ +6 d1)7<%6+ AAA i%') G)6G*)%+2*19%+, Z<)G3)+ (>8'%+, >+9 .*6+ J17' 3>?) G&)9%2<)9@ E >,&)) <3>< <3) :1<1&)%7 72>&" >+9 ?)&" !>9 :6& G)6G*) AAA E: 8) !1%*9 <3)7) 9)?%2)7 <6 <>') 2>&) 6:)?)&"<3%+, :6& 17@ )?)+<1>**" <3)"c** <3%+' :>7<)& <3>+ 17 >+9 <3)"c** ,)< &%9 6: <3)7*68 31;>+7 <6 &1+ 26;G>+%)7 ;6&) )::%2%)+<*" AAA `%** 8) !) <3) ,697f `%** 8)!) <3) :>;%*" G)<7f ]& 8%** 8) !) >+<7 <3>< ,)< 7<)GG)9 6+f E 96+c< '+68 n5

Y)&76+>**"@ E <3%+' ;6&) G67%<%?)*" >!61< >&<%:%2%>* %+<)**%,)+2)@ !1< E !)*%)?) <3><

8) 7361*9 )+,>,) %+ 9%7<&%!1<)9 26**)2<%?) %+<)**%,)+2) &><3)& <3>+ 2&)><%+, > :)8)H<&);)*" G68)&:1* 71G)&I%+<)**%,)+2)7 8) ;>" +6< !) >!*) <6 26+<&6*ALW E< 7));7

LL O>;)7 B>&&>< -=RL_4 ]1& D%+>* E+?)+<%6+ I X&<%:%2%>* E+<)**%,)+2) >+9 <3) .+9 6: <3) (1;>+ .&>-/36;>7 $1++) B66'74A .9,) o1)7<%6+ =RLTM `3>< 96 "61 <3%+' >!61< ;>23%+)7 <3>< <3%+'f3<<GMQQ)9,)A6&,Q>++1>*Id1)7<%6+Q83><I96I"61I<3%+'I>!61<I;>23%+)7I<3><I<3%+'L= 3<<GMQQ888A<3),1>&9%>+A26;Q<)23+6*6,"Q=RLSQ62<Q=WQ)*6+I;17'I>&<%:%2%>*I%+<)**%,)+2)I>%I!%,,)7<I)H%7<)+<%>*I<3&)><L_ l%2' B67<&6; -=RLS4 Z1G)&%+<)**%,)+2)M Y><37@ $>+,)&7@ Z<&><),%)7 -]H:6&9 e+%?)&7%<" Y&)774ALS 3<<GMQQ888A!!2A26;Q+)87Q<)23+6*6,"I_R=hRTSRLT  3<<GMQQ888A2+)<A26;Q+)87Q!%**I,><)7I%7I86&&%)9I>!61<I>&<%:%2%>*I%+<)**%,)+2)I<66QLj 3<<GMQQ888A8>73%+,<6+G67<A26;Q!*6,7Q<3)I78%<23Q8GQ=RLTQR_Q=SQ>GG*)I26I:61+9)&I6+I

>&<%:%2%>*I%+<)**%,)+2)I<3)I:1<1&)I%7I72>&"I>+9I?)&"I!>9I:6&IG)6G*)QLW $A ()*!%+, -=RLT4 $%7<&%!1<)9 [6**)2<%?) E+<)**%,)+2)M /3) l)<86&' ]: E9)>7@3<<GMQQ)9,)A6&,Q&)7G6+7)I9)<>%*Q=jLhS

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 6/25

<3>< ?>&%617 !%, E/ 26;G>+%)7 %+ <3) Z%*%26+ P>**)" >&) >*&)>9" )+,>,)9 %+!1%*9%+, 71G)&I%+<)**%,)+< ;>23%+)7A E< 8>7 >*76 &)2)+<*" &)G6&<)9 <3>< B>%91@ <3)[3%+)7) 7)>&23 )+,%+)@ 8>+<)9 <6 !1%*9 > 5[3%+> B&>%+ Y&6C)2<5@ >+9 8>7 *66'%+,:6& 7%,+%:%2>+< :%+>+2%>* 26+<&%!1<%6+7 !" <3) ;%*%<>&"ALb /3)&):6&)@ <6 !)26;G)<%<%?)@ 96 8) +))9 <6 7>2&%:%2) 61& G&%?>2" :6& > 762%)<"I7G>++%+, B%, $><>

>+9 $))G i)>&+%+, G&6C)2< <6 G&)9%2< <3) :1<1&) 6: <3) 86&*9f X7 8%** !)26;)2*)>& *><)& 6+@ E 96+c< <3%+' 76@ !)2>17) B%, $><> >GG&6>23)7 >+9 <3) *)>&+%+, 6::>2<7 :&6; <3) G>7< >&) 171>**" !>9 > G&)9%2<%+, :1+9>;)+<>* 73%:<7 >7 <3)" 6221&>< 762%)<>* <%GG%+, G6%+<7@ 83%*) <3%7 %7 83>< 8) ;>%+*" +))9 <6 2>&) >!61<A /3)26;!%+><%6+ 6: )HG*>+><6&" ;69)*7 8%<3 *%<<*) -!1< &%,3< '%+9 6:4 9><> %7 6:<)+71G)&%6&ALh /3%7 2>+ 9)*%?)& > !)<<)& 9)72&%G<%6+ 6: ;>2&6I*)?)* 762%)<>* >+9)26+6;%2 23>+,)@ >7 E 8%** 7368 !)*68@ >+9 %<c7 ;>2&6I*)?)* )::)2<7 <3>< &)>**";><<)&A X99%<%6+>**"@ 6+) 7361*9 %+?)7< %+ <66*7 <3>< >**68 6+) <6 &)?)>*;)23>+%7;7 :6& <3) ;>+>,);)+< >+9 9)7%,+ 6: !)<<)& 7"7<);7A Z123 %++6?><%?)76*1<%6+7@ <66@ 2>++6< !) :61+9 !" ;%+%+, 9><> 6: <3) G>7< >+9 *)>&+%+, G><<)&+7

%+ <3);AH%;38'3$7% A%#.,"("1$%3 ',/ E8/1$,1 &" @',$=8('&% ?,/$7$/8'( 5%#$3$",3

Y)&76+>* 9><> 6: >** '%+97 >&) +68 !)%+, 26**)2<)9 !" ;>+" 26;G>+%)7@ ;67< 6:83%23 >&) +6< 8)**I'+68+ <6 <3) G1!*%2A `3%*) 8) 71&: <3) E+<)&+)<@ )?)&" 7%+,*)2*%2' %7 &)26&9)9 !" 266'%)7@ 71G)&I266'%)7 >+9 6<3)& G&62)77)7@ ;67<*" 8%<361<61& 26+7)+<A /3)7) 9><> >&) 8%9)*" <&>9)9@ )?)+ <361,3 <3%7 6:<)+ ?%6*><)7>GG*%2>!*) *>87A B" +68@ <3)&) >&) >!61< _@RRR <6 T@RRR G)&76+>* &)26&97 6: ;6&)6& *)77 )?)&" %+9%?%91>* %+ <3) %+917<&%>*%F)9 86&*9A /3)7) 9><> ;>') %< G677%!*)<6 ;>G <3) 8>" )>23 G)&76+ <3%+'7 >+9 :))*7A /3)%& 2*%2'7 861*9 +6< 6+*"G&6912) > 1+%d1) :%+,)&G&%+< %9)+<%:"%+, <3); -G)&3>G7 )?)+ 83)+ 71&:%+,>+6+";617*"4A /3)" 861*9 >*76 &)?)>* <3) G6*%<%2>* G>&<" <3)" >&) *%')*" <6 ?6<):6& -)?)+ <361,3 <3) >+6+";617 ?6<) %7 >+ %;G6&<>+< !>7%7 6: 9);62&>2%)74A/3)%& ,66,*) 7)>&23)7 861*9 :1&<3)&;6&) &)?)>* <3) *%')*" >2<%6+7 <3)" >&) ,6%+,<6 <>') +)H< -%+2*19%+, *%')*" :%+>+2%>* <&>9)7=R4A /3)&) >&) )?)+ 26;G>+%)7 7123>7 N)26&9)9 D1<1&) >+9 Y>*>+<%& <3>< <&" <6 G&)9%2< :1<1&) %+9%?%91>* !)3>?%6&!>7)9 6+ <3) 9><> >?>%*>!*) >!61< )>23 6: 17A Z123 G&)9%2<%6+7 7)); <6 86&'G&)<<" 8)**@ %+ ;6&) <3>+ hRk 6: >** 2>7)7A E< %7 6:<)+ !)*%)?)9 <3>< <3%7 861*9)?)+<1>**" ;>') <3) :1<1&) 261&7) 6: 61& 762%)<" G&)9%2<>!*) >+9 26+<&6**>!*)A

E+ <3) G>7<@ <3) ><<%<19) 8>7 5+6!69" %7 G)&:)2<@ G)6G*) ;>') ;%7<>')75A l68@

8%<3 <3) G68)& 6: ;69)&+ %+:6&;><%6+ <)23+6*6,%)7@ 76;) '))+ 7<&><),%7<7 36G)<3>< 61& 762%)<" 261*9 !) <1&+)9 %+<6 > G)&:)2< 2*62'86&'A /3) :)>7%!%*%<" 6: <3%7>GG&6>23 %7 >*&)>9" !)%+, <)7<)9A Y)&76+>*%F)9 >9?)&<%7);)+< %7 %+ :>2< <&"%+, <6;>+%G1*><) G)6G*)c7 236%2)7@ !>7)9 6+ <3) 9)<>%*)9 '+68*)9,) 6: > G)&76+@%+2*19%+, 368 3)Q73) <3%+'7@ :))*7@ >+9 &)7G6+97 <6 2)&<>%+ '%+97 6: 7%<1><%6+7A

Lb 3<<GMQQ888A72;GA26;Q*%:)7<"*)Q<)23+6*6,"Q>&<%2*)QLW=bS==Q3)>9I23%+>7I,66,*)I8>+<7I261+<&"I<>')I*)>9I9)?)*6G%+,@ 3<<GMQQ888A8>+<23%+><%;)7A26;Q+)87I71!2*>77I2+<A>7GHf%9g=RLTR_RWRRRRLTp2%9gLLRLLh D6& )H>;G*)@ <3) :6**68%+, >GG&6>23 7));7 71G)&%6& <6 83>< a66,*) D*1 /&)+97 2>+ 6::)&M $AB&62';>++ >+9 $A ()*!%+,@ /3) 3%99)+ ,)6;)<&" 6: 26;G*)H@ +)<86&'I9&%?)+ 26+<>,%6+

G3)+6;)+>A Z2%)+2) _S=@ L__WIL_S= -=RL_4A=R /A Y&)%7@ (AZA J6><@ >+9 (A.A Z<>+*)"@ o1>+<%:"%+, <&>9%+, !)3>?%6& %+ :%+>+2%>* ;>&')<7 17%+,a66,*) /&)+97A Z2%)+<%:%2 N)G6&<7 _M LjbS -=RL_4A

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 7/25

/3)7) >GG&6>23)7 !)26;) %+2&)>7%+,*" )::)2<%?)@ ;>'%+, 17) 6: !%>7)7 %+ 31;>+9)2%7%6+I;>'%+, >+9 >*76 71!*%;%+>* ;)77>,)7A Z123 <)23+%d1)7 >99&)77 G)6G*)c771!26+72%617+)77@ 7123 <3>< <3)" 861*9 +6< +)2)77>&%*" !) >8>&) 6: <3) &)>76+72>17%+, <3)%& >2<%6+7@ 7%;%*>& <6 >2<%+, 1+9)& 3"G+67%7A

J>+%G1*><%+, G)6G*)c7 236%2)7 %7 >*76 %+2&)>7%+,*" !)%+, 9%72177)9 >7 G6*%2" <66*@2>**)9 5+19,%+,5 6& 576:< G><)&+>*%7;5A=L ()&)@ G)6G*)c7 9)2%7%6+7 >+9 >2<%6+7861*9 !) ;>+%G1*><)9 !" <3) 7<><) <3&61,3 9%,%<>* 9)?%2)7 <6 &)>23 2)&<>%+61<26;)7@ )A,A )+?%&6+;)+<>**" :&%)+9*" 6& 3)>*<3%)& !)3>?%6&@ 6& >*76 2)&<>%+)*)2<%6+ &)71*<7A N)*><)9 )HG)&%;)+<7 >&) !)%+, 2>&&%)9 61< >*&)>9"A== 

 >&&%-=& "4 ' A%#.,"("1F >33%33-%,&

E+ <3) :6**68%+,@ E 8%** 9%72177 76;) 6: <3) 762%>*@ )26+6;%2@ *),>*@ )<3%2>* >+96<3)& %;G*%2><%6+7 6: <3) >!6?) 9%,%<>* <)23+6*6,%)7 >+9 <3)%& 17)A i%') >** 6<3)&<)23+6*6,%)7@ <3) 17) 6: B%, $><>@ X&<%:%2%>* E+<)**%,)+2)@ >+9 l19,%+, 2>+ G&6912)

G6<)+<%>**" 3>&;:1* 7%9) )::)2<7@ !1< %+ <3%7 2>7) <3) %;G>2< 6+ 61& )26+6;" >+9762%)<" ;>" !) ;>77%?)A /6 !)+):%< :&6; <3) 6GG6&<1+%<%)7 6: 9%,%<>* <)23+6*6,%)7>+9 ;%+%;%F) <3)%& &%7'7@ %< 8%** !) +)2)77>&" <6 26;!%+) 2)&<>%+ <)23+6*6,%2>*76*1<%6+7 8%<3 762%>* +6&;7 >+9 *),>* &),1*><%6+7A E+ <3) :6**68%+,@ E ><<);G< <6,%?) > +1;!)& 6: %+%<%>* 3%+<7@ !1< <3) 9%72177%6+ !)*68 2>+ 2)&<>%+*" +6< ,%?) >:1** >2261+< 6: >** %771)7 <3>< +))9 <6 !) >99&)77)9A

H;"I(%-3 D$&. <$1 5'&' >,'(F&$#3

/3) &%7'7 6: B%, $><> >&) ;>+%:6*9A /3) 5&731.$8  6: 9%,%<>* 26;;1+%2><%6+ 3>7!))+ 1+9)&;%+)9A ["!)& 2&%;)@ %+2*19%+, 9><>@ %9)+<%<" >+9 :%+>+2%>* <3):<@ %7

)HG*69%+,@ +68 G&6912%+, >+ >++1>* 9>;>,) 6: <3) 6&9)& 6: _ <&%**%6+ 96**>&7@83%23 %7 )HG6+)+<%>**" ,&68%+,A [&%<%2>* %+:&>7<&12<1&)7 7123 >7 )+)&,"@ :%+>+2%>*>+9 26;;1+%2><%6+ 7"7<);7 >&) <3&)><)+)9 !" 2"!)& ><<>2'7A /3)" 261*9@ %+G&%+2%G*)@ !) ;>9) 9"7:1+2<%6+>* :6& >+ )H<)+9)9 G)&%69 6: <%;)@ <3)&)!"7)&%617*" 9%7&1G<%+, 61& )26+6;" >+9 762%)<"A [6+2)&+7 >!61< 2"!)& 8>&7 >+99%,%<>* 8)>G6+7 -$ 8)>G6+74 >&) d1%2'*" ,&68%+,@ >7 <3)" ;>" !) )?)+ ;6&)9>+,)&617 <3>+ ><6;%2@ !%6*6,%2>* >+9 23);%2>* -XB[4 8)>G6+7A

B)7%9)7 2"!)& &%7'7@ <3)&) %7 > G&)<<" *6+, *%7< 6: 6<3)& G&6!*);7A N)71*<7 6: B%,$><> >+>*"<%27 >&) 6:<)+ <>')+ :6& ,&>+<)9 >+9 6!C)2<%?)A /3%7 %7 9>+,)&617@!)2>17) <3) )::)2<%?)+)77 6: B%, $><> %7 76;)<%;)7 !>7)9 ;6&) 6+ !)*%):7 <3>+ 6+

:>2<7A=_ E< %7 >*76 :>& :&6; 2*)>& <3>< 71&?)%**>+2) 2>;)&>7=S >+9 G&)9%2<%?)

=L NA(A /3>*)& >+9 [ANA Z1+7<)%+ -=RRh4 l19,) -Y)+,1%+ B66'74A== Zm99)1<723) -LLA_A=RLT4 Y6*%<%' G)& Y7"236<&%2'@3<<GMQQ888A71)99)1<723)A9)Q8%&<723>:<Q?)&3>*<)+7:6&7231+,I>;I!1)&,)&IG6*%<%'IG)&IG7"236<&%2'ILA=_bjWTT=_ D6& )H>;G*)@ ;>+" B%, $><> 26;G>+%)7 -)?)+ !%, 6+)74 96+c< ;>') *>&,) G&6:%<7 >+9 76;) >&))?)+ ;>'%+, *677)7A J>'%+, !%, ;6+)" 6:<)+ &)d1%&)7 <6 !&%+, > B%, $><> 26;G>+" <6 <3) 7<62';>&')<@ 6& <6 !) !61,3< !" >+6<3)& 26;G>+"A24 M. Gill and A. Spriggs: Assessing the impact of CCTV. Home Office Research, Development and

Statistics Directorate (2005), https://www.cctvusergroup.com/downloads/file/Martin%20gill.pdf; seealso BBC News (August 24, 2009) 1,000 cameras `solve one crime’,

http://news.bbc.co.uk/2/hi/uk_news/england/london/8219022.stm

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 8/25

G6*%2%+,=T 2>+ &)>**" 7%,+%:%2>+<*" &)912) 6&,>+%F)9 >+9 ?%6*)+< 2&%;) 6& <3><;>77 71&?)%**>+2) %7 ;6&) )::)2<%?) %+ 261+<)&%+, <)&&6&%7; <3>+ 2*>77%2>*%+?)7<%,><%6+ ;)<3697A=j J6&)6?)&@ 6+) 6: <3) ')" )H>;G*)7 6: <3) G68)& 6: B%,$><> >+>*"<%27@ a66,*) D*1 /&)+97@ 3>7 &)2)+<*" !))+ :61+9 <6 ;>') G66&G&)9%2<%6+7A /3%7 %7 G>&<*" !)2>17) >9?)&<%7);)+<7 !%>7 17)& !)3>?%6&7 >+9

7)>&23 >*,6&%<3;7 >&) !)%+, 23>+,)9@ 7123 <3>< <3) &)71*<7 >&) +6< 7<>!*) >+9&)G&6912%!*)A=W E+ :>2<@ B%, $><> 21&><%6+ >+9 2>*%!&><%6+ )::6&<7 >&) 6:<)+ *68A X7> 26+7)d1)+2)@ <3) 1+9)&*"%+, 9><>7)<7 >&) <"G%2>**" +6< &)G&)7)+<><%?) >+9 <3)";>" 26+<>%+ ;>+" )&&6&7A i>7< !1< +6< *)>7<@ B%, $><> >*,6&%<3;7 >&) :&)d1)+<*"17)9 <6 &)?)>* 6G<%;%F><%6+ G6<)+<%>*7@ !1< <3)%& &)71*<7 ;>" !) 1+&)*%>!*) 6& ;>"+6< &):*)2< >+" 2>17>* &)*><%6+73%G7A /3)&):6&)@ 26+2*17%6+7 :&6; B%, $><> >&) +6<+)2)77>&%*" 26&&)2<A

X +>%?) >GG*%2><%6+ 6: B%, $><> >*,6&%<3;7 2>+ )>7%*" *)>9 <6 ;%7<>')7 >+9 8&6+,26+2*17%6+7A /3) )&&6& &><) %+ 2*>77%:%2><%6+ G&6!*);7 -)A,A <3) 9%7<%+2<%6+

!)<8))+ 5,6695 >+9 5!>95 &%7'74 %7 6:<)+ 7%,+%:%2>+<A E771)7 7123 >7 8&6+,9)2%7%6+7 6& 9%72&%;%+><%6+ >&) 7)&%617 G&6!*);7A=b E+ :>2<@ >+<%I9%72&%;%+><%6+*>87 ;>" !) %;G*%2%<*" 1+9)&;%+)9@ >7 &)71*<7 6: B%, $><> >*,6&%<3;7 ;>" %;G*"9%7>9?>+<>,)7 :6& 86;)+@ 3>+9%2>GG)9 G)6G*)@ 6& )<3+%2@ &)*%,%617@ >+9 6<3)&;%+6&%<%)7A /3%7 %7@ !)2>17) %+71&>+2) 6::)&7@ G&6912< G&%2)7 6: E+<)&+)< 736G7@>+9 !>+' *6>+7 %+2&)>7%+,*" 9)G)+9 6+ !)3>?%6&>* ?>&%>!*)7@ >+9 6+ 7G)2%:%27 6:<3) 762%>* )+?%&6+;)+<@ <66A E< ;%,3< 3>GG)+@ :6& )H>;G*)@ <3>< <3) 26+9%<%6+7 6: >G)&76+>* *6>+ 9)G)+9 6+ <3) !)3>?%6& 6: G)6G*) 6+) 3>7 +)?)& ;)<A E+ <3) G>7<@76;) !>+'7 3>?) )?)+ <)&;%+><)9 *6>+7@ 83)+ +)%,3!6&7 3>?) :>%*)9 <6 ;>')<3)%& G>";)+<7 6+ <%;)A=h E+ 6<3)& 86&97@ >7 8) *67) 26+<&6* 6?)& 61& G)&76+>*9><>@ 8) >&) *67%+, 26+<&6* 6?)& 61& *%?)7@ <66A (68 8%** 8) <3)+ !) >!*) <6 <>')

&)7G6+7%!%*%<" :6& 61& *%:) %+ <3) :1<1&)@ %: 8) 2>+c< 26+<&6* %< >+" *6+,)&f

/3%7 !&%+,7 17 <6 <3) G6%+< 6: G&%?>2"A /3)&) >&) > +1;!)& 6: %;G6&<>+< G6%+<7 <6!) 26+7%9)&)9A D%&7< 6: >**@ 71&?)%**>+2) 72>&)7 G)6G*)@ G>&<%21*>&*" ;%+6&%<%)7A X**;%+6&%<%)7 >&) ?1*+)&>!*)@ !1< <3) 7122)77 6: 61& 762%)<" 9)G)+97 6+ <3); -)A,A

=T O61&+>*%7<c7 N)761&2) -l6?);!)& j@ =RLS4 /3) )::)2<%?)+)77 6: G&)9%2<%?) G6*%2%+,M i)776+7:&6; > &>+96;%F)9 26+<&6**)9 <&%>*@ 3<<GMQQC61&+>*%7<7&)761&2)A6&,Q7<19%)7Q,6?)&+;)+<Q2&%;%+>*IC17<%2)QG&)9%2<%?)IG6*%2%+,I&>+96;%F)9I26+<&6**)9I<&%>*A 0.E/ ]+*%+) -=hA_A=RLT4Y&)9%2<%?) Y6*%2%+, I l623 3>< +%);>+9 !)8%)7)+@ 9>77 $><> J%+%+, 9)& Y6*%F)% 3%*:<@3<<GMQQ888AF)%<A9)Q9%,%<>*Q9><)+7231<FQ=RLTIR_QG&)9%2<%?)IG6*%2%+,I76:<8>&)IG6*%F)%IG&)26!726 The Washington Post (January 12, 2014) NSA phone record collection does little to prevent terrorist

attacks, group says, http://www.washingtonpost.com/world/national-security/nsa-phone-record-

collection-does-little-to-prevent-terrorist-attacks-group-says/2014/01/12/8aa860aa-77dd-11e3-8963-

b4b654bcc9b2_story.html?hpid=z4; see also http://securitydata.newamerica.net/nsa/analysis

=W $AJA i>F)& )< >*A /3) Y>&>!*) 6: a66,*) D*1M /&>G7 %+ B%, $><> X+>*"<%27@ Z2%)+2) _S_@ L=R_IL=RT-=RLS4A=b $A ()*!%+, -=RLT4 /3%+'%+, X3)>9@ [3>G<)& LR -ZG&%+,)&@ B)&*%+4A Z)) >*763<<G7MQQ888A:<2A,6?Q+)87I)?)+<7Q)?)+<7I2>*)+9>&Q=RLSQRhQ!%,I9><>I<66*I%+2*17%6+I6&I)H2*17%6+3<<G7MQQ888A83%<)3617)A,6?Q%771)7Q<)23+6*6,"Q!%,I9><>I&)?%)83<<G7MQQ888A83%<)3617)A,6?Q7%<)7Q9):>1*<Q:%*)7Q9627QB%,U$><>UN)G6&<Ul6+);!>&,6U?=AG9:

3<<GMQQ888A87CA26;Q>&<%2*)7QZBLRRRLS=SRT=WR=_RSLWbLRSTWhT_ThWRShWhRbTjR=h /3%7 G&6!*); %7 &)*><)9 8%<3 <3) ;)<369 6: 5,)6726&%+,5@ 7))3<<GMQQ888A'&)9%<:6&1;A+)<Q'&)9%<81)&9%,')%<I1+9I,)6726&%+,A3<;*Q

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 9/25

G6*%<%2%>+7@ )+<&)G&)+)1&7@ %+<)**)2<1>*74A X7 <3) 5P6*'7Fq3*1+,71&<)%*5_R 26&&)2<*"26+2*19)7@ <3) 26+<%+1617 >+9 1+26+<&6**)9 &)26&9%+, 6: 9><> >!61< %+9%?%91>*!)3>?%6&7 %7 1+9)&;%+%+, 23>+2)7 6: G)&76+>*@ !1< >*76 762%)<>* 9)?)*6G;)+<AZ62%)<" +))97 %++6?><%6+ <6 >9C17< <6 23>+,) -7123 >7 9);6,&>G3%2@)+?%&6+;)+<>*@ <)23+6*6,%2>* 6& 2*%;><) 23>+,)4A (68)?)&@ %++6?><%6+ +))97 >

21*<1&>* 7)<<%+, <3>< >**687 <6 )HG)&%;)+< >+9 ;>') ;%7<>')7A_L E+ :>2<@ ;>+":1+9>;)+<>* %+?)+<%6+7 3>?) !))+ ;>9) !" >22%9)+< 6& )?)+ ;%7<>') -Y6&2)*>%+@:6& )H>;G*)@ &)71*<)9 :&6; ><<);G<7 <6 G&6912) ,6*94A X ,*6!>* ;>G 6: %++6?><%6+2*)>&*" 73687 <3>< :1+9>;)+<>* %++6?><%6+ ;>%+*" 3>GG)+7 %+ :&)) >+99);62&><%2 762%)<%)7A_= .HG)&%;)+<%+, %7 >*76 +))9)9 <6 !)26;) >+ >91*< 836 %7>!*) <6 C19,) 7%<1><%6+7 >+9 <>') &)7G6+7%!*) 9)2%7%6+7A

/3)&):6&)@ 762%)<" +))97 <6 !) &1+ %+ > 8>" <3>< %7 <6*)&>+< <6 ;%7<>')7A B1< <69>"6+) ;>" ,)< > 7G))9 <%2')< :6& 3>?%+, !))+ L';Q3 <66 :>7< -7)) !)*684A E+ :1<1&)@%+ 61& 6?)&I&),1*><)9 86&*9@ 6+) ;%,3< ,)< <%2')<7 :6& >*;67< >+"<3%+,A__ B%, $><>

861*9 ;>') %< G677%!*) <6 9%726?)& >+9 7>+2<%6+ >+" 7;>** ;%7<>')A E+ <3) eZX@<3)&) >&) >*&)>9" LR <%;)7 ;6&) G)6G*) %+ G&%76+ <3>+ %+ .1&6G) ->+9 ;6&) <3>+%+ [3%+> >+9 N177%>@ <664A E7 <3%7 61& :1<1&)@ >+9 96)7 %< 3>?) >+"<3%+, <6 96 8%<3<3) :&)) 762%)<" 8) 17)9 <6 *%?) %+f (68)?)&@ %: 8) 861*9 G1+%73 6+*" > 7>;G*) 6:G)6G*) ;>'%+, ;%7<>')7@ 368 861*9 <3%7 !) 26;G><%!*) 8%<3 :>%&+)77f `61*9+c<<3%7 )+9 %+ >&!%<&>&%+)77 >+9 1+9)&;%+) C17<%2)f X+9 861*9+c< <3) G&%+2%G*) 6:>771;)9 %++62)+2) !) ,6+)@ 83%23 %7 !>7)9 6+ <3) %9)> <3>< <3) ;>C6&%<" 6: 17>&) ,669 2%<%F)+7@ >+9 6+*" > :)8 >&) ;>*%2%617 >+9 <6 !) :61+9 ,1%*<"f

e+9)&;%+%+, G&%?>2" 2>+c< 86&' 8)**A E< d1)7<%6+7 <&17< %+ <3) 2%<%F)+7@ >+9 <3%71+9)&;%+)7 <3) 2%<%F)+7c <&17< %+ <3) ,6?)&+;)+<@ 83%23 %7 <3) !>7%7 6: %<7

*),%<%;>2" >+9 G68)&A /3) 7>"%+, <3>< 5<&17< %7 ,669@ !1< 26+<&6* %7 !)<<)&5 %7 +6<)+<%&)*" 26&&)2<M 26+<&6* 2>++6< :1**" &)G*>2) <&17<A_S X 8)**I:1+2<%6+%+, >+9)::%2%)+< 762%)<" +))97 > 71%<>!*) 26;!%+><%6+ 6: !6<3A

5Y1!*%25 8%<361< 5G&%?><)5 861*9+c< 86&' 8)**A Y&%?>2" G&6?%9)7 6GG6&<1+%<%)7 <6)HG*6&) +)8 %9)>7 >+9 76*1<%6+7A E< 3)*G7 <6 &)26?)& :&6; <3) 7<&)77 6: 9>%*">9>G<><%6+ >+9 &)912)7 26+:*%2< %+ > 9)+7) G6G1*><%6+ 6: G)6G*) 8%<3 9%?)&7)G&):)&)+2)7 >+9 21*<1&>* !>2',&61+97A

Y1!*%2 >+9 G&%?><) >&) <86 7%9)7 6: <3) 7>;) ;)9>*A E: )?)&"<3%+, %7 G1!*%2@ <3%78%** )?)+<1>**" 1+9)&;%+) 762%>* +6&;7A_T ]+ <3) *6+, &1+@ <3) 26+7)d1)+2)

_R 3<<GMQQ9)A8%'%G)9%>A6&,Q8%'%QP6*'7Fk[_kXS3*1+,71&<)%*_L /3) Z%*%26+ P>**)" %7 8)**I'+68+ :6& <3%7 '%+9 6: 21*<1&)A_= XA J>F*61;%>+ )< >*A a*6!>* ;1*<%I*)?)* >+>*"7%7 6: <3) c72%)+<%:%2 :669 8)!c@ Z2%)+<%:%2 N)G6&<7 _MLLjW -=RL_4@ 3<<GMQQ888A+><1&)A26;Q7&)GQ=RL_QL_RL_RQ7&)GRLLjWQ:1**Q7&)GRLLjWA3<;*f;)77>,)I,*6!>*g&);6?)__ OA Z23;%)9)& -=RL_4 J%< )%+); B)%+ %; \+>7< I J)%+ P)&7123@ )%+ O>3& *>+, ,)7)<F)7<&)1 F1*)!)+ -B)&<)*7;>++4A_S $)<*): D)<23)+3>1)&@ Z%H &)>76+7 83" "61 7361*9 !) ;6&) <&17<:1*@ /.$H a&6+%+,)+@3<<G7MQQ888A"61<1!)A26;Q8><23f?g,0*F[2TWdrS

_T XA $%)';>++@ `A Y&F)G%6&'>@ >+9 (A N>131<@ i%:<%+, <3) ?)%* 6: %,+6&>+2)M X+ )HG)&%;)+< 6+ <3)26+<>,%617+)77 6: +6&; ?%6*><%6+7@ G&)G&%+<3<<GMQQ2)77A+1::A6HA>2A1'Q9621;)+<7Q$Y=RLLQ[.ZZU$Y=RLLURRSAG9:

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 10/25

261*9 !) > 73>;)*)77 762%)<"@ 6& %: >+" 9)?%><%6+ :&6; )7<>!*%73)9 +6&;7 %77>+2<%6+)9@ > <6<>*%<>&%>+ 762%)<"A

999 ("/ ! '(5 (7$3(008 "*$ &2&" $%& /1.2&1999

/3)&):6&)@ 83%*) <3) )::)2<7 6: ;>77 71&?)%**>+2) >+9 G&%?>2" %+<&17%6+ >&) +6<%;;)9%><)*" ?%7%!*)@ <3)" ;%,3< 7<%** 2>17) > *6+,I<)&; 9>;>,) !" 1+9)&;%+%+,<3) :>!&%2 6: 61& 762%)<"M 762%>* +6&;7 >+9 21*<1&)A E< %7 3%,3*" d1)7<%6+>!*)83)<3)& <3) )26+6;%2 !)+):%<7 861*9 &)>**" 61<8)%,3< <3%7@ >+9 83)<3)& >26+<&6*I!>7)9 9%,%<>* 762%)<" 861*9 86&' >< >**A E &><3)& )HG)2< 7123 762%)<>*)HG)&%;)+<7 <6 )+9 %+ 9%7>7<)&A

H;"I(%-3 D$&. >;&$4$#$'( ?,&%(($1%,#% ',/ !8=%;G?,&%(($1%,#%JK 

/3) ,*6!>*%F><%6+ >+9 +)<86&'%+, 6: 61& 86&*9 3>7 2>17)9 > *)?)* 6:%+<)&9)G)+9)+2" >+9 26;G*)H%<" <3>< +6 %+9%?%91>* 2>+ :1**" ,&>7GA /3%7 *)>97 <6<3) >8'8>&9 7%<1><%6+ <3>< )?)&" 6+) 6: 17 7))7 6+*" G>&< 6: <3) G%2<1&)@ 83%233>7 G&6;6<)9 <3) %9)> <3>< 8) 7361*9 3>?) >&<%:%2%>* 71G)&I%+<)**%,)+2)7 <3>< ;>"!) >!*) <6 6?)&*66' <3) )+<%&) '+68*)9,) 6: <3) 86&*9A (68)?)&@ *)>&+%+, 7123

_j l6<) <3>< 71G)&I%+<)**%,)+< ;>23%+)7 ;>" !) 7))+ >7 >+ %;G*);)+<><%6+ 6: <3) 26+2)G< 6: <3)58%7) '%+,5A (68)?)&@ >7 E >; 7>"%+, )*7)83)&)@ <3%7 %7 +6< > 71%<>!*) >GG&6>23 <6 ,6?)&+ 26;G*)H762%)<%)7 -7)) >*76 <3) 9&>:< 23>G<)&7 6: ;" !66' 6+ <3) $%,%<>* Z62%)<" >< 3<<GMQQ888A77&+A26;>+9 3<<G7MQQ:1<1&%2<A!*6,7G6<A26;@ G>&<%21*>&*" <3) 23>G<)& 6+ <3) [6;G*)H%<" /%;) B6;!M

3<<GMQQG>G)&7A77&+A26;Q76*_QG>G)&7A2:;f>!7<&>2<U%9g=TR=TTh4A [6;!%+><6&%>* 26;G*)H%<" ;17<!) >+78)&)9 !" 26;!%+><6&%>*@ %A)A 26**)2<%?) %+<)**%,)+2)@ >+9 <3%7 +))97 G)&76+>* 9%,%<>*>77%7<>+<7 >+9 71%<>!*) %+:6&;><%6+ G*><:6&;7 :6& 266&9%+><%6+A

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 11/25

'+68*)9,) -+6< C17< <3) :>2<7@ !1< >*76 <3) %;G*%2><%6+74 ;%,3< G&6,&)77 ;6&)7*68*" <3>+ 61& 86&*9 23>+,)7 >+9 31;>+ '+68*)9,) G&6,&)77)7A_W 

E< %7 >*76 %;G6&<>+< <6 26+7%9)& <3>< <3) ;)>+%+, 6: 9><> 9)G)+97 6+ 26+<)H<A /3%7!)26;)7 G>&<%21*>&*" 2*)>& :6& >;!%,1617 26+<)+<A /3)&):6&)@ *%') 61& 68+ !&>%+@

>+ >&<%:%2%>* %+<)**%,)+2) !>7)9 6+ 9))G *)>&+%+, 8%** 76;)<%;)7 7)) 7G1&%61726&&)*><%6+7@ >+9 %< 8%** G&6!>!*" 3>?) 76;) G&)C19%2)7@ <66A

e+:6&<1+><)*"@ 3>?%+, ;6&) %+:6&;><%6+ <3>+ 31;>+7 ->7 26,+%<%?) 26;G1<)&73>?) %< <69>"4 96)7+c< ;)>+ <6 !) 6!C)2<%?) 6& &%,3<A /3) G&6!*); 6: 56?)&I:%<<%+,5@ >226&9%+, <6 83%23 <3)&) %7 > <)+9)+2" <6 :%< ;)>+%+,*)77@ &>+96;G><<)&+7 %+ <3) 9><> %7 C17< 6+) G677%!*) %771)A /3) G&6!*);7 6: G>&>;)<)&7)+7%<%?%<" 6& 6: 523>6<%25 6& 5<1&!1*)+<5 7"7<); 9"+>;%27 8%** &)7<&%2<G677%!%*%<%)7 <6 G&)9%2< :1<1&) )?)+<7@ <6 >77)77 21&&)+< 7%<1><%6+7@ 6& )?)+ <6%9)+<%:" <3) 26&&)2< ;69)* G>&>;)<)&7 9)72&%!%+, G>7< )?)+<7A_b $)7G%<) <3)7)

26+7<&>%+<7@ > 9><>I9&%?)+ >GG&6>23 861*9 >*8>"7 9)*%?)& 76;) 61<G1<@ !1< <3%7;%,3< !) C17< >+ 56G%+%6+5 6: >+ %+<)**%,)+< ;>23%+) &><3)& <3>+ > :>2<A /3%7!)26;)7 2*)>& %: 8) >771;) <6 &1+ <86 %9)+<%2>* 71G)&I%+<)**%,)+< ;>23%+)7 %+9%::)&)+< G*>2)7A X7 <3)" >&) +6< :)9 8%<3 )H>2<*" <3) 7>;) %+:6&;><%6+@ <3)"861*9 3>?) 9%::)&)+< *)>&+%+, 3%7<6&%)7@ >+9 861*9 76;)<%;)7 26;) <6 9%::)&)+<26+2*17%6+7A Z6@ 71G)&I%+<)**%,)+2) %7 +6 ,1>&>+<)) <6 :%+9 > 76*1<%6+ <3><26&&)7G6+97 <6 <3) <&1<3A_h X+9 83>< %: > 71G)&I%+<)**%,)+< ;>23%+) 2><23)7 >?%&17 >+9 ,)<7 76;)<3%+, *%') > 5!&>%+ 9%7)>7)5f

/3) ,&)><)7< G&6!*); %7 <3>< 8) ;%,3< !) <);G<)9 <6 >GG*" G68)&:1* <66*7 7123>7 71G)&I%+<)**%,)+< ;>23%+)7 <6 73>G) 61& 762%)<" >< *>&,)A X7 %< !)2>;) 6!?%617

>!6?)@ 71G)&I%+<)**%,)+2)7 861*9 ;>') ;%7<>')7@ <66@ !1< <3) &)71*<%+, 9>;>,);%,3< !) ;123 *>&,)& >+9 )?)+ 9%7>7<&617A B)7%9)7 <3%7@ 71G)&I%+<)**%,)+2)7;%,3< );>+2%G><) <3);7)*?)7 >+9 !)26;) 1+26+<&6**>!*)A /3)" ;%,3< >*76 7<>&<<6 >2< %+ <3)%& 68+ %+<)&)7<@ 6& *%)A

J67< %;G6&<>+<*"@ G68)&:1* <66*7 8%** >*8>"7 ><<&>2< G)6G*) 7<&%?%+, :6& G68)&@%+2*19%+, 6&,>+%F)9 2&%;%+>*7@ )H<&);%7<7@ >+9 <)&&6&%7<7A /3%7 %7 G>&<%21*>&*"26+2)&+%+, !)2>17) <3)&) %7 +6 LRRk &)*%>!*) G&6<)2<%6+ >,>%+7< 7)&%617 ;%717)AX< <3) =RLT `.D ;))<%+,@ J%73> a*)++" 7>%9M 5/3)&) >&) <86 <"G)7 6: 26;G>+%)7%+ <3) 86&*9M <367) <3>< '+68 <3)"c?) !))+ 3>2')9@ >+9 <367) <3>< 96+c<5ASR E+:>2<@ )?)+ 26;G1<)& 7"7<);7 6: ;>+" ;>C6& 26;G>+%)7@ <3) eZ ;%*%<>&"@ <3)Y)+<>,6+ >+9 <3) `3%<) (617) 3>?) !))+ 3>2')9 %+ <3) G>7<@ +6< <6 <>*' >!61<<3) G&6!*); 6: 9><> *)>'7AAA /3)&):6&)@ <3) ,&68%+, 26+2)&+7 &),>&9%+, !1%*9%+,>+9 17%+, 71G)&I%+<)**%,)+2)7 7)); <6 !) *>&,)*" C17<%:%)9A

_W N););!)& <3>< %< <>')7 >!61< = 9)2>9)7 :6& > 31;>+ <6 !) &)>9" :6& &)7G6+7%!*)@ 7)*:I9)<)&;%+)9 !)3>?%6&A B):6&)@ 368)?)&@ 3)Q73) ;>" 96 > *6< 6: 7<1G%9 <3%+,7 ->+9 <3%7 ;>">2<1>**" 3>GG)+ *><)&@ <664A_b EA \6+96&@ ZA Y>:'>@ >+9 aA l>,"@ l6%7) 7)+7%<%?%<" 6: G6&<:6*%6 7)*)2<%6+ 1+9)& ?>&%617 &%7';)>71&)7@ O61&+>* 6: B>+'%+, p D%+>+2) _L-T4@ LTSTILTW_ -=RRW4A_h E<c7 d1%<) %+7%,3<:1* <6 3>?) <86 G36+)7 <>*' <6 )>23 6<3)&@ 17%+, XGG*)c7 Z%&% >77%7<>+<@ 7)) )A,A

<3%7 ?%9)6M 3<<G7MQQ888A"61<1!)A26;Q8><23f?g`1rTRh!rPU8SR 3<<GMQQ888A!&>%+"d16<)A26;Qd16<)7Qd16<)7Q;Q;%73>,*)++TjSRWjA3<;*@ 7)) >*763<<GMQQ888A!17%+)77%+7%9)&A26;Q:!%I9%&)2<6&I23%+>I3>7I3>2')9I)?)&"I!%,I17I26;G>+"I=RLSILR

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 12/25

H;"I(%-3 D$&. -',$=8('&$7% LM=%;38'3$7%MN &%#.,"("1$%3OB 

/3) 17) 6: %+:6&;><%6+ <)23+6*6," %7 23>+,%+, 61& !)3>?%6&A /3%7 :>2< %+?%<)7G6<)+<%>* ;%717)@ <66AS= Z62%)<"I72>*) )HG)&%;)+<7 8%<3 ;>+%G1*><%?)<)23+6*6,%)7 >&) *%')*" <6 3>?) 7)&%617 7%9) )::)2<7A E+ G>&<%21*>&@ %+:*1)+2%+,

G)6G*)c7 9)2%7%6+I;>'%+, 1+9)&;%+)7 <3) G&%+2%G*) 6: <3) 58%796; 6: 2&68975@S_ 6+ 83%23 9);62&><%2 9)2%7%6+I;>'%+, >+9 >*76 <3) :1+2<%6+%+, 6: :%+>+2%>*;>&')<7 %7 !>7)9A D6& <3) 58%796; 6: 2&68975 <6 86&'@ 6+) &)d1%&)7 71::%2%)+<*"8)** )912><)9 G)6G*) 836 ,><3)& >+9 C19,) %+:6&;><%6+ 7)G>&><)*" >+9 ;>')<3)%& 9)2%7%6+7 %+9)G)+9)+<*"A E+:*1)+2%+, G)6G*)c7 9)2%7%6+7 8%** %+2&)>7) <3)*%')*%3669 6: ;%7<>')7@ 83%23 ;%,3< !) 267<*"A J6&)6?)&@ <3) %+:6&;><%6+ !>7%7;>" ,)< 76 !%>7)9 6?)& <%;) <3>< +6 6+)@ %+2*19%+, ,6?)&+;)+< %+7<%<1<%6+7 >+9%+<)**%,)+< ;>23%+)7@ ;%,3< !) >!*) <6 ;>') &)*%>!*) C19,;)+<7A

.*% Y>&%7)& &>%7)9 > &)*><)9 %771)@ 83%23 3) 2>**)9 <3) 5:%*<)& !1!!*)5A X7 8)

%+2&)>7%+,*" *%?) %+ > 86&*9 6: G)&76+>*%F)9 %+:6&;><%6+@ 8) >&) *)77 >+9 *)7726+:&6+<)9 8%<3 %+:6&;><%6+ <3>< 96)7+c< :%< 61& !)*%):7 >+9 <>7<)A `3%*) <3%72&)><)7 > :))*%+, <6 *%?) %+ <3) 86&*9 8) *%')@ 8) 8%** *67) >8>&)+)77 6: 6<3)&G)6G*)c7 +))97 >+9 <3)%& G6%+<7 6: ?%)8A `3)+ 26+:&6+<)9 8%<3 <3);@ 8) ;>" :>%*<6 26;;1+%2><) >+9 %+<)&>2< 26+7<&12<%?)*"A D6& )H>;G*)@ <3) eZ G6*%<%2>* 7"7<);7));7 <6 %+2&)>7%+,*" 71::)& :&6; <3) %+>!%*%<" 6: &)G1!*%2>+7 >+9 9);62&><7 <6;>') 26;G&6;%7)7 <3>< >&) ,669 :6& <3) 261+<&"A `3)+ >+>*"F%+, <3)%& G6*%<%2>*9%7261&7) 6+ 2)&<>%+ 71!C)2<7@ %< <1&+7 61< <3>< <3)" 96+c< C17< 3>?) 9%::)&)+<6G%+%6+7@ !1< <3)" >*76 17) 9%::)&)+< 86&97@ 7123 <3>< <3)&) %7 *%<<*) 23>+2) <69)?)*6G > 73>&)9 1+9)&7<>+9%+, 6: > G&6!*);ASS /3)&):6&)@ 76;) ;69)&+%+:6&;><%6+ 7"7<);7 3>?)+c< ;>9) %< )>7%)& <6 ,6?)&+ > 261+<&" I 6+ <3) 26+<&>&"A

E+ G)&7G)2<%?)@ ;>+%G1*><%?) <)23+6*6,%)7 ;>" !) 7))+ >7 ><<);G<7 <6 5G&6,&>;5G)6G*)A Z6;) 2&689 761&2%+, <)23+%d1)7 7123 >7 <3) 7)&?%2)7 G&6?%9)9 !"J)23>+%2>* /1&' 26;) >*&)>9" G&)<<" 2*67) <6 <3%7A ()&)@ G)6G*) G%2' 1G C6!7 6:>** '%+97@ 83%23 ;>" C17< <>') > :)8 ;%+1<)7A D6& )H>;G*)@ "61 ;>" 3>?) > LRRRG>,) ;>+1>* <&>+7*><)9 %+ > 9>"@ !" !&)>'%+, %< 968+ %+<6 71::%2%)+<*" ;>+"

SL E+ 6<3)& G*>2)7 -3<<GMQQ:1<1&%2<A!*6,7G6<A26;Q=RLSQLRQ2&"7<>*I!>**I>+9I;>,%2I8>+9<3)A3<;*4@E 3>?) ;)<>G36&%2>**" 26;G>&)9 <3)7) <)23+6*6,%)7 8%<3 > 5;>,%2 8>+95 -50>1!)&7<>!54A /3)G&6!*); 8%<3 <3)7) <)23+6*6,%)7 %7M <3)" >&) G68)&:1*@ !1< %: 8) 96+c< 17) <3); 8)**@ <3)%& 17)

2>+ )+9 %+ 9%7>7<)&A X +%2) G6); %**17<&><%+, <3%7 %7 /3) Z61&2)&)&c7 XGG&)+<%2) !" O63>++`6*:,>+, ?6+ a6)<3)M 3<<GMQQ,)&;>+7<6&%)7A?21A)91Q,6)<3)QF>1!)&U91>*A3<;*@3<<GMQQ888A&%<3)&A9)Q>Q9)1<723Q,6)<3)Q9)&IF>1!)&*)3&*%+,QS= D6& )H>;G*)@ %< &)2)+<*" !)2>;) G1!*%2 <3>< D>2)!66' 3>9 &1+ > 31,) )HG)&%;)+< <&"%+, <6;>+%G1*><) G)6G*)c7 ;669M 3<<GMQQ888A<3)><*>+<%2A26;Q<)23+6*6,"Q>&23%?)Q=RLSQRhQ:>2)!66'7I;669I;>+%G1*><%6+I)HG)&%;)+<I;%,3<I!)I%**),>*Q_bRWLWQ /3%7 2&)><)9 > !%, 573%<7<6&;5M 3<<GMQQ888A87CA26;Q>&<%2*)7Q:1&6&I)&1G<7I6?)&I:>2)!66'I)HG)&%;)+<I6+I17)&7ILSRSRbTbSRA (68)?)&@ %< 8>7 >*76 ><<);G<)9 <6 %+:*1)+2) G)6G*)c7 ?6<%+, !)3>?%6&M3<<GMQQ888A+FFA23Q%+<)&+><%6+>*Q'>;G:I1;I9)+I,*>)7)&+)+I8>)3*)&ILALbTRLjTj ]'[1G%9)?)+ <&%)9 <6 ;>+%G1*><) G)6G*)c7 G&%?><) );6<%6+7M 3<<GMQQ888A<3),1>&9%>+A26;Q<)23+6*6,"Q=RLSQC1*Q=hQ6'21G%9I)HG)&%;)+<I31;>+I!)%+,7I9><%+, E< %7 >*76 !)%+, 7>%9 <3>< )>23 6: 61& `)!7)>&23)7 +68 <&%,,)&7 >!61< =RR )HG)&%;)+<7A S_ OA i6&)+F )< >*A (68 762%>* %+:*1)+2) 2>+ 1+9)&;%+) <3) 8%796; 6: 2&689 )::)2<@ Y&62))9%+,7 6:

<3) l><%6+>* X2>9);" 6: Z2%)+2) 6: <3) eZX LRb -==4@ hR=RIhR=T -=RLL4V 7)) >*76 OA Z1&68%)2'%-=RRT4 /3) `%796; 6: [&6897 -X+236&4ASS Z)) J>&2 Z;%<3c7 >+>*"7)7 6: G6*%<%2>* 9%7261&7) 8%<3 l69)riM 3<<GMQQ+69)H*A269)G*)HA26;Q

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 13/25

;%2&6I<&>+7*><%6+ C6!7AST E+ G&%+2%G*)@ 368)?)&@ 6+) 261*9 <3%+' 6: >+"<3%+,@ >+9G)6G*) ;%,3< +6< )?)+ !) >8>&) 6: <3) 61<26;) <3)" >&) C6%+<*" G&6912%+,ASj 

E;G6&<>+<*"@ ;>+%G1*><%6+ %+2>G>2%<><)7 G)6G*)@ >+9 %< ;>')7 <3); *)77 2>G>!*)6: 76*?%+, G&6!*);7 !" <3);7)*?)7ASW ]+ <3) 6+) 3>+9@ <3%7 ;)>+7 <3>< <3)"

%+2&)>7%+,*" *67) 26+<&6* 6: <3)%& C19,;)+<7 >+9 9)2%7%6+I;>'%+,A ]+ <3) 6<3)&3>+9@ 836 7361*9 !) 3)*9 &)7G6+7%!*) :6& ;%7<>')7 <3>< >&) !>7)9 6+;>+%G1*><)9 9)2%7%6+7f /3) 6+) 836 <66' <3) 8&6+, 9)2%7%6+ 6& <3) 6+) 836;>9) 3%; 6& 3)& <>') <3) 8&6+, 9)2%7%6+f Y&6!>!*" <3) *><<)&@ G>&<%21*>&*" >731;>+ !&>%+7 2>+ 9)2&)>7%+,*" '))G 1G 8%<3 <3) G)&:6&;>+2) 6: 26;G1<)&7"7<);7 -<3%+'@ :6& )H>;G*)@ 6: 3%,3I:&)d1)+2" <&>9%+,4A

D%+>**"@ 8) ;17< !) >8>&) 6: >+6<3)& %;G6&<>+< %771)A Z6;) '))+ 7<&><),%7<7!)*%)?) <3>< ;>+%G1*><%?) <)23+6*6,%)7 861*9 !) G)&:)2< <66*7 <6 2&)><) > 762%)<"<3>< 86&'7 *%') > G)&:)2< ;>23%+)A /3) %9)> !)3%+9 <3%7 %7 >7 :6**687M X 71G)&I

%+<)**%,)+< ;>23%+) 861*9 <&" <6 :%,1&) 61< >+ 6G<%;>* 76*1<%6+ <6 > 2)&<>%+G&6!*);@ >+9 %< 861*9 <3)+ <&" <6 %;G*);)+< %< 17%+, G1+%73;)+< 6&;>+%G1*><%6+@ 6& !6<3A E+ <3%7 26+<)H<@ 6+) 7361*9 )?>*1><) >,>%+ 83>< G1&G67)7&)2)+< )9%<%6+7 6: 7)21&%<" *>87 -7123 >7 <3) BsYD4 ;%,3< !) 17)9 :6&@ !)7%9)7:%,3<%+, <&1) <)&&6&%7<7A E< %7 2)&<>%+*" 26+2)&+%+, %: G)6G*) 2>+ !) G1< <6 C>%* :6&26+<)+<7 6+ <3)%& 26;G1<)& 3>&9 9%7'7@ 83%*) >< <3) 7>;) <%;) 3>&9 9%7'7 >&)'+68+ <6 3>?) !>2' 966&7@ >+9 7)2&)< 7)&?%2)7 >&) >**68)9 <6 968+*6>9;><)&%>*7 <6 <3);A /3%7 )+>!*)7 7)&%617 ;%717)@ !1< %< >*76 d1)7<%6+7 83)<3)&3>&9 9%7' 26+<)+<7 2>+ !) 7<%** >22)G<)9 >7 )?%9)+2) >< 261&<A

]: 261&7)@ 6+) ;17< >7'@ 83)<3)& %< 861*9 !) &)>**" G677%!*) <6 &1+ > 762%)<" !" >

26;!%+><%6+ 6: 71&?)%**>+2)@ ;>+%G1*><%6+ >+9 26)&2%6+A /3) >+78)& %7M G&6!>!*"")7@ !1< ,%?)+ <3) 26;G*)H%<" 6: 61& 86&*9@ E )HG)2< <3%7 861*9 +6< 86&' 8)** >+9+6< :6& *6+,A ]+) ;%,3< <3)&):6&) 7>" <3><@ %+ 26;G*)H 762%)<%)7@ <3) <%;)7 83)&)> 58%7) '%+,5 6& 5!)+)?6*)+< 9%2<><6&5 261*9 7122))9 >&) ,6+)ASb B1< <3)&) %7 <3)7)&%617 9>+,)& <3>< 76;) >;!%<%617 G)6G*) ;%,3< 7<%** <&" <6 %;G*);)+< <3)26+2)G< >+9 <>') 9&>7<%2 ;)>71&)7 %+ 9)7G)&><) ><<);G<7 <6 7122))9A J%+6&%<%)7@836 >&) 6:<)+ 7))+ <6 G&6912) 51++)2)77>&" 26;G*)H%<"5@ 861*9 G&6!>!*" ,)<1+9)& G&)771&)ASh /3%7 861*9 &)912) 762%>*@ 21*<1&>* >+9 )26+6;%2 9%?)&7%<"A

X7 > 26+7)d1)+2)@ <3%7 861*9 )?)+<1>**" *)>9 <6 > 762%6I)26+6;%2 59%?)&7%<"26**>G7)5@ %A)A ;>+" G)6G*) 861*9 )+9 1G !)3>?%+, 7%;%*>&*"A `3%*) <3%7 ;>">GG)>& :>?6&>!*) <6 76;) G)6G*)@ 6+) ;17< &)26,+%F) <3>< 9%?)&7%<" %7 <3) !>7%7

ST JA B*669,669 >+9 [A [>**%76+IB1&23@ e7%+, J)23>+%2>* /1&' <6 !1%*9 ;>23%+) <&>+7*><%6+)?>*1><%6+ 7)<7@ 3<<GMQQ888A2%7A1G)++A)91Qt22!QG1!*%2><%6+7Q17%+,I;)23>+%2>*I<1&'I<6I!1%*9I;>23%+)I<&>+7*><%6+I)?>*1><%6+I7)<7AG9:Sj E+ >+ )H<&);) 2>7)@ <3%7 ;%,3< )?)+ !) > 2&%;%+>* >2<ASW E+<)&)7<%+,*"@ :6& EBJ `><76+ -<3) %+<)**%,)+< 26,+%<%?) 26;G1<)&4 <6 86&' 8)**@ %< ;17< !) :)98%<3 +6+I!%>7)9 &><3)& <3>+ 8%<3 7)*:I26+7%7<)+< %+:6&;><%6+@ %A)A G&)I7)*)2<%+, %+G1<7 <6 ,)< &%9 6:26+<&>9%2<6&" %+:6&;><%6+ &)912)7 ̀ ><76+c7 G)&:6&;>+2)ASb E< 7));7@ :6& )H>;G*)@ <3>< <3) ><<);G<7 6: <3) 86&*9c7 71G)&G68)& <6 )H<)+9 %<7 G68)&7 3>?)&><3)& 8)>')+)9 %<M 8) >&) +68 *%?%+, %+ > ;1*<%IG6*>& 86&*9A [6)&2%6+ 86&'7 %+2&)>7%+,*" *)77A

Z)) <3) 9&>:< 23>G<)&7 6: ;" !66' 6+ <3) $%,%<>* Z62%)<" >< 3<<GMQQ77&+A26; :6& ;6&) %+:6&;><%6+ASh )?)+ <361,3 6+) +)?)& '+687 !):6&) 83>< '%+97 6: %9)>7 >+9 762%>* ;)23>+%7;7 ;%,3< !)26;)%;G6&<>+< %+ <3) :1<1&) I %++6?><%6+ >*8>"7 7<>&<7 8%<3 ;%+6&%<%)7

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 14/25

6: %++6?><%6+@ )26+6;%2 9)?)*6G;)+<@TR 762%)<>* &)7%*%)+2)@ 26**)2<%?)%+<)**%,)+2)@ >+9 %+9%?%91>* 3>GG%+)77A /3)&):6&)@ 762%6I)26+6;%2 >+9 21*<1&>*9%?)&7%<" ;17< !) G&6<)2<)9 %+ > 7%;%*>& 8>" >7 8) 3>?) *)>&+)9 <6 G&6<)2<!%69%?)&7%<"ATL 

X*<6,)<3)&@ %< %7 ;6&) >GG&6G&%><) <6 26;G>&) > 762%>* 6& )26+6;%2 7"7<); <6 >+)267"7<); <3>+ <6 > ;>23%+)A E< <3)+ !)26;)7 2*)>& <3>< > &)912<%6+ 6: 9%?)&7%<"26&&)7G6+97 <6 <3) *677 6: !%6*6,%2>* 7G)2%)7 %+ >+ )267"7<);A E+ <3) 86&7< 2>7)@<3) )267"7<); 261*9 26**>G7)A B" >+>*6,"@ <3) 762%>* 6& )26+6;%2 7"7<); 861*9*67) G)&:6&;>+2) >+9 !)26;) *)77 :1+2<%6+>*A /3%7 %7 83>< <"G%2>**" 3>GG)+7 %+<6<>*%<>&%>+ &),%;)7@ >+9 %< 6:<)+ )+97 8%<3 8>&7 >7 > &)71*< 6: ><<);G<7 <6261+<)& <3) 7"7<);%2 %+7<>!%*%<" 2>17)9 !" > 9%?)&7%<" 26**>G7)AT= 

E+ 26+2*17%6+@ <6 26G) 8%<3 9%?)&7%<"@ )+,>,%+, %+ %+<)&6G)&>!%*%<" %7 *>&,)*"71G)&%6& <6 7<>+9>&9%F><%6+ ><<);G<7A /3>< %7 83" E >; 71,,)7<%+, !)*68 <6

9)?)*6G G)&76+>* 9%,%<>* >77%7<>+<7 <3>< 3)*G <6 2&)><) !)+):%<7 :&6; 9%?)&7%<"A

6%#"--%,/'&$",3

E >; > 7<&6+, 71GG6&<)& 6: 17%+, 9%,%<>* <)23+6*6,%)7 <6 2&)><) +)8 !17%+)776GG6&<1+%<%)7 >+9 <6 %;G&6?) 762%)<>* 8)**I!)%+,A /3)&):6&)@ E <3%+' 6+)7361*9+c< 7<6G <3) 9%,%<>* &)?6*1<%6+A -Z123 ><<);G<7 861*9 >+"8>" :>%*@ ,%?)+<3>< >** 261+<&%)7 >&) )HG67)9 <6 3>&73 %+<)&+><%6+>* 26;G)<%<%6+A4 (68)?)&@ *%')8%<3 )?)&" <)23+6*6,"@ <3)&) >&) >*76 G6<)+<%>**" 7)&%617 7%9) )::)2<7@ >+9 <3)&) %7> 91>* 17) G&6!*);A

E: 8) 17) 9%,%<>* <)23+6*6,%)7 %+ <3) 8&6+, 8>"@ %< 261*9 !) 9%7>7<&617 :6& 61&)26+6;"@ )+9%+, %+ ;>77 1+);G*6";)+< >+9 )26+6;%2 9)G&)77%6+AE&&)7G6+7%!*) 17)7 261*9 >*76 !) !>9 :6& 61& 762%)<"@ G6<)+<%>**" )+9%+,-%+<)+<%6+>**" 6& +6<4 %+ ;6&) 6& *)77 <6<>*%<>&%>+ &),%;)7 8%<3 *%<<*) %+9%?%91>*:&))96;7AT_ /3)&) >&) >*76 7)&%617 7)21&%<" %771)7 91) <6 )HG6+)+<%>**"%+2&)>7%+, 2"!)& 2&%;)@ 83%23 %7 G>&<%>**" &)*><)9 <6 <3) 36;6,)+)%<" 6: 61&21&&)+< E+<)&+)<@ <3) *>2' 6: !>&&%)&7 -:6& <3) 7>') 6: )::%2%)+2"4@ >+9 <3)!>2'966&7 %+ ;>+" 3>&9I >+9 76:<8>&) 7"7<);7A

B%, $><> G&6912)7 :1&<3)& <3&)><7A E< 2>+ !) 17)9 <6 &1%+ G)&76+>* 2>&))&7 >+9

26;G>+%)7@ !1< >*76 <6 *>1+23 2"!)& 8>&7ATS

 X7 8) 96+c< >**68 >+"6+) <6 68+ >+12*)>& !6;! 6& <6 9&%?) > 2>& 8%<361< !&)>'7 >+9 6<3)& 7>:)<" )d1%G;)+<@ 8);17< &),1*><) >+9 26+<&6* <3) 17) 6: B%, $><>@ <66@ %+2*19%+, <3) 17) 6: B%, $><>

TR [AXA (%9>*,6 )< >*A /3) G&6912< 7G>2) 26+9%<%6+7 <3) 9)?)*6G;)+< 6: +><%6+7@ Z2%)+2) _LW@ Sb=ISbW -=RRW4A X226&9%+, <6 Om&,)+ J%;')7@ )26+6;%2 G&6,&)77 -83%23 ,6)7 >*6+, 8%<3 >+ %+2&)>7)%+ 26;G*)H%<"4 >*76 9&%?)7 > <&>+7%<%6+ :&6; >1<62&><%2 <6 9);62&><%2 ,6?)&+>+2) >!6?) > 2)&<>%+,&677 96;)7<%2 G&6912< G)& 2>G%<>A E+ [3%+>@ <3%7 <&>+7%<%6+ %7 )HG)2<)9 <6 3>GG)+ 766+A51 /3%7 %7 <3) ;>%+ &)>76+ 83" 6+) 7361*9 71GG6&< G*1&>*%7;AT= Z)) <3) 9&>:< 23>G<)&7 6: $A ()*!%+,c7 !66' 6+ <3) $%,%<>* Z62%)<" >< 3<<GMQQ888A77&+A26;@G>&<%21*>& <3) 23>G<)& 6+ <3) [6;G*)H%<" /%;) B6;!T_ ]+) ;%,3< 9%7<%+,1%73 <3)7) %+<6 <86 <"G)7M 9%2<><6&73%G7 !>7)9 6+ 71&?)%**>+2) -5B%, B&6<3)&54

>+9 ;>+%G1*><6&73%G7 -5B%, J>+%G1*><6&54ATS X7 9%,%<>* 8)>G6+7@ 76I2>**)9 $I8)>G6+7@ >&) 2)&<>%+*" +6< *)77 9>+,)&617 <3>+ ><6;%2@!%6*6,%2>* >+9 23);%2>* -XB[4 8)>G6+7@ <3)" 861*9 &)d1%&) %+<)&+><%6+>* &),1*><%6+ >+9 26+<&6*A

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 15/25

!" ,6?)&+;)+<7 >+9 7)2&)< 7)&?%2)7A /3%7 7));7 <6 &)d1%&) > 71::%2%)+< *)?)* 6:<&>+7G>&)+2"@ 6<3)&8%7) %< %7 3>&9 <6 C19,) :6& >+"6+) 83)<3)& 8) 2>+ <&17< 712317)7 >+9 83>< >&) <3) 9>+,)&7A

6%#"--%,/'&$",3 ;%1';/$,1 <$1 5'&'

/3) 17) 6: B%, $><> 7361*9 ;))< 2)&<>%+ d1>*%<" 7<>+9>&97A /3%7 %+2*19)7 <3):6**68%+, >7G)2<7M

•  Z)21&%<" %771)7 ;17< !) G>%9 ;6&) ><<)+<%6+ <6A Z)+7%<%?) 9><> ;17< !)!)<<)& G&6<)2<)9 :&6; %**),%<%;><) >22)77 >+9 17)@ %+2*19%+, 3>2'%+, 6:G)&76+>* 9><>A D6& <3%7@ ;6&) >+9 !)<<)& 9><> )+2&"G<%6+ ;%,3< !)+)2)77>&"A

•  Z<6&%+, *>&,) >;61+<7 6: 7)+7%<%?) 9><> %+ 6+) G*>2)@ >22)77%!*) 8%<3 >7%+,*) G>7786&9 >GG)>&7 <6 !) 9>+,)&617A [6+2)G<7 7123 >7 9%7<&%!1<)99><> 7<6&>,) >+9 G&62)77%+, >&) >9?%7)9A

• 

E< 7361*9 +6< !) G677%!*) :6& > G)&76+ 68+%+, 6& 86&'%+, %+ > B%, $><>26;G>+" 6& 7)2&)< 7)&?%2) <6 *66' %+<6 G)&76+>* 9><> %+ 1+>1<36&%F)98>"7 -<3%+' 6: <3) i6?)El/ >::>%&@ 83)&) 7)2&)< 7)&?%2) 7<>:: 8>7 7G"%+,6+ <3)%& G>&<+)&7 6& )HIG>&<+)&7TT4A

•  E+:6&;><%6+>* 7)*:I9)<)&;%+><%6+ -%A)A <3) 26+<&6* 6: 836 17)7 83><G)&76+>* 9><> :6& 83>< G1&G67)4 %7 +)2)77>&" :6& %+9%?%91>*7 <6 '))G26+<&6* 6: <3)%& *%?)7 >+9 !) >!*) <6 <>') &)7G6+7%!%*%<" :6& <3)%& >2<%6+7A

•  E< 7361*9 !) )>7" :6& 17)&7 <6 )H)&2%7) <3)%& &%,3< 6: %+:6&;><%6+>* 7)*:I9)<)&;%+><%6+@ 83%23 2>+ !) 96+) !" ;)>+7 6: Y)&76+>* $><> Z<6&)7@ >79)?)*6G)9 !" <3) JE/Tj >+9 ?>&%617 26;G>+%)7A J%2&676:< 7));7 <6 !)86&'%+, 6+ > 3>&98>&)I!>7)9 76*1<%6+A

• 

E< ;17< !) G677%!*) >+9 &)>76+>!*" )>7" <6 26&&)2< 8&6+, G)&76+>* 9><>A•  X7 B%, $><> >+>*"<%27 6:<)+ &)71*<7 %+ ;)>+%+,*)77 G><<)&+7 >+9 7G1&%617

26&&)*><%6+7@ :6& <3) 7>') 6: 6!C)2<%?%<" >+9 %+ 6&9)& <6 26;) <6 &)*%>!*)26+2*17%6+7@ %< 861*9 !) ,669 <6 ?%)8 %<7 &)71*<7 >7 3"G6<3)7)7 >+9 <6?)&%:" 6& :>*7%:" <3); 8%<3 9%::)&)+< >GG&6>23)7 >:<)&8>&97A

•  E< ;17< !) )+71&)9 <3>< 72%)+<%:%2 7<>+9>&97 >&) >GG*%)9 <6 <3) 17) 6: B%,$><>A D6& )H>;G*)@ 6+) 7361*9 &)d1%&) <3) 7>;) *)?)* 6: 7%,+%:%2>+2) <3><%7 9);>+9)9 %+ 7<><%7<%27 >+9 :6& <3) >GG&6?>* 6: ;)9%2>* 9&1,7A

•  /3) &)G&6912%!%*%<" 6: &)71*<7 6: B%, $><> >+>*"<%27 ;17< !) 9);>+9)9A•  X 71::%2%)+< *)?)* 6: <&>+7G>&)+2" >+9Q6& %+9)G)+9)+< d1>*%<" 26+<&6* %7

+))9)9 <6 )+71&) <3>< d1>*%<" 7<>+9>&97 >&) ;)<A• 

E< ;17< !) ,1>&>+<))9 <3>< >GG*%2>!*) >+<%9%72&%;%+><%6+ *>87 >&) +6<%;G*%2%<*" 1+9)&;%+)9 >+9 ?%6*><)9A

•  E< ;17< !) G677%!*) <6 23>**)+,) >+9 23)2' <3) &)71*<7 6: B%, $><>>+>*"<%27A

•  .::%2%)+< G&62)91&)7 >&) +))9)9 <6 26;G)+7><) %+9%?%91>*7 >+926;G>+%)7 :6& %;G&6G)& 9><> 17)@ G>&<%21*>&*" :6& 1+C17<%:%)99%7>9?>+<>,)7A

TT 7)) 3<<GMQQ888A8>73%+,<6+G67<A26;Q!*6,7Q<3)I78%<23Q8GQ=RL_QRbQ=SQ*6?)%+<I83)+I+7>I6::%2)&7I17)I<3)%&I7G"%+,IG68)&I6+I*6?)I%+<)&)7<7QTj 3<<GMQQ6G)+G97A;)9%>A;%<A)91Q

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 16/25

•  Z)&%617 ?%6*><%6+7 6: 26+7<%<1<%6+>* &%,3<7 >+9 >GG*%2>!*) *>87 7361*9 !)26+:&6+<)9 8%<3 )::)2<%?) 7>+2<%6+7A

•  /6 ;6+%<6& G6<)+<%>* ;%717) >+9 :6& <3) 7>') 6: <&>+7G>&)+2"@ <3)G&62)77%+, 6: 7)+7%<%?) 9><> -7123 >7 G)&76+>* 9><>4 7361*9 G&6!>!*" !)>*8>"7 *6,,)9A

• 

N)>G%+, G&%?><) !)+):%<7 >< <3) 267< 6: 6<3)&7 6& <3) G1!*%2 ;17< !)7>+2<%6+)9A

•  X7 :6& 3>+9*%+, 9>+,)&617 ,6697@ G6<)+<%>**" 7)+7%<%?) 9><> 6G)&><%6+77361*9 &)d1%&) G>&<%21*>& d1>*%:%2><%6+7 >+9 > <&>2' &)26&9 6: &)7G6+7%!*)!)3>?%6& -83%23 ;%,3< !) %;G*);)+<)9 !" ;)>+7 6: 7G)2%>* '%+97 6:&)G1<><%6+ 7"7<);74A

E< ;17< !) 2*)>& <3>< 9%,%<>* <)23+6*6,%)7 8%** 6+*" <3&%?) %: <3)" >&) 17)9 %+ >&)7G6+7%!*) 8>"A D6& 26;G>+%)7@ <3) <&17< 6: 26+71;)&7 >+9 17)&7 %7 %;G6&<>+<<6 ,>%+ >+9 ;>%+<>%+ > *>&,) 217<6;)& !>7)A D6& ,6?)&+;)+<7@ G1!*%2 <&17< %7 <3)

!>7%7 6: *),%<%;>2" >+9 G68)&A i67%+, <&17< 861*9@ <3)&):6&)@ 2>17) %&&)?62>!*)9>;>,)A

/3) 21&&)+< G&6!*); %7 <3) 17) 6: 23)>G <)23+6*6,"A D6& )H>;G*)@ ;67< 76:<8>&)%7 +6< 8)** <)7<)9 >+9 +6< 7)21&)A /3)&):6&)@ .1&6G) 7361*9 %+?)7< %+ 3%,3Id1>*%<"7)&?%2)7 6: G&6912<7A [6+7%9)&%+, <3) 9)*>" %+ 9)?)*6G%+, 9><> G&6912<7 >+97)&?%2)7@ .1&6G) ;17< >+"8>" :%+9 > 7<&><)," <3>< 9%::)&)+<%><)7 %<7)*: :&6; %<726;G)<%<6&7 -83%23 261*9 %+2*19) >+ 6G)+ 9><> >+9 6G)+ %++6?><%6+ 7<&><),"@<66TW4A

J67<@ %: +6< >** :1+2<%6+>*%<" 21&&)+<*" G&6912)9 8%<3 9%,%<>* <)23+6*6,%)7

-%+2*19%+, 2)&<>%+ G&)9%2<%?) 5[&"7<>* B>**5 :1+2<%6+>*%<"Tb4 2>+ !) >*76 6!<>%+)9%+ 9%::)&)+< 8>"7@ G>&<%21*>&*" %+ 8>"7 <3>< >&) 26;G><%!*) 8%<3 26+7<%<1<%6+>*>+9 9><> G&6<)2<%6+ *>87Th -7)) >*76 <3) Z1;;>&"@ [6+2*17%6+@ >+9 $%72177%6+4A/3%7 ;>" 26;) >< 3%,3)& 267<7 >+9 7*%,3<*" &)912)9 )::%2%)+2"@ !1< %< ;%,3< !)23)>G)& 6?)&>** <3>+ &%7'%+, 26+7%9)&>!*) 9>;>,) -<3%+' 6: <3) *677 6: _ <&%**%6+96**>&7 !" 2"!)&2&%;) )>23 ")>& >+9 26+7%9)& <3>< <3%7 +1;!)& %7 7<%**)HG6+)+<%>**" %+2&)>7%+,4A N););!)& >*76 <3>< 8) 3>?) %;G67)9 7>:)<"&)d1%&);)+<7 6+ +12*)>&@ 23);%2>*@ ,)+)<%2@ >+9 6<3)& <)23+6*6,%)7 -7123 >7 2>&7>+9 G*>+)74 :6& ,669 &)>76+7A E+ G>&<%21*>&@ E !)*%)?) <3>< 8) 7361*9+c< ->+9861*9+c< +))9 <64 ,%?) 1G <3) ?)&" %;G6&<>+< G&%+2%G*) 6: %+:6&;><%6+>* 7)*:I

9)<)&;%+><%6+ %+ 6&9)& <6 1+*)>73 <3) ?>*1) 6: G)&76+>* 9><>A E+:6&;><%6+>* 7)*:I26+<&6* %7 6: ')" %;G6&<>+2) <6 '))G 9);62&>2"@ %+9%?%91>* :&))96;@ >+9&)7G6+7%!%*%<" :6& 61& *%?)7A /6 &)>23 2><>*"<%2 >+9 7"+)&," )::)2<7@ E 7<&6+,*"

TW 3<<GMQQ36&%F6+I;>,>F%+)A)1Q>&<%2*)Q6G)+I9><>I261*9I<1&+I)1&6G)I7I9%,%<>*I9)7)&<I9%,%<>*I&>%+:6&)7<IG&6:I9%&'I3)*!%+,U)+A3<;*@ 3<<G7MQQ)2A)1&6G>A)1Q9%,%<>*I>,)+9>Q)+Q,&68<3IC6!7Q6G)+I%++6?><%6+Tb 3<<GMQQ888A9):)+7)6+)A26;Q<)23+6*6,"Q=RLTQRSQ2>+I;%*%<>&"I;>')IG&)9%2<%6+I;>23%+)QLRhTjLQTh $A ()*!%+, >+9 ZA B>*%)<<%@ D&6; 762%>* 9><> ;%+%+, <6 :6&)2>7<%+, 762%6I)26+6;%2 2&%7)7@ .1&A

Y3"7A O ZG)2%>* /6G%27 LhT@ _Ijb -=RLL4V 7)) >*76 3<<GMQQ888AF)%<A9)Q9%,%<>*Q9><)+7231<FQ=RLTIR_Q9><)+7231<F?)&6&9+1+,IF8)2'!%+91+,I9><)+7G>&7>;')%<V3<<GMQQ888A,66,*)A26;QG><)+<7QeZbhRhTSj

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 17/25

>9?%7) <6 )+,>,) %+ 21*<1&>**" :%<<%+, 17)7 6: E+:6&;><%6+ >+9 [6;;1+%2><%6+/)23+6*6,%)7 -E[/4A

E+ 6&9)& <6 >?6%9 7*68%+, 968+ !)+):%2%>* 9><> >GG*%2><%6+7 <66 ;123@ 6+) ;%,3<<3%+' 6: 26+<%+1617*" %+2&)>7%+, 7<>+9>&97A Z6;) +)8 *>87 >+9 &),1*><%6+7

;%,3< !)26;) >GG*%2>!*) 8%<3%+ = 6& _ ")>&7 <%;)@ <6 ,%?) 26;G>+%)7 >71::%2%)+<*" *6+, <%;) <6 >9C17< <3)%& G&6912<7 >+9 6G)&><%6+A J6&)6?)&@ %< 861*9!) 17):1* <6 3>?) 76;) 6G)+ <)23+6*6," 7<>+9>&97 7123 <3>< >** 26;G>+%)7 ->*767;>** >+9 ;)9%1;I7%F)9 6+)74 3>?) > 23>+2) <6 ;))< +)8 &)d1%&);)+<7 8%<3&)>76+>!*) )::6&<A N)d1%&%+, > 9%::)&)+<%><)9 '%+9 6: %+<)&6G)&>!%*%<" 261*9 !) 6:,&)>< !)+):%<A

6%#"--%,/'&$",3 ;%1';/$,1 @'#.$,% 0%';,$,1 ',/ >;&$4$#$'( ?,&%(($1%,#%

J69)&+ 9><> >GG*%2><%6+ ,6 !)"6+9 B%, $><> >+>*"<%27 <68>&97 -7);%I4>1<6;><%2

7"7<);7@ 83%23 <"G%2>**" 6::)& G677%!%*%<%)7 :6& 17)&7 <6 26+<&6* 2)&<>%+ 7"7<);G>&>;)<)&7 -!1< 76;)<%;)7 <3)&) %7 C17< <3) G677%!%*%<" <6 <1&+ <3) >1<6;><%2 6&<3) 7"7<); 6::4A X1<6G%*6< 7"7<);7@ 3%,3I:&)d1)+2" <&>9%+,@ >+9 7)*:I9&%?%+, 2>&7>&) 8)**I'+68+ )H>;G*)7A `61*9 8) %+ :1<1&) )?)+ 7)) >+ >1<6;><%6+ 6: 762%)<"@%+2*19%+, >+ >1<6;><)9 ?6<%+, !" 9%,%<>* >,)+<7 ;%&&6&%+, 61&7)*?)7fjR 

X1<6;><)9 6& >1<6+6;617 7"7<);7 >&) 6:<)+ +6< > LRR G)&2)+< 26+<&6**>!*)@ >7<3)" ;>" 6G)&><) >< > 7G))9 <3>< 31;>+7 2>++6< 26;G)<) 8%<3A ]+) ;17< >*76&)>*%F) <3>< <69>"c7 >&<%:%2%>* %+<)**%,)+< 7"7<);7 >&) +6< :1**" G&6,&>;;)9A /3)"*)>&+@ >+9 <3)" ;>" <3)&):6&) !)3>?) %+ 8>"7 <3>< 3>?) +6< !))+ <)7<)9 !):6&)A.?)+ %: <3)%& 26;G6+)+<7 861*9 !) G&6,&>;;)9 *%+) !" *%+) >+9 861*9 !)

<36&61,3*" <)7<)9 8%<361< 7368%+, >+" 7%,+7 6: )&&6&@ <3) %+<)&>2<%6+ 6: <3)7"7<); 26;G6+)+<7 ;>" *)>9 <6 1+)HG)2<)9 !)3>?%6&7A D6& )H>;G*)@ <3%7 %7 6:<)+<3) 2>7) 83)+ > 2>& 8%<3 76G3%7<%2><)9 )*)2<&6+%2 7"7<);7 73687 71&G&%7%+,!)3>?%6& -7123 >7 7199)+*" +6< 6G)&><%+, >+";6&)4A E+ :>2<@ 1+)HG)2<)9-5);)&,)+<54 !)3>?%6& %7 > <"G%2>* :)><1&) 6: ;>+" 26;G*)H 9"+>;%2>* 7"7<);7A

/3) !)+):%<7 6: %+<)**%,)+< *)>&+%+, 7"7<);7 2>+ 2)&<>%+*" !) 31,)A (68)?)&@ 8);17< 1+9)&7<>+9 <3>< <3)" 8%** 76;)<%;)7 ;>') ;%7<>')7@ <66@ )?)+ 83)+>1<6;><)9 7"7<);7 >&) 71G)&%6& <6 31;>+ <>7' G)&:6&;>+2)A /3)&):6&)@ 6+)7361*9 ;>') > &)>76+>!*) )::6&< <6 )+71&) <3>< ;%7<>')7 !" >+ >1<6;><)9 7"7<);>&) 61<8)%,3<)9 !" %<7 !)+):%<7A J6&)6?)&@ G677%!*) 9>;>,)7 7361*9 !)71::%2%)+<*" 7;>** 6& &>&)@ %A)A >22)G<>!*) <6 762%)<"A E+ G>&<%21*>&@ 7123 9>;>,)77361*9 +6< G67) >+" *>&,)I72>*) <3&)><7 <6 2&%<%2>* %+:&>7<&12<1&)7@ 61& )26+6;"@6& 61& 762%)<"A X7 > 26+7)d1)+2)@ E G&6G67) <3) :6**68%+,M

•  X *),>* :&>;)86&' :6& >1<6;><)9 <)23+6*6,%)7 >+9 %+<)**%,)+< ;>23%+)7 %7+)2)77>&"A X1<6+6;" +))97 <6 26;) 8%<3 &)7G6+7%!%*%<"@ 6<3)&8%7) 6+);>" d1%2'*" )+9 %+ >+>&23" >+9 23>67A

jR 3<<G7MQQ888A"61<1!)A26;Q8><23f?g;]I_"P\1$r7 @3<<G7MQQ888A"61<1!)A26;Q8><23f?g\,PB6!T(E;b

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 18/25

•  [6;G>+%)7 7361*9 !) >2261+<>!*) :6& 9)*%?)&%+, >1<6;><)9 <)23+6*6,%)7<3>< 7><%7:" 2)&<>%+ ;%+%;1; 7<>+9>&97 6: 26+<&6**>!%*%<" >+9 :6&71::%2%)+<*" )912><%+, <3)%& 17)&7 -%: +)2)77>&"4A

•  /3) 17)&7 6: >1<6;><)9 <)23+6*6,%)7 7361*9 !) >2261+<>!*) :6&>GG&6G&%><) )::6&<7 <6 26+<&6* >+9 17) <3); G&6G)&*"A

• 

[6+<%+,)+2" G*>+7 7361*9 !) >?>%*>!*) :6& <3) 2>7) 83)&) >+ >1<6;><)97"7<); ,)<7 61< 6: 26+<&6*A E< 861*9 !) ,669 <6 3>?) > :>**!>2' *)?)* 6&G*>+ B <3>< 2>+ ;>%+<>%+ <3) :1+2<%6+>*%<" 6: <3) 7"7<); >< <3) ;%+%;1;&)d1%&)9 G)&:6&;>+2) *)?)*A

•  E+71&>+2)7 >+9 6<3)& *),>* 6& G1!*%2 ;)23>+%7;7 7361*9 !) G1< %+ G*>2) <6>GG&6G&%><)*" >+9 )::%2%)+<*" 26;G)+7><) <367) 836 3>?) 71::)&)99>;>,)A

• 

Z1G)&I%+<)**%,)+2)7 ;17< !) 8)** ;6+%<6&)9 >+9 7361*9 3>?) %+I!1%*<9)7<&12<%6+ ;)23>+%7;7 %+ 2>7) <3)" ,)< 61< 6: 26+<&6* +)?)&<3)*)77A

•  N)*)?>+< 26+2*17%6+7 6: 71G)&I%+<)**%,)+< 7"7<);7 7361*9 !)

%+9)G)+9)+<*" 23)2')9 ->7 <3)7) 261*9 >*76 ;>') ;%7<>')7@ *%)@ 6& >2<7)*:%73*"4A /3%7 &)d1%&)7 71%<>!*) ?)&%:%2><%6+ ;)<3697@ :6& )H>;G*)@ !>7)96+ 26**)2<%?) %+<)**%,)+2)A (1;>+7 7361*9 7<%** 3>?) G677%!%*%<%)7 <6 C19,)&)26;;)+9><%6+7 6: 71G)&I%+<)**%,)+< ;>23%+)7@ >+9 <6 G1< <3)%&71,,)7<%6+7 %+ > 3%7<6&%2>*@ 21*<1&>*@ 762%>*@ )26+6;%2 >+9 )<3%2>*G)&7G)2<%?)A

•  Z1G)&I%+<)**%,)+< ;>23%+)7 7361*9 !) >22)77%!*) +6< 6+*" <6 ,6?)&+%+,G6*%<%2>* G>&<%)7@ !1< >*76 <6 <3) 6GG67%<%6+ ->+9 <3)%& &)7G)2<%?)*"26;;%77%6+)9 )HG)&<74@ !)2>17) <3) 9%72177%6+ >!61< <3) 236%2) 6: <3),6>* :1+2<%6+ >+9 <3) %;G*%2><%6+ 6: <3%7 236%2) %7 %+)?%<>!*)A /3%7 %7 83)&)G6*%<%27 7<%** )+<)&7 %+ <%;)7 6: )?%9)+2)I 6& 72%)+2)I!>7)9 9)2%7%6+I;>'%+,A

•  /3) >GG*%2><%6+ 6: >1<6;><%6+ 7361*9 >::)2< 71::%2%)+<*" 7;>** G>&<7 6: <3))+<%&) 7"7<); 6+*"@ 83%23 2>**7 :6& 9)2)+<&>*%F)9@ 9%7<&%!1<)9@ ;691*>&>GG&6>23)7 >+9 )+,%+))&)9 !&)>'%+, G6%+<7 <6 >?6%9 2>72>9) )::)2<7A /3%73>7 %;G6&<>+< %;G*%2><%6+7 :6& <3) 9)7%,+ >+9 ;>+>,);)+< 6: >1<6;><)97"7<);7@ G>&<%21*>&*" 6: ,*6!>**" 261G*)9 >+9 %+<)&9)G)+9)+< 7"7<);7AjL 

•  E+ 6&9)& <6 7<>" %+ 26+<&6*@ ,6?)&+;)+<7 ;17< &),1*><) >+9 71G)&?%7) <3)17) 6: 71G)&I%+<)**%,)+2)7 8%<3 <3) 71GG6&< 6: d1>*%:%)9 )HG)&<7 >+9%+9)G)+9)+< 72%)+<%7<7Aj= 

6%#"--%,/'&$",3 ;%1';/$,1 -',$=8('&$7% &%#.,"("1$%3

J>+%G1*><%?) <)23+6*6,%)7 >&) G&6!>!*" <3) ;67< 9>+,)&617 >;6+, <3) ?>&%6179%,%<>* <)23+6*6,%)7 9%72177)9 %+ <3%7 G>G)&@ !)2>17) 8) ;%,3< +6< )?)+ +6<%2)<3) ;>+%G1*><%6+ ><<);G<7A

E+ <3) G>7<@ 8) *%?)9 %+ >+ %+:6&;><%6+IG66& 86&*9A /3)+@ 8) 3>9 )+61,3 <%;) <6>77)77 <3) ?>*1) 6: %+:6&;><%6+@ !1< 8) 9%9 +6< >*8>"7 3>?) )+61,3 %+:6&;><%6+<6 9)2%9) 8)**A `%<3 ;6&) %+:6&;><%6+ -`)! 7)>&23@ `%'%G)9%>@ 9%,%<>* ;>G7@ )<2A4

jL l6<) <3>< <3) 72%)+<%:%2 :%)*9 6: 26;G*)H%<" 72%)+2) 3>7 > *>&,) :1+917 6: '+68*)9,) 368 <6&)>23 ,*6!>**" 266&9%+><)9 &)71*<7 !>7)9 6+ *62>* %+<)&>2<%6+7Aj= X:<)& >**@ 31;>+7 3>?) <6 &),%7<)&@ <66A

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 19/25

6&%)+<><%6+ %7 %+2&)>7%+,*" )>7"A l68@ 368)?)&@ 8) >&) :>2)9 8%<3 > 9><> 9)*1,)>+9 >&) 26+:&6+<)9 8%<3 76 ;123 %+:6&;><%6+ <3>< 8) 2>+c< >77)77 >+9 G&62)77 %<>**A `) >&) !*%+9)9 !" <66 ;123 %+:6&;><%6+@ >+9 <3%7 ;>')7 17 ?1*+)&>!*) <6;>+%G1*><%6+A `) %+2&)>7%+,*" +))9 %+:6&;><%6+ :%*<)&7@ >+9 <3) d1)7<%6+ %7@ 8367361*9 G&6912) <3)7) %+:6&;><%6+ :%*<)&7f X 26;G>+"f ]& <3) 7<><)f

E+ !6<3 2>7)7@ <3%7 ;%,3< 3>?) 7)&%617 %;G*%2><%6+7 :6& 61& 762%)<"@ !)2>17) <3):%*<)&7 861*9 G1&71) G>&<%21*>& %+<)&)7<7 -)A,A <6 ;>H%;%F) 2*%2'7 6+ >97 6& <6;>+%G1*><) G)6G*) %+ :>?6& 6: +><%6+>*%7;4A E+ <3%7 8>"@ 8) ;%,3< ,)< 7<12' %+ >5:%*<)& !1!!*)5Aj_ .?)+ %: <3%7 :%*<)& !1!!*) 861*9 :))* *%') > ,6*9)+ 2>,)@ %< 861*9*%;%< 61& %;>,%+><%6+ >+9 2>G>2%<" 6: %++6?><%6+A J6&)6?)&@ ;%7<>')7 2>+ >+98%** >*8>"7 3>GG)+@ )?)+ %: !)7< )::6&<7 <6 &)>23 >+ 6G<%;1; 61<26;) >&) ;>9)A

`3%*) 76;) G&6!*);7 2>+ !) 76*?)9 8)** %+ > 2)+<&>*%F)9 :>73%6+ -%A)A %+ > <6GI968+ 8>"4@ 76;) 6G<%;%F><%6+ G&6!*);7 >&) +6<6&%617*" 3>&9 >+9 !)<<)& 76*?)9%+ > 9%7<&%!1<)9 8>"A E++6?><%6+ %7 6+) 6: <3)7) >&)>7AjS  /3) ;>%+ G&6!*); %7 <3><

$%& 6*5$ +3"/(6&"$(0 F3&5$.*" *+ *=$.6.B($.*" .5 3"5*02&/4 "(6&08 '%($ -*(0 +3"7$.*" $* 7%**5&9 `3)+ > !>9 ,6>* :1+2<%6+ %7 2367)+@ <3%7 8%** 3>?) !>961<26;)7@ !1< 8) ;>" +6<%2) <3%7 6+*" >:<)& ;>+" ")>&7A X7 ;%7<>')7 %+ 23667%+,<3) ,6>* :1+2<%6+ 8%** 71&)*" 76;)<%;)7 3>GG)+@ %< 261*9 )+9 %+ 9%7>7<)& 83)+)?)&"6+) >GG*%)7 <3) 7>;) ,6>* :1+2<%6+AjT 

/3)&):6&)@ 6+) 7361*9 >GG*" 76;)<3%+, *%') > G6&<:6*%6 7<&><),"A e+9)& 7<&6+,*"?>&%>!*) >+9 3>&9*" G&)9%2<>!*) 26+9%<%6+7 > 9%?)&7) 7<&><)," 86&'7 !)7<A/3)&):6&)@ G*1&>*%7<%2 %+:6&;><%6+ :%*<)&%+, %7 +))9)9A E+ 6<3)& 86&97@ 217<6;)&7@17)&7@ >+9 2%<%F)+7 7361*9 !) >!*) <6 2&)><)@ 7)*)2<@ 73>&) >+9 >9>G< <3)%+:6&;><%6+ :%*<)&7 <3)" 17)@ <3)&)!" 2&)><%+, >+ )?6*?%+, )267"7<); 6:

%+2&)>7%+,*" !)<<)& :%*<)&7A E+ :>2<@ )?)&"6+) 861*9 G&6!>!*" !) 17%+, 7)?)&>*9%::)&)+< :%*<)&7 -:6& )H>;G*)@ 5`3><c7 21&&)+<*" ;67< G6G1*>&f5@ 5`3><c7 ;67<26+<&6?)&7%>*f5@ 5`3><c7 <&)+9" %+ ;" G))& ,&61Gf5@ 5Z1&G&%7) ;)u54Ajj E+ 26+<&>7<@%: 8) *)>?) %< <6 > 26;G>+" 6& <3) 7<><) <6 9)2%9) 368 8) 7)) <3) 86&*9@ 8) ;%,3<3>GG)+ <6 )+9 1G 8%<3 !%>7)9 ?%)87@ >+9 <3%7 261*9 *)>9 <6 <)&&%!*) ;%7<>')7A/3%7 261*9@ :6& )H>;G*)@ 1+9)&;%+) <3) 58%796; 6: 2&68975@ 83%23 %7 21&&)+<*"<3) !>7%7 6: :&)) ;>&')<7 >+9 9);62&>2%)7 -8%<3 !)+):%<7 7123 >7 > 3%,3 *)?)* 6:G)&:6&;>+2) v+6< +)2)77>&%*" ,&68<3w@ d1>*%<" 6: *%:)@ >+9 <3) >?6%9>+2) 6:;%7<>')7 7123 >7 8>&7 >;6+, )>23 6<3)&4A

E+ > 86&*9 23>&>2<)&%F)9 !" %+:6&;><%6+ 6?)&*6>9@ 1+!%>7)9 >+9 &)*%>!*)

%+:6&;><%6+ !)26;)7 )?)& ;6&) %;G6&<>+<A ]<3)&8%7) <3) +1;!)& 6: ;%7<>')78%** G&6!>!*" %+2&)>7)A D6& <3) 9%,%<>* 762%)<" <6 7122))9@ 8) ;17< <3)&):6&) <>')7>:),1>&97 >,>%+7< %+:6&;><%6+ G6**1<%6+ >+9 !%>7)7A N)G1<><%6+ 7"7<);7 ;%,3<

j_ .A Y>&%7)& -=RL=4 /3) D%*<)& B1!!*)M (68 <3) l)8 Y)&76+>*%F)9 `)! E7 [3>+,%+, `3>< `)N)>9 >+9 (68 `) /3%+' -Y)+,1%+4AjS Z6;) G&6!*);7 >&) 76 3>&9 <3>< +6 ,6?)&+;)+< >+9 +6 26;G>+" %+ <3) 86&*9 3>?) 76*?)9<3); -)A,A 368 <6 261+<)& 2*%;><) 23>+,)4A i>&,) ;1*<%I+><%6+>* 26;G>+%)7 >&) 6:<)+ 71&G&%7%+,*"8)>' %+ 9)*%?)&%+, :1+9>;)+<>* %++6?><%6+7 -G&6!>!*" !)2>17) <3)" >&) <66 26+<&6**%+,4A /3><c783" <3)" '))G !1"%+, 7;>** >+9 ;)9%1;I7%F)9 26;G>+%)7 <6 26;G)+7><) :6& <3%7 G&6!*);AjT Z%;%*>& G&6!*);7 >&) '+68+ :6& 76:<8>&) G&6912<7 <3>< >&) 17)9 !" !%**%6+7 6: G)6G*)M > 7%+,*)

76:<8>&) !1, 2>+ 2>17) *>&,)I72>*) G&6!*);7 I >+9 <3) 86&&"%+, ?1*+)&>!%*%<" <6 2"!)& ><<>2'7 %7:1&<3)& %+2&)>7%+,Ajj ̀ ) 3>?) 9);6+7<&><)9 7123 >+ >GG&6>23 %+ <3) P%&<1>* O61&+>* G*><:6&; -3<<GMQQ?%C6A%++A>24

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 20/25

!) > 71%<>!*) %+7<&1;)+<@ %: )+61,3 %+:6&;><%6+ G&6?%9)&7 26;G)<) )::%2%)+<*"8%<3 )>23 6<3)& :6& G&6?%9%+, ;6&) &)*%>!*) >+9 ;6&) 17):1* %+:6&;><%6+AX99%<%6+>**"@ *),>* 7>+2<%6+7 ;%,3< !) +)2)77>&" <6 261+<)& %+<)+<%6+>**";%7*)>9%+, %+:6&;><%6+A

[6+7)d1)+<*"@ >9?)&<%7);)+<7 7361*9 !) ;>&')9 >7 7123@ >+9 <3) 7>;) >GG*%)7 <6;>+%G1*><%6+ ><<);G<7 7123 >7 +19,%+,A E+ 6<3)& 86&97@ <3) 17)&@ 217<6;)& 6&2%<%F)+ ;17< !) ,%?)+ <3) G677%!%*%<" <6 26+72%617*" 9)2%9) :6& 6& >,>%+7< > 2)&<>%+9)2%7%6+ 6& >2<%6+@ 6<3)&8%7) %+9%?%91>* >1<6+6;" >+9 &)7G6+7%!%*%<" >&)1+9)&;%+)9A Z%;%*>&*" >7 217<6;)&7 6: ;)9%2>* 9&1,7 >&) 8>&+)9 6: G6<)+<%>*7%9) )::)2<7@ 6+) 7361*9 7<><) 76;)<3%+, *%') 5/3%7 G&6912< %7 ;>+%G1*><%+, "61&9)2%7%6+7 >+9 %7 <&"%+, <6 ;>') "61 !)3>?) %+ > ;6&) 3)>*<3" 8>" -6& %+ >)+?%&6+;)+<>**" :&%)+9*" 8>"@ 6& 83><)?)& %< <&%)7 <6 >23%)?)AAA45A /3) 217<6;)&861*9 <3)+ !) >8>&) 6: <3) *%')*" )::)2<7 6: <3) %+:6&;><%6+ 7)&?%2) >+9 261*9>2<%?)*" 9)2%9) 83)<3)& 3) 6& 73) 8>+<7 <3%7 6& +6<A

l6<)@ 368)?)&@ <3>< %< %7 21&&)+<*" +6< 2*)>& 83>< <3) 7%9) )::)2<7 6: %+2)+<%?%F%+,<3) 17) 6: ;>+%G1*><%?) <)23+6*6,%)7 861*9 !)A E: >GG*%)9 6+ > *>&,) 72>*)@ %<;%,3< !) >*;67< >7 !>9 >7 3%99)+ ;>+%G1*><%6+A $>+,)&617 3)&9%+, )::)2<7 ;%,3<6221& -%+2*19%+, ;>77 G7"236*6," >7 %< 6221&7 %+ 3"G)7@ 7<62' ;>&')< !1!!*)7@1+3)>*<3" *)?)*7 6: +><%6+>*%7;@ 6& <3) G>&<%21*>&*" )H<&);) :6&; %< <66' 91&%+,<3) /3%&9 N)%234A /3)&):6&)@

•  ;>+%G1*><%6+ ><<);G<7 7361*9 !) )>7%*" &)26,+%F>!*)@ )A,A !" &)d1%&%+,

)?)&"6+) <6 ;>&' <3) '%+9 6: %+:6&;><%6+ ->9?)&<%7);)+<@ 6G%+%6+@ 6&

:>2<4@ 

• 

%< ;%,3< !) 17):1* <6 ;6+%<6& ;>+%G1*><%6+ ><<);G<7 >+9 <3)%& )::)2<7@ 

•  <3) )::)2< 7%F) 6: ;>+%G1*><%6+ ><<);G<7 7361*9 !) *%;%<)9 <6 >?6%9

762%)<>* 9%7&1G<%6+7@ 

•  6+) 7361*9 3>?) > G677%!%*%<" <6 6G< 61< :6& :&)) :&6; <3) )HG671&) <6

;>+%G1*><%?) %+:*1)+2)7@ 

•  ;)>71&)7 <6 )+71&) G*1&>*%7; >+9 762%6I)26+6;%2 9%?)&7%<" 7361*9 !)

&)d1%&)9@ 

•  71::%2%)+<*" ;>+" %+9)G)+9)+< %+:6&;><%6+ G&6?%9)&7 8%<3 9%::)&)+< ,6>*7

>+9 >GG&6>23)7 861*9 !) +))9)9 <6 )+71&) >+ )::)2<%?) 26;G)<%<%6+ :6&

;6&) &)*%>!*) %+:6&;><%6+ 7)&?%2)7@•  :6& 26**)2<%?) %+<)**%,)+2) <6 86&'@ 3>?%+, > '+68*)9,) !>7) 6: <&17<>!*)

>+9 1+!%>7)9 :>2<7 %7 ')"@ 7123 <3>< ;)>71&)7 >,>%+7< %+:6&;><%6+

G6**1<%6+ >&) >9?%7)9AjW 

.<3%2>* ,1%9)*%+)7@ 9);>+9%+, 2)&<>%+ d1>*%<" 7<>+9>&97@ >+9 71::%2%)+<<&>+7G>&)+2" ;%,3< >*76 !) +)2)77>&"A ]<3)&8%7)@ <3) *>&,)I72>*) >GG*%2><%6+ 6:;>+%G1*><%?) <)23+6*6,%)7 261*9 %+<)+<%6+>**" 6& 1+%+<)+<%6+>**" 1+9)&;%+) <3)%+9%?%91>* :&))96; 6: 9)2%7%6+I;>'%+, >+9 <3) !>7%7 6: 9);62&>2%)7@ G>&<%21*>&*"

jW E+ :>2<@ <6 >?6%9 ;%7<>')7@ <3) ;6&) 8) >&) :*669)9 8%<3 %+:6&;><%6+ <3) ;6&) ;17< 8) !) >!*)<6 &)*" 6+ %<@ >7 8) 3>?) %+2&)>7%+,*" *)77 <%;) <6 C19,) %<7 d1>*%<"A

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 21/25

83)+ +19,%+, <)23+%d1)7 !)26;) 3%,3*" )::)2<%?) >+9 >&) 17)9 <6 ;>+%G1*><)G1!*%2 6G%+%6+ >< *>&,)Ajb 

!8--';F) 2",#(83$",3 ',/ 5$3#833$",

$%,%<>* <)23+6*6,%)7 6::)& ,&)>< !)+):%<7@ !1< >*76 71!7<>+<%>* &%7'7A /3)" ;>" 3)*G17 <6 76*?) 76;) *6+,I7<>+9%+, G&6!*);7@ !1< <3)" ;>" >*76 2&)><) +)8 >+9 )?)+!%,,)& %771)7A E+ G>&<%21*>&@ %: 8&6+,*" 17)9@ %+9%?%91>* >1<6+6;" >+9 :&))96;@&)7G6+7%!*) 9)2%7%6+I;>'%+,@ 9);62&>2" >+9 <3) !>7%7 6: 61& *),>* 7"7<); >&) ><7<>')A /3) :61+9><%6+7 6+ 83%23 61& 762%)<" %7 !1%*9 ;%,3< !) 9>;>,)9%+<)+<%6+>**" 6& 1+%+<)+<%6+>**" 8%<3%+ > ?)&" 736&< <%;) G)&%69@ 83%23 ;>" +6<,%?) 17 )+61,3 6GG6&<1+%<%)7 <6 G&)G>&) :6& 6& &)7G6+9 <6 <3) 23>**)+,)7A

[1&&)+<*"@ 76;) 6& )?)+ ;67< B%, $><> G&>2<%2)7 ?%6*><) >GG*%2>!*) 9><>G&6<)2<%6+ *>87A ]: 261&7)@ *>87 2>+ !) 23>+,)9@ !1< 76;) 17)7 6: B%, $><> >&)>*76 3%,3*" 9>+,)&617@ >+9 %+26;G><%!*) 8%<3 61& 26+7<%<1<%6+ >+9 21*<1&)A /3)7)

23>**)+,)7 ;17< !) >99&)77)9 !" > 26;!%+><%6+ 6: <)23+6*6,%2>* 76*1<%6+7 -7123>7 G)&76+>* 9><> 7<6&)74@ *),>* &),1*><%6+7@ >+9 762%>* +6&;7A $%7<&%!1<)9 9><>@9%7<&%!1<)9 7"7<);7 >+9 9%7<&%!1<)9 26+<&6*@ 71::%2%)+<*" ;>+" 26;G)<%<6&7 >+971%<>!*" 9)7%,+)9 &)G1<><%6+ 7"7<);7 ;%,3< !) ;67< )::%2%)+< <6 >?6%9 ;%717)7 6:9%,%<>* <)23+6*6,%)7@ !1< <&>+7G>&)+2" ;17< !) %+2&)>7)9 >7 8)**A

.?)+ <361,3 61& )26+6;" >+9 762%)<" 8%** 23>+,) %+ <3) 8>') 6: <3) 9%,%<>*&)?6*1<%6+@ 8) ;17< :%+9 > 8>" <3>< %7 26+7%7<)+< 8%<3 61& ?>*1)7@ 21*<1&)@ >+9<&>9%<%6+7@ !)2>17) <3%7 8%** 2&)><) <3) *>&,)7< 7"+)&," )::)2<7A E+ 6<3)& 86&97@ >[3%+> 6& Z%+,>G6&) ;69)* %7 1+*%')*" <6 86&' 8)** %+ .1&6G)Ajh `) ;17< <>') <3)

+)H< 7<)G %+ 61& 21*<1&>*@ )26+6;%2 >+9 762%)<>* )?6*1<%6+A

E >; 26+?%+2)9 <3>< %< %7 +68 G677%!*) <6 17) 9%,%<>* <)23+6*6,%)7 %+ 8>"7 <3><!&%+, <3) G)&7G)2<%?)7 6: 72%)+2)@ G6*%<%27@ !17%+)77@ 762%)<"@ 21*<1&>* <&>9%<%6+7@)<3%27@ >+9 G)&3>G7 )?)+ &)*%,%6+ <6,)<3)&AWR ZG)2%:%2>**"@ E G&6G67) <6 17) <3)E+<)&+)< 6: /3%+,7 >7 !>7%7 :6& > G>&<%2%G><6&" %+:6&;><%6+ 7"7<); 2>**)9 <3)Y*>+)<>&" l)&?617 Z"7<); 6& l)&?617+)<@ <6 71GG6&< <>%*6&)9 ;)>71&);)+<7@>8>&)+)77@ 266&9%+><%6+@ 26**)2<%?) %+<)**%,)+2)@ >+9 %+:6&;><%6+>* 7)*:I9)<)&;%+><%6+AWL /3) 7"7<); E 71,,)7< 861*9 3>?) > &)7%*%)+< 7"7<);7 9)7%,+ >+9261*9 !) %;>,%+)9 >7 > 31,) 2><>*"7< 6: 762%6I)26+6;%2 ?>*1) ,)+)&><%6+A E<861*9 >*76 71GG6&< &)>*I<%;) :))9!>2'7 <3&61,3 > ;1*<%I9%;)+7%6+>* )H23>+,)

jb /3%7 261*9 )+9 1G %+ > 8>" 6: 6&,>+%F%+, 61& 762%)<" <3>< 6+) 261*9 23>&>2<)&%F) >7 5B%,J>+%G1*><6&5 -<6 !) 9%7<%+,1%73)9 :&6; 5B%, B&6<3)&54Ajh /3) :6**68%+, &)2)+< +)87G>G)& >&<%2*)7 71GG6&< <3%7 26+2*17%6+M3<<GMQQ888AF)%<A9)QG6*%<%'Q>17*>+9Q=RLTIR_Q23%+>I8>237<1;I:1)+:I?6&I>23< @3<<GMQQ!>F6+*%+)A23Q8%&<723>:<Q'6+C1+'<1&Q[3%+>I1)!)&+%;;<I9%)I&6<)Ii><)&+)Q7<6&"Q=RbjhRLW @ 3<<GMQQ888A+FFA23Q%+<)&+><%6+>*Q>7%)+I1+9IG>F%:%'Q7%+,>G1&)&IF)%<&)23+1+,I63+)I*))I'1>+I")8ILALbTLRh_bA E+ :>2<@ !>7)9 6+ > 7<><%7<%2>* >+>*"7%7 6: Om&,)+ J%;')7 >+9 68+6!7)&?><%6+7@ E )HG)2< <3>< [3%+> 8%** +68 1+9)&,6 > ;>C6& <&>+7:6&;><%6+ <68>&97 > ;6&)9);62&><%2 7<><) %+ <3) 26;%+, ")>&7A D%&7< 7%,+7 6: %+7<>!%*%<" 6: <3) 21&&)+< >1<62&><%2 7"7<);>&) ?%7%!*) >*&)>9"@ 7123 >7 <3) %+2&)>7)9 ><<);G<7 <6 26+<&6* %+:6&;><%6+ :*687AWR $A ()*!%+,@ N)7G6+9%+, <6 26;G*)H%<" %+ 762%6I)26+6;%2 7"7<);7M (68 <6 !1%*9 > 7;>&< >+9

&)7%*%)+< 762%)<"f Y&)G&%+< 3<<GMQQG>G)&7A77&+A26;Q76*_QG>G)&7A2:;f>!7<&>2<U%9g=Tb__hLWL $A ()*!%+,@ [&)><%+, -5J>'%+,54 > Y*>+)<>&" l)&?617 Z"7<); >7 [%<%F)+ `)!@3<<GMQQ:1<1&%2<A!*6,7G6<ACGQ=RLSQRhQ2&)><%+,I;>'%+,IG*>+)<>&"I+)&?617A3<;* 

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 22/25

7"7<); -5;1*<%I9%;)+7%6+>* :%+>+2)54A /3%7 >GG&6>23 861*9 >**68 6+) <6;>77%?)*" %+2&)>7) <3) )::%2%)+2" 6: ;>+" 7"7<);7@ >7 %< 861*9 71GG6&< <3) 7)*:I6&,>+%F><%6+ 6: 7<&12<1&)7@ G&6G)&<%)7 >+9 :1+2<%6+7 <3>< 8) 861*9 *%') <6 3>?)@!>7)9 6+ *62>* %+<)&>2<%6+7A /3) 9%7<&%!1<)9 >GG&6>23 E G&6G67) %7 26+7%7<)+<8%<3 %+9%?%91>* >1<6+6;"@ :&)) 9)2%7%6+I;>'%+,@ <3) 9);62&><%2 G&%+2%G*) 6:

G>&<%2%G><%6+@ >7 8)** >7 :&)) )+<&)G&)+)1&%>* >2<%?%<%)7 >+9 ;>&')<7A E+ :>2<@8)>*<3 %7 +6< 6+*" 2&)><)9 !" G&6912%+, )26+6;%)7 6: 72>*) -%A)A 23)>G ;>77G&6912<%6+4@ !1< >*76 !" )+,>,%+, %+ 762%>* %+<)&>2<%6+ -<3><c7 83" 2%<%)7 >&)9&%?)&7 6: <3) )26+6;"W=4A 

/3) G&6G67)9 >GG&6>23 861*9 >*76 26+7%9)& ->+9 G6<)+<%>**" <&>9)4)H<)&+>*%<%)7@ <3)&)!" 71GG6&<%+, 6<3)&I&),>&9%+, >+9 :>%& 76*1<%6+7@ 83%23861*9 !) ,669 :6& 61& )+?%&6+;)+<@ <66A D%+>**"@ )?)&"6+) 261*9 &)>G <3)!)+):%<7 6: 9%?)&7%<" !" 17%+, G)&76+>* 9%,%<>* >77%7<>+<7@ 83%23 861*9 71GG6&<266&9%+><%6+ >+9 266G)&><%6+ 6: 9%?)&7) >2<6&7 >+9 &)912%+, 26+:*%2<A

E+ 26+2*17%6+@ 8) 3>?) <3) 236%2) !)<8))+ <86 '%+97 6: > 9%,%<>* 762%)<"M -L4 >762%)<" %+ 83%23 G)6G*) >&) )HG)2<)9 <6 6!)" >+9 G)&:6&; <>7'7 *%') > &6!6< 6& >,)>&83))* 6: > G)&:)2< ;>23%+)@ 23>&>2<)&%F)9 !" <6GI968+ 26+<&6*@ *%;%<><%6+76: :&))96; >+9 9);62&>2"@ >+9 G6<)+<%>**" *>&,) 1+);G*6";)+<V -=4 >G>&<%2%G><6&" 762%)<" 8%<3 7G>2) :6& 31;>+7 8%<3 76;)<%;)7 71&G&%7%+,!)3>?%6&7 23>&>2<)&%F)9 !" >1<6+6;617 !1< &)7G6+7%!*) 9)2%7%6+I;>'%+,71GG6&<)9 !" G)&76+>* 9%,%<>* >77%7<>+<7@ 83)&) %+:6&;><%6+ %7 6G)+)9 1G <6)?)&"6+)c7 !)+):%<7 %+ 6&9)& <6 &)>G <3) !)+):%<7 6: 9%?)&7%<"@ 2&)><%?%<"@ >+9)HG6+)+<%>* %++6?><%6+A `3>< 762%)<" 861*9 "61 23667)f

/3) D1<1&E[/ 26;;1+%<" -888A:1<1&%2<A)14 3>7 &)2)+<*" 86&')9 61< >:&>;)86&' :6& > 7;>&< 9%,%<>* 762%)<"@ 83%23 %7 6&%)+<)9 >< %+<)&+><%6+>**)>9)&73%G@ )26+6;%2 G&67G)&%<"@ 762%>* 8)**I!)%+,@ >+9 762%)<>* &)7%*%)+2)@ !>7)96+ <3) 8)**I)7<>!*%73)9 G&%+2%G*) 6: 71!7%9%>&%<"A `%<3 %<7 *>&,)*" 9%7<&%!1<)9@9)2)+<&>*%F)9 >GG&6>23@ %< %7 9)7%,+)9 <6 26G) 8%<3 <3) 26;G*)H%<" 6: 61&,*6!>*%F)9 86&*9 >+9 !)+):%< :&6; %<AW_ 

/3) D1<1&E[/ >GG&6>23 <>')7 <3) :6**68%+, %+7%,3<7 %+<6 >2261+<M•  (>?%+, >+9 17%+, ;6&) 9><> %7 +6< >*8>"7 !)<<)& -)A,A 91) <6 <3) G&6!*);

6: 56?)&I:%<<%+,5@ 83%23 ;>')7 26+2*17%6+7 *)77 17):1*4AWS • 

E+:6&;><%6+ >*8>"7 9)G)+97 6+ 26+<)H< ->+9 ;%77%+, 26+<)H<4@ >+9 %< %7<3)&):6&) +)?)& 6!C)2<%?)A ]+) G)&76+c7 7%,+>* ;>" !) >+6<3)& G)&76+c7+6%7) >+9 ?%2) ?)&7>A E< >** 9)G)+97 6+ <3) d1)7<%6+ >+9 G)&7G)2<%?)AWT 

W= iAJAXA B)<<)+261&< )< >*A a&68<3@ %++6?><%6+@ 72>*%+,@ >+9 <3) G>2) 6: *%:) %+ 2%<%)7@ Y&62))9%+,76: <3) l><%6+>* X2>9);" 6: Z2%)+2)7 6: <3) eZX LRS@ W_RLIW_Rj -=RRW4AW_ Z)) $A ()*!%+,@ a*6!>**" +)<86&')9 &%7'7 >+9 368 <6 &)7G6+9A l><1&) ShW@ TLITh -=RL_4A $1)<6 <3) G&6!*); 6: <3) [6;G*)H%<" /%;) B6;! -3<<GMQQG>G)&7A77&+A26;Q76*_QG>G)&7A2:;f>!7<&>2<U%9g=TR=TTh4@ 8) ;17< )%<3)& 9)2)+<&>*%F) 61& 86&*9@ 6& %< 8%** ;67< *%')*" :&>,;)+<@ %A)A!&)>' %+<6 G%)2)7@ 766+)& 6& *><)&A

WS (>?%+, > ,&)><)& 3>"7<>2' 96)7 +6< ;>') %< )>7%)& <6 :%+9 > +))9*) %+ %<AWT /3%7 %7 G>&<%21*>&*" 8)**I'+68+ :6& <3) G&6!*); 6: >;!%,1%<"A D6& )H>;G*)@ > *6< 6: C6')7 >&)!>7)9 6+ <3%7 G&%+2%G*)A

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 23/25

•  .?)+ %: %+9%?%91>* 9)2%7%6+7 2>+ !) 26&&)2<*" G&)9%2<)9 %+ hjk 6: >** 2>7)7@<3%7 96)7 +6< ;)>+ <3>< <3) ;>2&6I*)?)* 61<26;) 861*9 !) 26&&)2<*"G&)9%2<)9AWj /3%7 71&G&%7%+, 9%726?)&" >GG*%)7 <6 2>7)7 6: 1+7<>!*) 7"7<);9"+>;%27@ 83)&) ;%+6& ?>&%><%6+7 2>+ *)>9 <6 26;G*)<)*" 9%::)&)+<61<26;)7AWW 

• 

E+ 26;G*)H 9"+>;%2>* 7"7<);7 8%<3 ;>+" %+<)&>2<%+, 26;G6+)+<7@ )?)+<3) G)&:)2< '+68*)9,) 6: >** %+9%?%91>* 26;G6+)+< G&6G)&<%)7 96)7 +6<+)2)77>&%*" >**68 6+) <6 G&)9%2< 83>< 3>GG)+7 %: 26;G6+)+<7 %+<)&>2<AWb 

•  `3>< ,6?)&+;)+<7 &)>**" +))9 <6 G>" ><<)+<%6+ <6 >&) ;>2&6I)::)2<7@ +6<;%2&6I!)3>?%6&A (68)?)&@ <3) ;>2&6I9"+>;%27 2>+ 6:<)+ !) 1+9)&7<669!" ;)>+7 6: ;69)*7 <3>< >&) !>7)9 6+ >,,&),><) ?>&%>!*)7 >+9G>&>;)<)&7A

•  `3>< ;><<)&7 ;67< %7 83)<3)& > 7"7<); %7 7<>!*) 6& 1+7<>!*)A E+ 2>7) 6:7<>!%*%<"@ ?>&%><%6+7 %+ %+9%?%91>* !)3>?%6& 96 +6< ;>') > 7%,+%:%2>+<9%::)&)+2)@ %A)A 8) 96+c< +))9 <6 '+68 83>< <3) %+9%?%91>*7 96A E+ 2>7) 6:

%+7<>!%*%<"@ &>+96; 9)<>%*7 ;><<)&@ 7123 <3>< <3) G&)9%2<>!%*%<" %7 *68@ >+9)?)+ %+ <3) 1+*%')*" 2>7) <3>< 6+) 2>+ )H>2<*" G&)9%2< <3) 261&7) 6: )?)+<7@6+) ;>" +6< !) >!*) <6 26+<&6* %< !)2>17) 6: 2>72>9)I)::)2<7 %+ <3) 7"7<);<3>< )H2))9 <3) 26+<&6* 2>G>2%<%)7AWh 

•  Z1&G&%7)7 >+9 ;%7<>')7 8%** >*8>"7 3>GG)+A /3%7 2>+ 9%7&1G< 7"7<);7@ !1<;>+" %+?)+<%6+7 861*9+c< )H%7<@ %: <3%7 8>7+c< <3) 2>7)AbR 

•  ]1& )26+6;" >+9 762%)<" 7361*9 !) 6&,>+%F)9 %+ > 8>" <3>< ;>+>,)7 <6'))G 9%7&1G<%6+7 7;>** >+9 <6 &)7G6+9 :*)H%!*" <6 71&G&%7)7 6: >** '%+97AZ62%6I)26+6;%2 7"7<);7 7361*9 !) >!*) <6 &)7%7< 7362'7 >+9 &)26?)& :&6;<3); d1%2'*" >+9 8)**A /3%7 %7 !)7< )+71&)9 !" > &)7%*%)+< 7"7<); 9)7%,+AbL 

Wj JA J>)7 >+9 $A ()*!%+,@ l6%7) 2>+ %;G&6?) 762%>* ;>2&6IG&)9%2<%6+7 83)+ ;%2&6I<3)6&%)7 :>%*@G&)G&%+<AWW `) '+68 <3%7 >*76 :&6; 76I2>**)9 5G3>+<6; <&>::%2 C>;75@ 83%23 >GG)>& 8%<3 +6 &)>76+@ 83)+<3) 2>& 9)+7%<" )H2))97 > 2)&<>%+ 2&%<%2>* ?>*1) !)"6+9 83%23 <&>::%2 :*68 !)26;)7 1+7<>!*)A Z123G3>+<6; <&>::%2 C>;7 261*9 +6< !) G&)9%2<)9 >< >** !" '+68%+, >** 9&%?)&7 <361,3<7 >+9 :))*%+,7 %+9)<>%*A (68)?)&@ <3)" 2>+ !) 1+9)&7<669 :6& )H>;G*) 8%<3 ;>2&6I*)?)* ;69)*7 <3>< 96 +6<&)d1%&) ;%2&6I*)?)* '+68*)9,)A /3)7) ;69)*7 >*76 7368 368 <&>::%2 26+,)7<%6+ 2>+ !) >?6%9)9M!" 17%+, 9&%?)& >77%7<>+2) 7"7<);7 <3>< 23>+,) <3) %+<)&>2<%6+7 !)<8))+ 2>&7@ 17%+, &)>*I<%;)%+:6&;><%6+ >!61< *62>* <&>::%2 26+9%<%6+7A l6<) <3>< <3%7 %7 > 9%7<&%!1<)9 26+<&6* 7<&><),"AWb X771;) 6+) '+687 <3) G7"236*6," 6: <86 G)&76+7@ !1< <3)+ <3)" >22%9)+<>**" ;))< >+9 :>** %+*6?) 8%<3 )>23 6<3)&A /3%7 %+2%9)+< 8%** 23>+,) <3)%& )+<%&) *%?)7@ >+9 %+ 76;) 2>7)7 %< 8%** 23>+,)

3%7<6&" <66 -<3%+' 6: O1*%17 [>)7>& >+9 [*)6G><&>@ :6& )H>;G*)@ !1< <3)&) >&) ;>+" 7%;%*>& 2>7)74AX 7%;%*>& G&6!*); %7 '+68+ :&6; 2>& )*)2<&6+%27M )?)+ %: >** )*)2<&6+%2 26;G6+)+<7 3>?) !))+8)** <)7<)9@ <3)%& %+<)&>2<%6+ 6:<)+ G&6912)7 1+)HG)2<)9 61<26;)7A E+ 26;G*)H 7"7<);7@ 71231+)HG)2<)9@ 5);)&,)+<5 7"7<); G&6G)&<%)7 >&) d1%<) 26;;6+AWh E+ 2>7) 6: 2>72>9) )::)2<7@ > *62>* G&6!*); 8%** 2>17) 6<3)& G&6!*);7 !):6&) <3) 7"7<);&)26?)&7 :&6; <3) %+%<%>* 9%7&1G<%6+A /367) G&6!*);7 <&%,,)& :1&<3)& 6+)7@ )<2A .?)+ 31+9&)97 6:G6*%2);)+ 261*9 +6< >?6%9 G3>+<6; <&>::%2 C>;7 :&6; 3>GG)+%+,@ >+9 %+ <3) G>7< )?)+ *>&,)+1;!)&7 6: 7)21&%<" :6&2)7 3>?) 6:<)+ :>%*)9 <6 G&)?)+< 2&689 9%7>7<)&7 -<3)" 3>?) 76;)<%;)7)?)+ <&%,,)&)9 6& 9)<)&%6&><)9 <3); 83%*) <&"%+, <6 >?6%9 <3);4@ 7)) $A ()*!%+, >+9 YA J1')&C%@[&689 9%7>7<)&7 >7 7"7<);%2 :>%*1&)7M X+>*"7%7 6: <3) i6?) Y>&>9) 9%7>7<)&@ .YO $><> Z2%)+2) LMW-=RL=4AbR E >; G)&76+>**" 26+?%+2)9 <3>< <3) *)?)* 6: &>+96;+)77 >+9 1+G&)9%2<>!%*%<" %+ > 762%)<" %7&)*><%?)*" 3%,3@ !)2>17) %< 2&)><)7 > *6< 6: G)&76+>* >+9 762%)<>* !)+):%<7@ 7123 >7 2&)><%?%<" >+9

%++6?><%6+A X*76 <3%+' 6: <3) 7122)77 G&%+2%G*) 6: 7)&)+9%G%<"AbL $A ()*!%+, )< >*A D1<1&E[/M Y>&<%2%G><6&" 26;G1<%+, <6 1+9)&7<>+9 >+9 ;>+>,) 61& 26;G*)H86&*9 %+ > ;6&) 717<>%+>!*) >+9 &)7%*%)+< 8>"A .1&A Y3"7A OA ZG)2%>* /6G%27 =LS@ LLI_h -=RL=4A

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 24/25

•  X ;6&) %+<)**%,)+< ;>23%+) %7 +6< +)2)77>&%*" ;6&) 17):1*A $%7<&%!1<)926**)2<%?) %+<)**%,)+2) 2>+ !)<<)& &)7G6+9 <6 <3) 26;!%+><6&%>* 26;G*)H%<"6: 61& 86&*9Ab= 

•  E+ 26;G*)H 9"+>;%2>* 7"7<);7 83%23 ?>&" > *6<@ >&) 3>&9 <6 G&)9%2< >+92>++6< !) 6G<%;%F)9 %+ &)>*I<%;) ->7 %< >GG*%)7 <6 lYI3>&9 26+<&6*

G&6!*);7 7123 >7 <&>::%2 *%,3< 6G<%;%F><%6+4@ 9%7<&%!1<)9 26+<&6* 2>+61<G)&:6&; <6GI968+ 26+<&6* ><<);G<7 !" :*)H%!*" >9>G<%+, <6 *62>*26+9%<%6+7 >+9 +))97A

•  `3%*) 9%7<&%!1<)9 26+<&6* ;>" !) );1*><)9 !" 2)+<&>*%F)9 26+<&6*@ >2)+<&>*%F)9 >GG&6>23 ;%,3< :>%* <6 %9)+<%:" <3) ?>&%>!*)7 <3>< ;><<)&Ab_ $)G)+9%+, 6+ <3) G&6!*);@ 2)+<&>*%F)9 26+<&6* %7 >*76 26+7%9)&>!*" ;6&))HG)+7%?)@ >+9 %< <)+97 <6 !) *)77 )::%2%)+< >+9 )::)2<%?)AbS 

•  D%*<)&%+, 61< %+:6&;><%6+ <3>< ;><<)&7 %7 > ,&)>< 23>**)+,)A .HG*>+><6&";69)*7 <3>< >&) 26;!%+)9 8%<3 *%<<*)@ !1< <3) &%,3< '%+9 6: 9><> >&) !)7< <6%+:6&; 9)2%7%6+I;>')&7A Z123 ;69)*7 >*76 %+9%2><) 83>< '%+9 6: 9><> %7

+))9)9AbT

 D%+9%+, <3) &%,3< ;69)*7 <"G%2>**" &)d1%&)7 %+<)&9%72%G*%+>&"26**>!6&><%6+7@ '+68*)9,) >!61< 26;G*)H 7"7<);7@ >+9 6G)+ 72%)+<%:%29%72177%6+7 <3>< <>') >** &)*)?>+< G)&7G)2<%?)7 6+ !6>&9A

•  $%?)&7%<" >+9 26;G*)H%<" >&) +6< 61& G&6!*);A /3)" 26;) >*6+, 8%<3 <3)762%6I)26+6;%2 >+9 21*<1&>* )?6*1<%6+A (68)?)&@ 8) 3>?) <6 *)>&+ 368 <617) 26;G*)H%<" >+9 9%?)&7%<" <6 61& >9?>+<>,)A /3%7 &)d1%&)7 <3)1+9)&7<>+9%+, 6: <3) 3%99)+ :6&2)7 !)3%+9 762%6I)26+6;%2 23>+,)@ <3)17) 6: -,1%9)94 7)*:I6&,>+%F><%6+ >+9 9%,%<>* >77%7<>+<7 <6 2&)><)%+<)&6G)&>!%*%<" >+9 <6 71GG6&< <3) 266&9%+><%6+ 6: >2<6&7 8%<3 9%?)&7)%+<)&)7<7 >+9 ,6>*7A

•  /6 2><>*"F) <3) !)7< 61<26;)7 >+9 2&)><) 7"+)&," )::)2<7@ %+:6&;><%6+

7"7<);7 7361*9 !) 17)9 %+ > 21*<1&>**" :%<<%+, 8>"Abj •  N)7G6+7%!*) %++6?><%6+@ <&17<>!*) 7"7<);7 >+9 > 71::%2%)+< *)?)* 6:

<&>+7G>&)+2" >+9 9);62&><%2 26+<&6* 2>+ !) 3%,3*" !)+):%2%>*A

X7 > 26+7)d1)+2) 6: <3) >!6?) %+7%,3<7@ <6 &)>G <3) !)+):%<7 6: 9><>@ E !)*%)?) 8)96 +6< +))9 <6 )+9 G&%?>2" >+9 %+:6&;><%6+>* 7)*:I9)<)&;%+><%6+A /3) !)7< 17) 6:

b= X7 8) '+68@ %+<)**)2<1>* 9%7261&7) 2>+ !) > ?)&" )::)2<%?) 8>" 6: G&6912%+, +)8 %+7%,3<7 >+9'+68*)9,)Ab_ $1) <6 <3) 9><> 9)*1,)@ <3) )H%7<%+, >;61+<7 6: 9><> %+2&)>7%+,*" )H2))9 <3) G&62)77%+,

2>G>2%<%)7@ 83%23 2&)><)7 > 5:*>73*%,3< )::)2<5M 83%*) 8) ;%,3< *66' >< >+"<3%+,@ 8) +))9 <6 9)2%9)83>< 9><> <6 *66' ><@ >+9 6<3)& 9><> 8%** !) %,+6&)9A X7 > 26+7)d1)+2)@ 8) 6:<)+ 6?)&*66' <3%+,7<3>< ;><<)&A `3%*) <3) 86&*9 8>7 !17" :%,3<%+, <)&&6&%7; %+ <3) >:<)&;><3 6: Z)G<);!)& LL@ %< 9%9+6< 7)) <3) :%+>+2%>* 2&%7%7 26;%+,A `3%*) %< 8>7 :6217)9 6+ <3%7@ %< 9%9 +6< 7)) <3) X&>! ZG&%+,26;%+,A /3) 2&%7%7 %+ e'&>%+) 2>;) >*76 >7 > 71&G&%7)@ >+9 <3) &)7G6+7) <6 .!6*> 2>;) 3>*: > ")>&*><)A ]: 261&7)@ <3) G677%!%*%<" 6& *%')*%3669 6: >** <3)7) )?)+<7 8>7 &):*)2<)9 !" 76;) )H%7<%+, 9><>@!1< 8) :>%*)9 <6 G>" ><<)+<%6+ <6 <3);AbS /3) 2*>77%2>* <)*);><%27 76*1<%6+7 !>7)9 6+ > 26+<&6* 2)+<)& >GG&6>23 3>?)+c< %;G&6?)9 <&>::%2;123A /69>"c7 76*1<%6+7 <6 %;G&6?) <&>::%2 :*687 >&) ;>%+*" !>7)9 6+ 9%7<&%!1<)9 26+<&6*>GG&6>23)7M 7)*:I9&%?%+, 2>&7@ %+<)&?)3%2*) 26;;1+%2><%6+@ 2>&I<6I%+:&>7<&12<1&) 26;;1+%2><%6+)<2AbT /3%7 >GG&6>23 26&&)7G6+97 )H>2<*" 368 B%, $><> >&) 17)9 >< <3) )*);)+<>&" G>&<%2*)>22)*)&><6& [.NlV hhAhk 6: ;)>71&)9 9><> >&) 9)*)<)9 %;;)9%><)*"A ]+) 6+*" '))G7 9><> <3>< >&)

&)d1%&)9 <6 >+78)& > 2)&<>%+ d1)7<%6+@ )A,A <6 ?>*%9><) 6& :>*7%:" %;G*%2><%6+7 6: > 2)&<>%+ <3)6&"Abj OA ?>+ 9)+ (6?)+ )< >*A D1<1&E[/ I /3) &6>9 <68>&97 )<3%2>* E[/@ .1&A Y3"7A OA ZG)2%>* /6G%27 =LS @LT_ILbL -=RL=4A

7/23/2019 From Big Data to Deep Learning

http://slidepdf.com/reader/full/from-big-data-to-deep-learning 25/25

%+:6&;><%6+ 7"7<);7 %7 ;>9)@ %: <3)" !667< 61& 762%)<" >+9 )26+6;" <6 :1**2>G>2%<"@ %A)A %: <3)" 17) <3) '+68*)9,)@ 7'%**7@ >+9 &)761&2)7 6: )?)&"6+) %+ <3)!)7< G677%!*) 8>"A /3%7 %7 6: 7<&><),%2 %;G6&<>+2) >+9 &)d1%&)7 71%<>!*" 9)7%,+)9G>&<%2%G><6&" %+:6&;><%6+ 7"7<);7@ 83%23 6G<%;>**" )HG*6%< <3) 7G)2%>*G&6G)&<%)7 6: %+:6&;><%6+AbW E+ :>2<@ <3) ?>*1) 6: G>&<%2%G><6&" 7"7<);7@ >7 G6%+<)9

61< !" O)&);" N%:'%+bb >+9 6<3)&7@bh !)26;)7 G>&<%21*>&*" 2*)>& %: 8) <3%+' 6: <3),&)>< 7122)77 6: 2&689 761&2%+, -`%'%G)9%>@ ]G)+Z<&))<J>G@ a%<31!@ )<2A4@ 2&689:1+9%+,@ 2%<%F)+ 72%)+2) >+9 26**)2<%?) -578>&;54 %+<)**%,)+2)A Z6@ *)<c7 !1%*9 <3)7)7"7<);7 <6,)<3)&A `3>< >&) 8) 8>%<%+, :6&f

bW  /3%7 G&6!>!*" &)d1%&)7 9%::)&)+< *)?)*7 6: >22)77 9)G)+9%+, 6+ d1>*%:%2><%6+@ &)G1<><%6+@ >+9;)&%<Abb OA N%:'%+ -=RL_4 /3) /3%&9 E+917<&%>* N)?6*1<%6+ -Y>*,&>?) J>2;%**>+ /&>9)4V OA N%:'%+ -=RLS4/3) 0)&6 J>&,%+>* [67< Z62%)<" -Y>*,&>?) J>2;%**>+ /&>9)4Abh a6?)&+;)+< _AR %+%<%><%?) 6: <3) Z61<3 \6&)>+ ,6?)&+;)+<@3<<GMQQ888A+),7<A26;A+,Q9621;)+<7Qa6?)&+%+,U<3&61,3Ul)<86&'7Q_I%2),6?=RL_U71!;%77%6+ULhAG9:

3<<GMQQ888A'6&)>%<<%;)7A26;Q7<6&"Q_=SRRQ,6?)&+;)+<I_RI:1<1&)I6G)+%+,I73>&%+,I26;;1+%2><%6+I>+9I26**>!6&><%6+