21 SmartData 2017 Piter.
Big Data : . : , — - . , , - « », «». «», , :
– . , « » , 10 . , Hadoop- , 10 . – , .. -, . , .
, . : , , - , . . , , , , . , , , , , , , .
— . , , Spark, Hadoop, Kafka .
. , JUG.ru Group SmartData 2017 Piter. 21 . , , . :
- Data Science, ;
 - Big Data ;
 - , .
 
Data Science
  – ,  ,  ,          ,  ,          .    ,    ,        ,   ,      . , ,          . 
      
  – Data Scientist   ,       .   ,  computer science  .   ,           .
      
  —        «1-»,    AI, deep learning  big data.      ,      ,      «1-»     (Amazon Web Services  .)
      
  —    ,      ,     ,    Spark  Kotlin. 
      
  —   ,     « »   .         ,        ,       :  ,   ,    .      ,   ( ,     ,   ,   ).
      
  —      
      «», , : , , .. — , , , . , .
Tools&Solutions
. , , , . ., , ClickHouse ScrapingHub. , , , 17 , . — - PornHub, highload : , , .
      , , : ! - , — , , , .
, , , .
: . :
- (Spark, Kafka, Storm, Flink)
 - Storages ( , NoSQL, IMDG, Hadoop, )
 - Data Science (Machine learning, , )
 
      , SmartData . , , , , : « », – , , .
« , ». : . , : , . , . .
    ,           SmartData 2017 Piter.          —     early bird .           :)