Fundamentos de Big Data

Captulo 4 Capacitao e profissionais

Prof. Joo Guilherme Gallo

Nesta aula
Capacitao

Perfis profissionais
Oportunidades de carreira
Big Data abre oportunidades para a rea de TI ter um papel ainda mais
importante nas empresas
Vrios CEOs sentem-se frustrados com o setor de TI por perceberem
que um grande valor est sendo desperdiado pela incapacidade da TI
de extrair as informaes disponveis
Data Scientist (Cientista de Dados): formao em Cincia da
Computao e Matemtica com habilidades analticas necessrias
- Profundo conhecimento do negcio
- Imaginao e criatividade para inovar

Perfis profissionais
A carreira do Cientista de Dados
J uma carreira em profuso nos EUA
A virada na utilizao do LinkedIn se deu a partir da criao de um
algoritmo e recomendao de relacionamentos People You May Know
- Informaes disponibilizadas nos perfis dos usurios tais como o
colgio, faculdade e locais de trabalho
- Maior nmero de conexes significa maior utilizao da rede

Perfis profissionais
A carreira do Cientista de Dados
um profissional de alto nvel de formao com grande curiosidade
Quanto mais as empresas utilizam as anlises de dados maior a
evidncia dada a esses profissionais
A rpida evoluo da tecnologia promete fazer com que o gargalo do Big
Data no seja a tecnologia mas as pessoas capazes de utiliz-la

Perfis profissionais
A carreira do Cientista de Dados
Mudana de gesto das empresas
Gesto orientada a fatos X gesto orientada a suposies
Os dados servem de base para anlises inimaginveis com alto grau de
preciso
Anlises preditivas demandam conhecimentos e habilidades em
estatstica, matemtica e conhecimentos de negcio
- uma atividade diferente da realizada pelos analistas envolvidos
em ferramentas de BI
- Foco em dados em tempo real

Perfis profissionais
O Cientista de Dados

Estatstica
Matemtica
Entendimento profundo do negcio
Tecnologias de Big Data
Hadoop
Pig
Modelagem de dados no estruturados
Bancos NoSQL

Perfis profissionais
Analista de BI

Cientistas de dados

Cognos, modelo relacional, bancos

de dados relacionais

Hadoop, modelos relacionais e

NoSQL, bancos de dados

Modelagem relacional/estruturada

Modelagem analtica no
estruturada e estruturada

Desenvolve queries estruturadas

sobre dados passados

Cria perguntas e busca

relacionamentos entre fatos
aparentemente desconexos

Perfis profissionais
Outras posies

Desenvolvedores
Administradores de sistemas
Experincia em ferramentas de Big Data
- Hadoop
- Aplicaes distribudas
- Computao intensiva

Perfis profissionais
Perfis bsicos

Cientista de dados: profissionais capacitados em estatstica, cincia da

computao e matemtica que sejam capazes de analisar grandes
volumes de dados e extrair deles insights que criem novas
oportunidades de negcio

Perfis profissionais
Perfis bsicos
Analista de negcio: conhecedor profundo do negcio que atua,
consegue formular as perguntas corretas, analisar as respostas e tomar

decises estratgicas e tticas que alavanquem novos negcios e

aumentem a lucratividade da empresa

Perfis profissionais
Perfis bsicos
Profissional de TI: responsvel pela infraestrutura e suporte tcnico ao
Big Data. Deve ser capaz de gerenciar clusters de alto desempenho,

plataforma Hadoop e pensar volumes de dados significativamente

grandes e muito variados

Perfis profissionais
Escassez de profissionais
No mundo inteiro h um gap gigantesco entre a fora de trabalho
disponvel e a demanda do mercado
No Brasil isso promete ser ainda mais evidente, pois ainda estamos
muito no incio das iniciativas de explorao da rea
A falta de equipes especializadas promete ser o maior entrave na
utilizao de solues de Big Data com eficincia

Perfis profissionais
Escassez de profissionais
Estima-se que o mundo demande 4,4 milhes de profissionais da rea
em 2015

Menos de 1/3 desas vagas poder ser preenchida pelos profissionais

atualmente disponveis

S 1/10 das organizaes acredita ter a equipe adequada para Big Data

Perfis profissionais
Escassez de profissionais
75% dos professores acredita que o que ensinado hoje est muito
distante do que necessrio aos profissionais que o mercado demanda

Empresas tero um grande desafio para desenvolver e recrutar

profissionais para esses postos que j esto disponveis ou surgiro

Perfis profissionais
Situao das empresas
A maioria das empresas no utiliza ferramentas analticas fortemente
- Setores especficos como marketing costumam ser uma exceo
Big Data aparece como um novo mundo a ser explorado e para o qual
seus quadros de profissionais no esto preparados
O papel da academia fundamental na formao de profissionais com
formao slida que v alm daquela oferecida pelos fornecedores de
tecnologia

Perfis profissionais
Situao das empresas
A educao para o Big Data no deve ser exclusiva da equipe tcnica
mas deve abranger toda organizao
- Executivos C-Level devem compreender o potencial do Big Data
- Executivos de mdio escalo devem entender que o Big Data pode
ajud-los a identificar os problemas e redesenhar os processos de
negcio
- Equipe de TI deve entender que mesmo sem estarem diretamente
envolvidos com o Big Data estaro sempre na interface dele
- Big Data vai ser parte integrante da arquitetura de dados e
aplicaes das empresas

Perfis profissionais
Formao para o Big Data
A IBM montou a Big Data University que visa formar estudantes de
graduao e ps na rea
Nos primeiros meses mais de 20 mil estudantes realizaram seus cursos
online gratuitos
http://www.bigdatauniversity.com

Perfis profissionais
O CDO Chief Data Officer
Posio ainda desconhecida na maioria das empresas
Posio senior, C-Level, e deve estar em constante evoluo
Origem: Analistas financeiros, analistas de BI
Funo atual: Impulsionador de valor para organizao atravs da
anlise avanada de dados, gerando vantagens competitivas

Perfis profissionais
O CDO Chief Data Officer
Deve se disseminar nos prximos anos
Enfrenta a falta de compreenso do impacto estratgico e do valor do
Big Data para obter vantagem competitiva e a falta de capacitao de
pessoal para exercer essa funo no quadro diretor da empresa e no
mercado

Perfis profissionais
O CDO Chief Data Officer
Sofre com a cultura de no compartilhamento de dados nas empresas e
com a carncia de suporte executivo
Muitas vezes as suas atribuies so delegadas ao CIO por se entender
que Big Data apenas mais uma tecnologia

Perfis profissionais
O CDO Chief Data Officer
O CDO no deve ser subordinado ao CIO mas trabalhar em parceira com
ele e com os demais executivos C-Level da empresa
Faz a ligao entre TI e negcios gerando valor ao explorar dados
internos e externos
Funo muito mais centrada em negcio do que em tecnologia

Perfis profissionais
O CDO Responsabilidades
Atuar de forma integrada com os demais executivos C-Level para
determinar as necessidades estratgicas da empresa e desenhar aes
de estratgia analtica para atender essas demandas.
Orientao no uso de ferramentas de anlise, atuando como
evangelizador do conceito de Big Data e criar um road map para a
estratgia de explorao dos dados da empresa

Perfis profissionais
O CDO Responsabilidades
Desenhar programas de capacitao e educao em analtica avanada
Criar e gerenciar o Centro de Excelncia em Analtica Avanada para
evangelizao, capacitao, disseminao e suporte no uso da analtica
avanada
Redesenho de processos baseado no uso e Big Data

Perfis profissionais
O CDO
Deve estar subordinado diretamente ao CEO
Com o amadurecimento da organizao surgiro mtricas para

avaliao do resultado do negcio

Concluso
Capacitao

Prxima aula
Estudo de caso 1