Formação em Big Data com Python, Hadoop, Spark e R
O Curso de Big Data da Master D prepara os formandos para armazenar, processar e analisar grandes volumes de dados com Python, Hadoop, Spark e R. A formação pode ser realizada online ou em regime semipresencial e começa pelos fundamentos da programação, sem exigir experiência prévia nessa área.
Começando pela construção de algoritmos, avança para a programação e análise de dados em Python e introduz o processamento distribuído com Hadoop e Spark. Na componente de Data Science, os formandos utilizam R para analisar dados, criar relatórios e construir modelos de regressão e classificação.
- Carga horária: 693 horas;
- Duração contratual: 12 meses;
- Modalidades: 100% online ou semipresencial;
- Componente prática: 26 sessões práticas, num total de 35 horas, e cinco casos práticos;
- Acompanhamento: e-tutor especializado e orientador de estudo.
Destinatários da Formação de Big Data
A formação destina-se a pessoas que pretendam iniciar uma carreira na área dos dados, mesmo sem experiência prévia em programação. É também indicada para:
- Profissionais de áreas administrativas, comerciais, financeiras, de gestão ou de marketing que pretendam fazer uma reconversão para a área tecnológica;
- Profissionais com conhecimentos de tecnologia que pretendam aprofundar competências em Big Data e Data Science;
- Estudantes e recém-licenciados que procurem aplicar programação e estatística à análise de dados;
- Profissionais cuja atividade envolva a gestão e a análise de grandes volumes de informação.
Vantagens deste curso
-
BOLSA DE ESTÁGIOS
Apoio à procura de oportunidades
de estágio através da rede de parceiros. -
BOLSA DE EMPREGO
Acesso a oportunidades profissionais
divulgadas pela Master D. - CAMPUS VIRTUAL 24/7 Plataforma de aprendizagem com conteúdos e recursos disponíveis.
-
ACOMPANHAMENTO
PERSONALIZADO Apoio contínuo ao longo da formação por profissionais especializados - Programação do zero Sem necessidade de experiência prévia
- Sessões Práticas 35 horas de sessões práticas e cinco casos práticos ao longo do curso.
Modalidades do Curso de Big Data
Curso de Big Data online
A formação pode ser realizada 100% à distância, através do Campus Virtual da Master D. O formando estuda ao seu ritmo, com o apoio do e-tutor e do orientador de estudo.
Formação semipresencial
A modalidade semipresencial (b-learning) combina o estudo à distância com sessões presenciais. A equipa da Master D presta informações sobre o funcionamento desta modalidade e as condições de inscrição.
O que vai aprender no Curso de Big Data?
Programar em Python para tratar dados
Transformar um problema numa sequência de instruções e escrever programas que leem, organizam e transformam dados.
Analisar e visualizar conjuntos de dados
Preparar dados com Pandas, realizar cálculos com NumPy, criar gráficos com Seaborn e construir modelos estatísticos com Statsmodels.
Processar grandes volumes de dados com Hadoop e Spark
Armazenar dados de forma distribuída com HDFS, executar tarefas de processamento com MapReduce e analisar conjuntos de dados com Apache Spark.
Construir modelos de regressão e classificação em R
Aplicar estatística descritiva e inferencial, produzir relatórios dinâmicos e construir modelos preditivos com R e RStudio.
Programa do Curso de Big Data
Módulo I - Introdução à Programação
O formando aprende a resolver problemas com algoritmos e pseudocódigo e a escrever os primeiros programas, mesmo sem experiência prévia.
Módulo II - Introdução ao Python
O formando aprenderá a programar em Python, trabalhando estruturas de dados, funções, módulos e classes para criar programas organizados e reutilizáveis.
Módulo III - Python para Análise de Dados
O formando aprenderá a processar, analisar e visualizar dados com NumPy, Pandas e Seaborn e a criar modelos estatísticos com Statsmodels.
Módulo IV - Ferramentas de Big Data
O formando explora o ecossistema de Big Data, trabalha com Hadoop e Spark e conhece os tipos de bases de dados NoSQL e os modelos de computação em nuvem.
Módulo V - Data Science
O formando aprenderá a analisar dados com R, a aplicar estatística descritiva e inferencial e a construir modelos de regressão e classificação para prever resultados.
Módulo de Desenvolvimento Pessoal e Profissional
Comunicação, mercado de trabalho, ferramentas de procura de emprego, redes sociais, empreendedorismo, marca pessoal e autogestão de estágio.
Ferramentas e tecnologias abordadas
Ao longo do curso serão abordadas várias ferramentas, nomeadamente:
- Python: Programação, automatização e tratamento de dados com recurso a Anaconda, Jupyter Notebook e Spyder;
- NumPy, Pandas, Seaborn e Statsmodels: Bibliotecas de Python de referência para cálculo, análise, visualização e modelação de dados;
- Apache Hadoop (HDFS, YARN e MapReduce): Armazenamento e processamento distribuído de grandes volumes de dados;
- Apache Spark (Spark SQL e MLlib): Processamento, consulta e análise de dados em larga escala;
- Bases de dados NoSQL: Tipos de bases de dados NoSQL e critérios de escolha;
- Cloud computing: Modelos de serviço e de implementação na nuvem;
- R e RStudio: Análise estatística, modelação preditiva e relatórios dinâmicos.
Saídas profissionais em Big Data e análise de dados
- Analista de Big Data júnior;
- Cientista de dados (Data Scientist) júnior;
- Analista de dados (Data Analyst);
- Técnico de suporte a dados (Data Support Technician);
- Programador Python orientado a dados;
- Analista estatístico.
Estas competências podem ser aplicadas em equipas de dados de consultoras tecnológicas, bancos, seguradoras, empresas de telecomunicações, energia, retalho e indústria, bem como em organismos públicos.
Perguntas frequentes sobre o Curso de Big Data
Preciso de saber programar para fazer o curso de Big Data?
Não. O Módulo I parte do zero: o que é a programação, como funcionam variáveis, operadores e ciclos e como se desenha um algoritmo em pseudocódigo. Os primeiros exercícios resolvem problemas do dia a dia, como calcular o índice de massa corporal, aplicar descontos a uma lista de compras ou calcular a média das notas de um exame. Só depois o curso avança para o Python e, mais tarde, para as tecnologias de Big Data e para a Data Science.
O curso de Big Data é online?
Sim. Pode ser realizado 100% online, no campus virtual da MasterD, ou em regime semipresencial (b-learning).
Quanto tempo dura o curso de Big Data?
A formação tem 693 horas e uma duração contratual de 12 meses. Como o estudo é feito ao ritmo do Formando, cada pessoa gere o seu calendário dentro desse período.
Qual é a diferença entre o curso de Big Data e o curso de Business Intelligence da Master D?
O curso de Business Intelligence centra-se na modelação de dados, nos data warehouses e na criação de relatórios e dashboards com Power BI, Qlik Sense e Tableau. O curso de Big Data centra-se na programação em Python e R, no processamento distribuído com Hadoop e Spark e na construção de modelos estatísticos e preditivos.
Qual é a diferença entre Big Data e Data Science?
Big Data designa as tecnologias e os métodos usados para armazenar e processar volumes de dados demasiado grandes, rápidos ou variados para os sistemas tradicionais. Data Science é a área que usa programação, estatística e modelos para extrair conhecimento desses dados e fazer previsões. O curso cobre as duas: o Módulo IV é dedicado às ferramentas de Big Data e o Módulo V à Data Science.
O curso inclui estágio?
No final da formação, o formando pode aceder a um estágio formativo, não obrigatório e não remunerado, com o apoio do Serviço de Inserção Laboral da MasterD. O formando é envolvido na procura de entidades onde gostaria de estagiar, e fará o contacto com as mesmas, de forma a ficar preparado para a procura ativa de emprego.
Obtenha informações sem compromisso