Avançar para o conteúdo
formação contínua na FCUP

Introdução ao processamento de dados com Python e Spark

Resumo

O processamento de grandes volumes de dados tornou-se uma reconhecida mais-valia competitiva na sociedade e no mundo empresarial, uma vez que permite extrair informação útil sobre dados já disponíveis nas organizações.

Este curso pretende dotar de conhecimentos que permitam a implementação de algoritmos de análise de dados.

Objetivos e Destinatários

Através da linguagem de programação Python e com recurso ao Apache Spark os formandos vão conseguir construir programas básicos utilizando transformações e ações, processar dados estruturados e concretizar a leitura e escrita de ficheiros de dados.

O Curso está concebido para pessoas com conhecimentos básicos de programação em Python que pretendam desenvolver competências de análise de grandes volumes de dados. Como requisito mínimo, deverá ter completado a formação de nível 3 ou 4, com aproveitamento a Matemática de nível secundário (12º ano).

Informação Geral

Horas de contacto: 21 horas

Calendarização: 17 de maio a 8 de junho 2024

Modalidade: Presencial
Sextas (18h-21h) e sábados (09h-13h)

ECTS: 3

Propina: 300 euros (+ 2€ seguro)

Bolsas PRR: 40 bolsas no valor individual de 150€
(ver mais)

Idioma: Português

Local: Faculdade de Ciências da Universidade do Porto

 

Cofinanciamento

Parceria

Programa

  • Introdução ao modelo de programação MapReduce;
  • O modelo de armazenamento HDFS e a representação RDD;
  • Ações e transformações;
  • Processamento com pares Key-Value;
  • Definição de funções Lambda;
  • Compreender o fluxo de processamento com DAGs;
  • Configuração do nível de paralelismo;
  • Introdução ao SparkSQL;
  • Leitura e escrita de ficheiros estruturados;
  • Trabalhar com dados em falta e errados;
  • Operações estruturadas.

Bolsas de Incentivo

Ao abrigo do Programa de Formação Impulso Adultos (PRR)** a FCUP disponibiliza, mediante concurso, 40 Bolsas de Incentivo à Formação, no valor de 150€.

Tem mais de 23 anos? Reside em território nacional e tem interesse neste tema?

Conheça aqui as condições necessárias para se candidatar a uma bolsa de incentivo!

**«Programa de Formação Multidisciplinar da U. Porto – Impulso Jovens STEAM & Impulso Adultos».
Projeto cofinanciado pelos fundos do programa «Next Generation EU» do Plano de Recuperação e Resiliência (PRR).

Avaliação

  • Projeto (20%)
  • Teste (80%)

Candidaturas

Candidaturas até 11 de abril 2024 no Sigarra

Testemunhos

Pedro Silva

1ª edição do curso de Programação em Python

Venho por este meio expressar o meu agradecimento por ter partilhado estas semanas com todos os intervenientes na formação. Confesso que foi uma experiência gratificante e enriquecedora. A forma como o conteúdo foi apresentado, de maneira clara e concisa, facilitou muito a aprendizagem de todos.

Agradeço especialmente ao Professor Miguel Areias e ao Vítor Sousa que foram aqueles com os quais mais interagi, embora acredite que o selo de qualidade da FCUP seja transversal a todos.

Joana Margarida Bôto

Estudante de doutoramento da FCNAUP

A formação de Análise e Exploração de dados em R foi, sem dúvida, uma experiência extremamente enriquecedora. A clareza e concisão com que o conteúdo foi apresentado tornaram todo o processo de aprendizagem muito mais acessível e estimulante. 

Saio desta formação com uma bagagem de conhecimento significativa e com uma imensa gratidão por ter tido esta oportunidade. Estou confiante de que os ensinamentos adquiridos serão valiosos no meu percurso profissional.

Agradeço a todos os envolvidos por proporcionarem uma formação tão valiosa e por contribuírem para o meu desenvolvimento profissional. Obrigada!

Filipe Furtado

Automação de Testes de Software

A formação “Programação em Python” foi extremamente útil para o meu contexto profissional. Foram abordados conceitos gerais de ciências de computação e aplicados na interpretação e implementação de algoritmos para a resolução de problemas de raciocínio lógico/matemático.

Foi cedido acesso remoto aos conteúdos teóricos e práticos, bem como criado um espaço on-line para discussão e partilha de documentos entre os alunos; Tal permitiu gerir o tempo investido na formação com outras tarefas e potenciou a discussão entre alunos.

Recomendo vivamente a formação a quem está a dar os primeiros passos profissionais em áreas relacionadas com tecnologias de informação ou a quem procura literacia nesta área. Agradeço toda disponibilidade e dedicação do corpo docente, equipa técnica e Núcleo de Educação Contínua.

Parceiro

Formulário de Interesse

×