Profissional de engenharia de dados
Os profissionais de engenharia de dados constroem e operam os pipelines e as plataformas que levam os dados de saúde e de cuidados dos sistemas clínicos e operacionais a lugares onde podem ser analisados e usados com segurança. Projetam fluxos de dados, integram fontes que usam padrões diferentes e garantem que os dados sejam exatos, atuais, seguros e acessíveis somente às pessoas que devem vê-los.
Esta tradução foi feita a partir do inglês por um assistente de IA e ainda não foi revisada por um falante nativo. As citações do UK GDaD PCF (Quadro de Competências Digitais e de Dados do Governo do Reino Unido) e do ESCO mantêm-se em inglês.
- Família
- Dados
- Função do UK GDaD PCF
- Data engineer (Data)
- Profissões ESCO
- data engineer (ISCO-08 2511)
- No GitHub
- Documento da função · Dados da função
Níveis
| Faixa | Nível da função | Nível do UK GDaD PCF | Categorias do serviço público | Pontos da avaliação de funções |
|---|---|---|---|---|
| 6 | Profissional de engenharia de dados | Data engineer | HEO/SEO | 421 |
| 7 | Profissional de engenharia de dados sênior | Senior data engineer | SEO/G7 | 477 |
| 8a | Profissional de engenharia de dados líder | Lead data engineer | G7 | 551 |
| 8b | Chefia de engenharia de dados | Head of data engineering | G7/G6 | 589 |
Em uma organização de saúde digital
- Os sistemas de origem incluem prontuários eletrônicos, sistemas de laboratório, de imagem e de farmácia, que usam padrões como HL7 versão 2, HL7 FHIR, SNOMED CT e CID.
- Os pipelines costumam transportar dados identificáveis de pacientes, por isso as pessoas engenheiras incorporam desde o início a pseudonimização, o controle de acesso e a auditoria.
- Alguns fluxos de dados apoiam o cuidado direto, como alertas ou listas de pacientes, por isso um pipeline com falha ou atrasado pode afetar pacientes e precisa de avaliação de segurança clínica.
- Os dados muitas vezes precisam ser vinculados entre ambientes de cuidado, o que depende de uma associação confiável de pacientes e de identificadores consistentes.
Descrição da função do UK GDaD PCF
A data engineer develops and constructs data products and services, and integrates them into systems and business processes.
Profissões e competências do ESCO
O ESCO lista as competências e os conhecimentos de que os empregadores costumam precisar (essenciais) ou podem precisar (opcionais) em cada profissão. Use-os como lista de verificação para conversas de desenvolvimento.
data engineer
Data engineers develop the architecture needed to process, manage, and store large amounts of data which will be used by data scientists for analysis. They design the infrastructure and maintain data pipelines and warehouses to leverage data for strategic advantage.
Essencial: competências e conhecimentos (23)
Competências e aptidões
- create data sets
- design database in the cloud
- develop data processing applications
- establish data processes
- implement data warehousing techniques
- manage ICT data architecture
- manage data
- manage quantitative data
- manage research data
- perform dimensionality reduction
- process data
- store digital data and systems
- use data processing techniques
- use databases
Conhecimentos
- cloud technologies
- computer science
- data analytics
- data models
- data storage
- data warehouse
- database management systems
- unstructured data
Outros
Opcional: competências e conhecimentos (5)
Competências e aptidões
Conhecimentos
Contains ESCO v1.2.1 data (https://esco.ec.europa.eu/). © European Union. Reuse authorised under Commission Decision 2011/833/EU.