Senior Data Engineer

Publicado 18-10-2021

Dixtior Consulting Lda.

Lisboa Lisboa (Construção Civil)


A Dixtior é uma empresa portuguesa de consultoria que combina na perfeição o melhor de dois mundos. Somos especializados em economia e informática e utilizamos todo o nosso talento para criar as soluções perfeitas, capazes de responder às necessidades de cada cliente.

É esta capacidade de adaptação que nos leva a adotar a filosofia «Think local, act global» e a transpor fronteiras. Porque queremos levar os nossos conhecimentos sobre negócio e soluções tecnológicas a qualquer parte do planeta.

  • *

Estar na Dixtior é mais do que um trabalho, é uma forma de estar.

Na Dixtior, não queremos apenas o teu talento e criatividade. Queremos que sejas um de nós. Estamos aqui para ajudar-te a evoluir e transformar o teu mundo. Para que leves a cultura Dixtior sempre contigo e consigas também moldar o futuro de várias empresas. Estás preparado/a para ser um(a) D/People?

JOB DESCRIPTION

Estamos à procura de um(a) profissional para integrar a equipa de um dos nossos clientes.

Responsabilidades

- Definir e conceber plataformas de dados modernas em nuvem pública ou em nuvem privada cobrindo todo o ciclo de vida dos dados sob uma estratégia dirigida por metadados e baseada em DataOps;

- Implementar, integrar e configurar todos esses componentes para a disponibilidade das referidas plataformas de dados, compreendendo em profundidade a sua utilização e aplicação no contexto real da análise descritiva e preditiva, e garantindo as características requeridas com base em tudo isto, aplicando para isso as técnicas DataOps em conjunto com equipas de engenheiros de nuvens;

- Definir a nível metodológico e governamental como o exercício da arquitetura de dados nestas plataformas deve ser considerado;

- Desenvolver soluções de gestão de dados de ponta a ponta como parte de equipas multidisciplinares, colaborando na definição da solução e realizando a implementação de todos os processos envolvidos na construção e aplicação;

- Conceber e desenvolver modelos de dados a um nível lógico e físico em diferentes indústrias e em diferentes projetos tecnológicos com as melhores metodologias de trabalho para cada caso, para além das estratégias de dados mais adequadas, tais como Kimball, Data Vault, Data Mesh ou Big Tables;

- Conhecer, gerir e utilizar as diferentes ferramentas e plataformas disponíveis nas diferentes nuvens para o desenvolvimento de soluções de gestão de dados: Azure Data Factory e Azure Synapse, AWS Redshift, GCP Data Fusion, GCP Dataform e Google Bigquery, e outros serviços de ecossistemas de dados das diferentes nuvens, tais como Snow Flake ou Firebolt;

- Conhecer, gerir e utilizar as diferentes ferramentas e plataformas disponíveis em ambientes mais antigos para o desenvolvimento de soluções de gestão de dados, principalmente: Talend Cloud, Oracle Exadata, Informatica Cloud;

- Aplicar as novas práticas e tecnologias emergentes do desenvolvimento de software mais tradicional ou do mundo SaaS ou K8s nativo, à dimensão de gestão de dados: Python, Docker, Airflow, Great Expectations, DBT Cloud, FiveTran, Argo;

- Participar na escolha de novas plataformas de dados, novas estratégias de desenvolvimento, novas metodologias, novas parcerias com o líder da empresa e o departamento de inovação;

- Participar em conjunto no departamento de impulso e nas diferentes equipas de clientes e peritos da indústria no desenvolvimento de propostas comerciais a partir do papel de desenvolvimento empresarial, definindo a solução, a arquitetura funcional lógica e física e a estimativa dos esforços e custos operacionais;

- Colaborar com o departamento de inovação na tarefa de refinar e aumentar a carteira através do desenvolvimento de artefactos de engenharia aplicáveis ao ecossistema de dados e de análise.

Requisitos

- Conhecimento da arquitetura e do ciclo de vida dos dados em ambientes Data Lake, Data Warehouse ou outras plataformas de dados;

- Conhecimento de diferentes estratégias de modelação de dados: modelação relacional, modelação Kimball, modelação de Data Vault, modelação de pranchas, modelação de dados híbridos;

- Conhecimento das diferentes estratégias de movimentação de dados de ou para um repositório central de dados, isto é recolha e entrega de dados e as diferentes técnicas associadas a cada uma delas: Captura de dados de alteração, Ingestão de ficheiros (Parquet, Avro, Texto- Ficheiro) em modo batch ou microbatch, tratamento de eventos e seus esquemas, Ingestão de APIs, Partilha de dados;

- Formação: Licenciatura em Engenharia Informática, Engenharia de Telecomunicações ou outra. Valorizado ter formação através de um Mestrado ou outras alternativas que aumentem as suas competências, por exemplo, um Mestrado em Grandes Dados e Analítica;

- Experiência: Mínima de 4 anos.

- Idioma: Inglês no nível B2 ou superior (do quadro europeu de referência para línguas).

Benefícios

- Atribuição de um seguro de saúde desde o início do vínculo laboral;

- Entrega de equipamento de trabalho ajustado ao desempenho de funções;

- Implementação de um regime de trabalho-híbrido (presencial & teletrabalho) sempre que seja possível;

- Pagamento do subsídio de alimentação em cartão de refeição (isento de descontos legais);

- E outros semelhantes.

Se tens?

?talento para responder a qualquer desafio,

?mente aberta para novas ideias,

?profissionalismo, integridade e humildade,

?pensamento à frente,

...gosto em estabelecer relações fortes...

Candidata-te através do botão, ?Apply Now?.

Job Type: Full-time