Engenheiro de Infraestrutura Senior - Data Core (remote, Europa)

Modash | Berlin, Germany

Completamente Remoto Tempo integral Desenvolvimento de Software
Tradução automática para você (English → Portuguese) Ver original
Descrição

Remote — Data Core Team — Full-time Hey, I'm Andrei. Eu estou contratando um Engenheiro de Infraestruturas Senior para se juntar à equipe Data Core na Modash. Modash ajuda as marcas a encontrar, entender e trabalhar com criadores em todo o Instagram, TikTok e YouTube. Mais de 2.700 empresas — incluindo Stanley 1913, Sennheiser e NordVPN — usam-nos para gerenciar e ampliar as parcerias de criadores. Cada um desses produtos depende de dados criadores frescos e confiáveis. Data Core possui os sistemas que coletam e mantém perfis para criadores de 400M+ em plataformas sociais, processam bilhões de pontos de dados e mantenham o resto da Modash forneceu o material bruto que necessita. É onde você entra. Por que nós estamos contratando Data Core não é uma equipe de suporte interno. É proprietário da infraestrutura de coleta que todo o produto Modash – e cada equipe de dados a jusante – depende. A coleta de dados sociais nesta escala é um problema de sistemas distribuídos.As APIs mudam sem aviso.Os fornecedores tornam-se infiáveis.Placas-limite de tarifa. Os dados crescem impasse. Uma pequena ineficiência torna-se cara quando repetidas centenas de milhões de vezes. Precisamos de um engenheiro senior que possa projetar serviços resilientes, fazer transacções atentas entre cobertura, frescura, confiabilidade e custo, e tomar sistemas críticos de produção de uma ideia rude para operação confiável. Você vai se juntar à equipe especializada de Data Core e trabalhar em estreita colaboração com Data Search, Data Insights, equipes de produtos e liderança da empresa. Você terá a propriedade real, mas você não vai trabalhar em isolamento. Se você quer um sentimento para como pensamos sobre construir software, verifique nosso Blog de Engenharia.

O que você realmente possuirá 1. Manter dados do criador fluindo em escala maciça. Você vai construir e evoluir os sistemas que coletam e mantenham perfis do criador 400M+ em todo o Instagram, TikTok e YouTube – mantendo bilhões de pontos de dados frescos o suficiente para pesquisa, análise, API e produtos voltados para o cliente. 2. Fará a coleção resiliente quando o mundo exterior não estiver. Você irá projetar serviços que lidam com instabilidade API de terceiros, limites de taxa, interrupções do provedor, alterações de plataforma e falhas parciais sem transformar cada perturbação em um incidente do cliente. 3. Melhorar a economia da coleção. Nesta escala, cada pedido, chamada de proxy, tentar, decisão de armazenamento e cálculo de ciclos. Você irá melhorar a cobertura e frescura mantendo o sistema financeiramente sustentável. 4. Produção própria, não apenas o código. Você irá formar o problema, projetar a arquitetura, escrever e rever o código, envio, observá-lo e melhorá-lo. Você vai construir as salvaguardas de monitoramento e operacional que capturam lacunas e regressões antes que os clientes façam. O que o dia-a-dia parece Aqui é o que uma semana típica pode incluir:.

• Segunda-feira. Uma plataforma social mudou de um dia para outro. O sucesso da coleção caiu, mas apenas para parte do tráfego. Você rastreia o padrão de falha, protege a frescura a jusante e projeta uma solução resiliente em vez de um patch de ruptura. • Terça-feira. Tempo de foco profundo. Você redesenho parte do sistema de assinatura que decide que criadores para coletar, quando e quantos vezes – equilibrar o valor do cliente contra o pedido e o custo de cálculo. • Quarta-feira. Você emparelha com um engenheiro de busca de dados em uma indexação de dependência. Junto, você concorda em um contrato mais limpo que melhora a frescura sem acoplar os sistemas de duas equipes. • Quinta-feira. Você rever uma nova abordagem de rotação de solicitação em provedores proxy. Você modela a via de obtenção, modos de falha e economia de unidade antes de enviar um pequeno experimento de produção. • Sexta-feira. Uma revisão de observabilidade revela uma regressão lenta que as alertas existentes falharam. Você melhora os controlos de qualidade dos dados para que a equipe pegue no próximo antes de atingir os clientes. Mantém-se a reunião com propósito e protege o tempo para o trabalho profundo. Você terá uma curta posição, colaboração estreita quando ajuda, e um monte de espaço para projetar, construir, endurecer e operar sistemas. Requisitos O que você fez antes • Construiu um mecanismo de larga escala ou sistemas de dados. Você tem uma experiência sólida com serviços de alto volume onde fiabilidade, viabilidade, latência e custo todo o assunto. • Sistemas enviados de conceito para produção. Você possuía escolhimento, arquitetura, implementação, liberação, operação e iteração – não apenas uma camada da solução.

• Sistemas distribuídos projetados. Você pode razoar claramente sobre falhas, retratos, idempotência, recarga, escala e trocas operacionais. • Integrações resilientes construídas. Você trabalhou com APIs de terceiros ou outras dependências externas que são limitadas à taxa, instáveis ou capazes de mudar. • Trabalhou com a gestão de proxy ou o encaminhamento de pedidos. Você entende os desafios práticos de encaminhamento de tráfego de alto volume e navegação de sistemas anti-bots de forma responsável em escala. • Apropriado da propriedade operacional. Você cuida de observabilidade, alerta, runbooks e o que acontece após a implantação — não apenas se o código se fundiu. • Trabalhou de forma autónoma em problemas ambíguos. Você sabe como reunir requisitos, fazer perguntas úteis e fazer progressos sem esperar um bilhete perfeitamente especificado. • Comunicado claramente entre equipes. Você pode explicar tradeoffs, dar feedback directos e colaborar sem criar um processo desnecess.

Pontos de bônus se você tem trabalhado com APIs de mídia social, frameworks de qualidade de dados, sistemas de coleta de grande escala, ou de frescura e monitoramento de cobertura. A curiosidade sobre a economia criadora também ajuda, mas nós vamos conseguir você até a velocidade. Nossa pilha • AWS, com Pulumi para infraestrutura como código • TypeScript e Node.js como as línguas primárias • Aurora Limitada/Postgres para assinatura e estado de coleta • S3 para armazenamento de dados crus de lago • CloudWatch para observabilidade e alerta • Redes proxy e camadas de roteamento personalizado • ECS, SQS, Athena, e outros serviços AWS • Slack, GitHub, Linear, Notion, e Cursor

O processo de entrevista Nós movemos rapidamente e podemos completar o processo em menos de uma semana: • Intro chat • Codificação entrevista • Sistema de concepção entrevista • Equipe entrevista • Cultur

Habilidades requeridas

Engineering, Computer Software, Data, Remote

Detalhes da tarefa

Experiência: 0 anos

Publicado: 1 month, 2 weeks Há

Visualizações: 651

Aplicar em Arbeitnow

Fontes de Arbeitnow · abre a publicação original.

Obtenha um aplicativo personalizado para este papel

Larga o currículo e escreveremos uma carta de cobertura para esta listagem exata — grátis e pronto no momento em que sua conta é criada.

PDF, Palavra ou texto. Criamos sua conta gratuita na tela seguinte — sem cartão.

A fazer um papel como este?

Publique seu emprego remoto no WFHJ e alcance candidatos pareados. Sem taxas.

Postar um emprego — grátis
Feedback