A Supabase procura um Storage Platform Engineer sénior para assumir a arquitetura e a operação de uma plataforma de armazenamento NVMe-over-Fabrics definida por software sob o Supabase Postgres.
SOBRE A FUNÇÃO A Supabase gere milhões de bases de dados Postgres, e o desempenho do armazenamento é agora uma das maiores alavancas para a rapidez, fiabilidade e acessibilidade das mesmas. Estamos a construir uma plataforma de armazenamento definida por software, NVMe-over-Fabrics, por baixo do Supabase Postgres. O Postgres permanece inalterado, e a nova camada proporciona um desempenho próximo do NVMe local com a durabilidade e flexibilidade do armazenamento em rede. Como engenheiro sénior a liderar o armazenamento, será responsável por este esforço de ponta a ponta: a arquitetura e as decisões de construir vs. comprar, a integração na nossa plataforma de computação e a operação do sistema em produção. O seu primeiro objetivo é o desempenho bruto de I/O do Postgres à escala. A longo prazo, a camada que construir proporcionará snapshots ao nível do bloco e clones copy-on-write por trás da ramificação de bases de dados, restauros rápidos e redimensionamentos instantâneos. Como é definida por software, também viajará connosco à medida que expandimos para além de um único fornecedor de cloud para multi-cloud e infraestrutura colocada. Esta é uma função fundamental, com elevada responsabilidade. Definirá a direção técnica do armazenamento na Supabase e ajudará a fazer crescer a equipa em torno dela. O QUE IRÁ FAZER - Liderar a arquitetura da plataforma de armazenamento NVMe-oF da Supabase, incluindo avaliar e decidir entre adotar armazenamento definido por software existente e construir sobre SPDK Liderar a arquitetura da plataforma de armazenamento NVMe-oF da Supabase, incluindo avaliar e decidir entre adotar armazenamento definido por software existente e construir sobre SPDK - Integrar armazenamento em bloco em rede na nossa plataforma de computação baseada em Kubernetes através de drivers CSI e controladores personalizados, cobrindo aprovisionamento, attach/detach, redimensionamento e migração Integrar armazenamento em bloco em rede na nossa plataforma de computação baseada em Kubernetes através de drivers CSI e controladores personalizados, cobrindo aprovisionamento, attach/detach, redimensionamento e migração - Tornar o Postgres rápido em armazenamento em rede através de profiling e tuning de todo o caminho de I/O, desde fsync, WAL e checkpoints até à camada de bloco do kernel, NVMe/TCP e à rede Tornar o Postgres rápido em armazenamento em rede através de profiling e tuning de todo o caminho de I/O, desde fsync, WAL e checkpoints até à camada de bloco do kernel, NVMe/TCP e à rede - Conceber para durabilidade e disponibilidade, incluindo replicação ou erasure coding, domínios de falha, failover e verificação de integridade dos dados Conceber para durabilidade e disponibilidade, incluindo replicação ou erasure coding, domínios de falha, failover e verificação de integridade dos dados - Construir isolamento de I/O e QoS para que vizinhos ruidosos não possam degradar outros inquilinos Construir isolamento de I/O e QoS para que vizinhos ruidosos não possam degradar outros inquilinos - Definir SLOs de desempenho e fiabilidade, e construir o benchmarking e a observabilidade para responsabilizar o sistema pelos mesmos Definir SLOs de desempenho e fiabilidade, e construir o benchmarking e a observabilidade para responsabilizar o sistema pelos mesmos - Conceber a camada para snapshots ao nível do bloco e clones copy-on-write, lançando as bases para a ramificação de bases de dados Conceber a camada para snapshots ao nível do bloco e clones copy-on-write, lançando as bases para a ramificação de bases de dados - Manter a plataforma portátil entre AWS, outras clouds e bare-metal/colo Manter a plataforma portátil entre AWS, outras clouds e bare-metal/colo - Escrever documentos de design, orientar engenheiros e trabalhar em estreita colaboração com as equipas de Compute, Branching, Postgres e Multicloud Escrever documentos de design, orientar engenheiros e trabalhar em estreita colaboração com as equipas de Compute, Branching, Postgres e Multicloud - Participar em rotações de on-call, resposta a incidentes e revisões pós-incidente Participar em rotações de on-call, resposta a incidentes e revisões pós-incidente - Resolver problemas de suporte escalados, identificando e resolvendo também problemas sistémicos em toda a plataforma Resolver problemas de suporte escalados, identificando e resolvendo também problemas sistémicos em toda a plataforma PODE SER UM BOM AJUSTE SE REQUISITOS OBRIGATÓRIOS: - Tiver 7+ anos de experiência em engenharia de software, incluindo tempo significativo a construir e operar sistemas de armazenamento em produção Tiver 7+ anos de experiência em engenharia de software, incluindo tempo significativo a construir e operar sistemas de armazenamento em produção - Tiver construído ou operado armazenamento em bloco distribuído ou definido por software (por exemplo Ceph RBD, Lightbits, Simplyblock, Portworx, LINSTOR/DRBD, ou um sistema interno) Tiver construído ou operado armazenamento em bloco distribuído ou definido por software (por exemplo Ceph RBD, Lightbits, Simplyblock, Portworx, LINSTOR/DRBD, ou um sistema interno) - Tiver experiência prática com NVMe/TCP ou NVMe-oF, incluindo targets, initiators, multipath e comportamento de failover Tiver experiência prática com NVMe/TCP ou NVMe-oF, incluindo targets, initiators, multipath e comportamento de failover - Tiver um conhecimento profundo dos internos de armazenamento do Linux: a camada de bloco, io_uring, page cache, semântica de O_DIRECT e fsync, sistemas de ficheiros e device-mapper Tiver um conhecimento profundo dos internos de armazenamento do Linux: a camada de bloco, io_uring, page cache, semântica de O_DIRECT e fsync, sistemas de ficheiros e device-mapper - Escrever código de sistemas robusto em Go, além de C, C++ ou Rust Escrever código de sistemas robusto em Go, além de C, C++ ou Rust - Medir o desempenho rigorosamente com fio, pgbench, eBPF e perf, e conseguir explicar a latência até aos seus componentes individuais Medir o desempenho rigorosamente com fio, pgbench, eBPF e perf, e conseguir explicar a latência até aos seus componentes individuais - Compreender os compromissos de durabilidade entre replicação, erasure coding e consistência sob falha Compreender os compromissos de durabilidade entre replicação, erasure coding e consistência sob falha - Tiver liderado a direção técnica num sistema complexo: documentos de design, compromissos e envolver os outros Tiver liderado a direção técnica num sistema complexo: documentos de design, compromissos e envolver os outros - Tiver experiência com controladores Kubernetes e/ou drivers CSI Tiver experiência com controladores Kubernetes e/ou drivers CSI - Tiver estado on-call para grandes sistemas de produção Tiver estado on-call para grandes sistemas de produção - Comunicar claramente por escrito e prosperar em equipas assíncronas e globalmente distribuídas Comunicar claramente por escrito e prosperar em equipas assíncronas e globalmente distribuídas VALORIZADO: - Experiência de desenvolvimento em SPDK Experiência de desenvolvimento em SPDK - Experiência em RDMA/RoCE Experiência em RDMA/RoCE - Experiência a implementar snapshots ao nível do bloco, thin provisioning ou clonagem copy-on-write Experiência a implementar snapshots ao nível do bloco, thin provisioning ou clonagem copy-on-write - Conhecimento dos internos do Postgres (WAL, buffer manager, checkpointer), ou familiaridade com OrioleDB Conhecimento dos internos do Postgres (WAL, buffer manager, checkpointer), ou familiaridade com OrioleDB - Experiência com redes AWS e armazenamento de instâncias à escala (ENA, placement, limites de largura de banda) Experiência com redes AWS e armazenamento de instâncias à escala (ENA, placement, limites de largura de banda) - Experiência a executar armazenamento em bare metal ou em colo Experiência a executar armazenamento em bare metal ou em colo - Contribuições para projetos de armazenamento open source ou para a stack de armazenamento do kernel Linux Contribuições para projetos de armazenamento open source ou para a stack de armazenamento do kernel Linux O QUE OFERECEMOS - Totalmente Remoto Contratamos globalmente. Acreditamos que pode fazer o seu melhor trabalho a partir de qualquer lugar. Não há escritórios da Supabase, mas fornecemos uma adesão ao WeWork ou um subsídio de co-working que pode usar em qualquer lugar do mundo. - ESOP Cada membro da equipa recebe ESOP (participação acionista) na empresa. Queremos que todos partilhem as vantagens do que estamos a construir juntos. - Subsídio Tecnológico Use este orçamento para configurar o seu ambiente de trabalho ideal—portátil, monitor, auscultadores, ou o que quer que o ajude a fazer o seu melhor trabalho. - Benefícios de Saúde A Supabase cobre 100% do seguro de saúde para funcionários e 80% para dependentes, onde quer que esteja. O seu bem-estar e a saúde da sua família são importantes para nós. - Encontros Anuais Uma vez por ano, toda a empresa reúne-se numa nova cidade para uma semana de conexão, colaboração e diversão. É um destaque do nosso ano. - Trabalho Flexível Operamos de forma assíncrona e confiamos em si para gerir o seu próprio tempo. Sabe o que precisa de ser feito e quando. - Desenvolvimento Profissional Cada membro da equipa recebe um subsídio anual de educação para gastar em aprendizagem—cursos, livros, conferências, ou qualquer coisa que apoie o seu crescimento. SOBRE A EQUIPA A Supabase nasceu remota e open-source-first. Acreditamos que a nossa equipa globalmente distribuída é a nossa arma secreta na construção de ferramentas que os programadores adoram. - ~400 membros da equipa ~400 membros da equipa - 60+ países 60+ países - 20+ idiomas falados 20+ idiomas falados - Mais de $1B angariados (incluindo a nossa Série F de $500M) Mais de $1B angariados (incluindo a nossa Série F de $500M) - 540.000+ membros da comunidade 540.000+ membros da comunidade Movemo-nos depressa, construímos em público e usamos o que lançamos. Se está no seu projeto, provavelmente também o usamos no nosso. Acreditamos profundamente no ecossistema open-source e esforçamo-nos por apoiar—não substituir—ferramentas e comunidades existentes.
A candidatura é feita diretamente no site da empresa — sem intermediários. Vaga remota verificada para quem reside em Portugal.
Candidatar no site da empresa →