SearchLondonJobs.co.uk

🏛️ London's Premier Job Portal

← Back to London Jobs

AI Architect (Runtime & Inference) - LLM Platforms | Specialist (Remote)

Company: Compass UOL

Location: Remote, London

Posted: June 15, 2026

Apply for This Position

Submit Application

Position Details

Responsabilidades e atribuições

  • Operar, otimizar e evoluir o runtime de agentes e a infraestrutura de inferência de LLMs em produção;
  • Definir e implementar arquitetura de endpoints de modelo com foco em SLOs de latência e disponibilidade;
  • Projetar e manter pipelines completos de observabilidade: métricas, logs estruturados, traces distribuídos e alertas inteligentes;
  • Conduzir otimizações avançadas de performance: batching dinâmico, caching semântico, quantização e gestão de contexto;
  • Liderar resposta a incidentes e análises de causa raiz em falhas do ambiente de inferência;
  • Definir padrões de resiliência e estratégias de failover para workloads de LLM em produção;
  • Produzir runbooks, playbooks e documentação operacional de referência para o ambiente;

Requisitos e qualificações

Habilidades Necessárias
  • Expertise em operação de modelos de linguagem em produção com foco ...