Cloudflare detalhou Town Lake, sua plataforma interna de dados unificada, e Skipper, um agente de análise alimentado por IA de linguagem natural, projetado para unificar acesso a dados operacionais, faturamento, segurança e negócios silados. Town Lake roda em arquitetura lakehouse usando Apache Trino, Iceberg, armazenamento Cloudflare R2 e DataHub para metadados, permitindo uma única consulta unir dados em tabelas Postgres, ClickHouse e Iceberg sem movimento de dados. Cloudflare processa mais de 1 bilhão de eventos por segundo em 330+ cidades; plataforma substitui descoberta fragmentada em Postgres, ClickHouse, Kafka, BigQuery e armazenamento de objetos.
Skipper traduz perguntas em inglês simples em consultas SQL validadas usando metadados, schema, lineage e inspeção em tempo de execução. Cargas de trabalho de faturamento representam 53% de todas as consultas de Town Lake (~91.760 consultas de 324 funcionários em período de medição), com tarefas uma vez exigindo SQL complexo agora concluídas em segundos. Design enfatiza governança: novos conjuntos de dados padrão para inacessível até varredura automatizada + revisão humana via serviço interno 'Skimmer' (combinando classificação + análise baseada em IA para detecção de PII) limpa acesso. Cloudflare planeja integração mais profunda com chat interno, ticketing e fluxos de dev.
Para arquitetos: este é um template para infraestrutura de análise empresarial onde agentes de IA e lakehouses convergem. Modelo de governança 'padrão fechado' é notável—inverte padrões típicos de acesso de dados e vira burden para curadores em vez de solicitantes. Observe este padrão se espalhando em pilhas de observabilidade de SaaS, e para vendors que acoplam lakehouse + SQL agêntico para competir na camada interna de análise.