Pular para o conteúdo
Sondeon

Para o responsável por dados e o CFOSob consulta

Health check do Databricks: custo de clusters, jobs e acessos A fatura do Databricks cresce todo mês. Que parte não entrega nada?

Revisamos o estado do seu Databricks (um health check) e entregamos quais jobs deixam tabelas pela metade, quais clusters custam sem entregar e quais acessos sobram. Não vendemos licenças.

Você recebe os jobs quebrados com as tabelas que afetam e os clusters que pode ajustar. O escopo e o prazo vão por escrito antes de começar.

Placa-mãe em preto e branco, com capacitores e bobinas em primeiro plano

Atualizado em

Para quem é

  • O custo de computação sobe e você não sabe o que o consome
  • Seus relatórios ou seus modelos de IA são alimentados pelo Databricks
  • Cada equipe cria jobs e clusters, cada vez mais com IA

Não é necessário se você tem uma só equipe com poucos jobs e alguém já revisa custos e falhas todo mês.

Dados quebrados entram nos seus modelos

O que sai do Databricks alimenta relatórios e modelos de IA. Se a entrada está quebrada, a saída também está, e o custo de computação é pago do mesmo jeito. Cada job (um processo agendado) funcionou no dia em que foi lançado. Com o tempo, uns falham sem avisar e outros continuam ligados sem que ninguém precise deles.

O que revisamos no seu Databricks: jobs, clusters, custos e Unity Catalog

  • Jobs e pipelines que falham sem avisar
  • Custo de clusters e jobs
  • Acessos no Unity Catalog
  • Usuários inativos
  • Qualidade das tabelas que alimentam relatórios e modelos

Os pontos de controle destas cinco revisões ainda não foram contados, por isso não publicamos número: o escopo é fechado por escrito em cada caso.

Tecnologias que cobre

  • Databricks

Marcas e logotipos dos seus respectivos titulares. O uso aqui é apenas descritivo e não implica relação comercial nem patrocínio.

Como funciona

  1. Reunião e escopo por escrito

    Em 30 minutos vemos quais equipes usam o Databricks e o que depende dele. Depois você recebe o escopo e o prazo por escrito.

  2. Health check somente leitura

    Olhamos e medimos jobs, clusters, custos e acessos. Não alteramos nada no seu workspace enquanto você não pedir.

  3. Relatório e reunião de resultados

    Você recebe quais jobs falham e quais tabelas afetam, e quais clusters pode ajustar. Repassamos tudo com a sua equipe.

O que precisamos de você

  • Um usuário somente leitura no seu workspace do Databricks
  • Uma pessoa que conheça os seus jobs e clusters
  • Os relatórios e modelos que dependem do Databricks

Como trabalhamos

O que você recebe

  1. Jobs quebrados e quais tabelas afetam
  2. Clusters e jobs que você pode ajustar
  3. Lista de acessos e usuários que sobram
  4. Resumo executivo de uma página para a diretoria

Assim chega um achado

Prioridade: Média

Cluster ligado sem trabalhos fora do horário

Onde
Cluster compartilhado da área de dados
Evidência
O registro de uso mostra horas de computação sem nenhum trabalho associado
Impacto
Custo de computação que não entrega nada

Exemplo do formato do relatório, não de um cliente.

Vamos falar sobre o seu caso?

Uma reunião de 30 minutos para ver o que você tem e o que vale revisar primeiro.

Agende uma reunião grátis

Revisão especializada, ferramenta automática ou a própria IA

As três servem, cada uma para uma coisa. A IA traz o volume e as pessoas, o critério: por isso a nossa revisão usa uma ferramenta automática com IA e é supervisionada por desenvolvedores seniores.

Ver a comparação completa

Mãos desenham com um marcador um diagrama de telas ligadas por setas em um quadro pequeno, ao lado de fones de ouvido brancos

Quem revisa

Quem revisa é uma equipe de desenvolvedores seniores, com muitas horas de desenvolvimento e de encontrar as falhas que as IAs cometem ao programar. Conhecemos mais de 1.200 pontos de revisão. A ferramenta automática com IA os percorre, e as pessoas validam, dirigem e revisam.

Equipe de desenvolvedores seniores

Quem responde é José María Salido, fundador da Sondeon

  • A IA traz o volume: percorre os pontos de revisão conhecidos
  • As pessoas trazem o critério: validam cada achado antes de ele entrar no relatório
  • O resultado é explicado em uma reunião com a sua equipe
Quem responde: José María Salido, no LinkedIn

Perguntas frequentes

Quanto custa o Databricks e do que depende o custo?

Os valores são publicados pela Databricks e mudam com o tempo. O custo depende da computação que os seus clusters e jobs consomem, então o que medimos é quais gastam sem entregar.

O que vocês precisam, e alteram algo no nosso workspace?

Precisamos de um usuário somente leitura e de uma pessoa que conheça os seus jobs e clusters. Não alteramos nada enquanto você não pedir: o health check olha e mede.

Quanto dá para economizar no Databricks?

Depende do seu uso, e não damos números antecipados. Medimos na primeira revisão com os seus próprios clusters e jobs: quais custam mais do que entregam e quais podem ser ajustados.

De quanto em quanto tempo convém revisar o Databricks?

Sempre que nascem muitos jobs e clusters novos. Recomendamos repetir a cada trimestre, porque as falhas silenciosas e os custos crescem sem que ninguém olhe.

Vocês mesmos corrigem os jobs que falham e os clusters caros?

Sim, se você nos contratar para isso. Primeiro vem o diagnóstico: cada job e cada cluster com sua evidência e sua prioridade. A correção é à parte e só se você pedir, e a sua equipe também pode aplicar com a lista em mãos.

O que uma auditoria do Databricks revisa?

Revisa jobs e pipelines que falham sem avisar, o custo de clusters e jobs, os acessos no Unity Catalog e os usuários inativos. O nosso trabalho é um health check periódico, diferente do registro de atividade do produto, e cada achado chega com sua evidência e sua prioridade.

Outros serviços

  • Health check do Salesforce

    Automações que falham em silêncio, usuários que já saíram e licenças sem uso que continuam sendo pagas na sua organização do Salesforce.

  • Health check do Microsoft Fabric

    Pipelines que alimentam os relatórios com dados desatualizados ou quebrados, e capacidade paga que não é usada.

  • Health check do Power BI

    Relatórios construídos sobre dados desatualizados ou quebrados, atualizações que falham e licenças atribuídas a pessoas que já não as usam.

  • Health check do Microsoft 365 e Azure

    Contas sem MFA, convidados e aplicativos com mais permissões do que o necessário, e licenças Microsoft 365 pagas sem uso.

Plataformas de dadosTodos os serviços

Peça sua reunião grátis

Preencha o formulário e escrevemos por e-mail para marcar dia e hora. São 30 minutos para ver o que você tem e o que convém revisar primeiro.

O que devemos controlar?

Usamos seus dados para responder à sua solicitação, para poder demonstrar que a recebemos e para proteger o formulário. A política de privacidade explica em detalhe.