Databricks Runtime

O Databricks Runtime é o conjunto de artefatos de software executados nos clusters de máquinas gerenciadas pela Databricks. Ele inclui o Spark, mas também adiciona vários componentes e atualizações que melhoram consideravelmente a usabilidade, o desempenho e a segurança da análise de big data. As principais diferenças são:

1. Melhor desempenho com DBIO: o módulo Databricks I/O (DBIO) usa a pilha verticalmente integrada para melhorar significativamente o desempenho do Spark na nuvem.
2. Segurança mais forte com DBES: o módulo Databricks Enterprise Security (DBES) adiciona recursos como criptografia de dados em repouso e em movimento, controle de acesso de dados refinado e auditoria para atender à conformidade padrão (por exemplo, HIPAA, SOC2) e os requisitos de segurança mais rigorosos que se esperaria das grandes empresas.
3. Complexidade operacional significativamente menor: com recursos como o dimensionamento automático de recursos de compute e armazenamento local, colocamos o Spark no "piloto automático" e reduzimos significativamente a complexidade operacional e o custo de gerenciamento.
4. Versões rápidas e acesso antecipado a novos recursos: em comparação com versões upstream de código aberto, a oferta de SaaS da Databricks facilita ciclos de versão mais rápidos, oferecendo aos nossos clientes os recursos mais recentes e correções de bugs que ainda não estão disponíveis em versões de código aberto.

O DATABRICKS RUNTIME SUPERA OUTROS MECANISMOS DE COMPUTE