La empresa de análisis de datos e inteligencia artificial Databricks anunció hoy el lanzamiento de SQL Analytics, un nuevo servicio que facilita a los analistas de datos ejecutar sus consultas SQL estándar directamente en lagos de datos. Y con eso, las empresas ahora pueden conectar fácilmente sus herramientas de inteligencia empresarial como Tableau y Power BI de Microsoft a estos repositorios de datos también.
Análisis SQL estará disponible en vista previa pública el 18 de noviembre.
En muchos sentidos, SQL Analytics es el producto Databricks ha estado buscando construir durante mucho tiempo y eso le da vida a su concepto de una “casa en el lago”. Combina el rendimiento de un almacén de datos, donde almacena datos después de que ya se han transformado y limpiado, con un lago de datos, donde almacena todos sus datos en su forma sin procesar. Los datos en el lago de datos, un concepto que el cofundador y director ejecutivo de Databricks, Ali Ghodsi ha defendido durante mucho tiempo, generalmente solo se transforma cuando se usa. Eso hace que los lagos de datos sean más baratos, pero también un poco más difíciles de manejar para los usuarios.
Créditos de imagen: Databricks
“Hemos estado diciendo Análisis de datos unificados, lo que significa unificar los datos con los análisis. Entonces, el procesamiento de datos y el análisis, esos dos deberían fusionarse. Pero nadie entendió eso ”, me dijo Ghodsi. Pero “casa del lago” se popularizó como un término.
“Databricks siempre ha ofrecido ciencia de datos, aprendizaje automático. Hemos hablado de eso durante años. Y con Spark, proporcionamos la capacidad de procesamiento de datos. Tu puedes hacer [extract, transform, load]. Eso siempre ha sido posible. SQL Analytics le permite ahora realizar las cargas de trabajo de almacenamiento de datos directamente y, en concreto, la inteligencia empresarial y las cargas de trabajo de informes, directamente en el lago de datos “.
La idea general aquí es que con solo una copia de los datos, puede habilitar tanto los casos de uso de analistas de datos tradicionales (piense en BI) como las cargas de trabajo de ciencia de datos (piense en IA) por las que Databricks ya era conocido. Idealmente, eso hace que ambos casos de uso sean más baratos y sencillos.
El servicio se encuentra en la parte superior de una versión optimizada de la capa de almacenamiento Delta Lake de código abierto de Databricks para permitir que el servicio complete consultas rápidamente. Además, Delta Lake también proporciona puntos finales de escalado automático para mantener la latencia de la consulta constante, incluso con cargas elevadas.
Si bien los analistas de datos pueden consultar estos conjuntos de datos directamente, utilizando SQL estándar, la empresa también creó un conjunto de conectores para herramientas de BI. Sus socios de BI incluyen Tableau, Qlik, Looker y Thoughtspot, así como socios de ingesta como Fivetran, Fishtown Analytics, Talend y Matillion.
Créditos de imagen: Databricks
“Ahora más que nunca, las organizaciones necesitan datos estrategia que permite que la velocidad y la agilidad sean adaptables ”, dijo Francois Ajenstat, director de productos de Tableau. “A medida que las organizaciones están moviendo rápidamente sus datos a la nube, estamos viendo un creciente interés en realizar análisis en el datos lago. La introducción de SQL Analytics ofrece una experiencia completamente nueva para que los clientes aprovechen la información de volúmenes masivos de datos con el rendimiento, la fiabilidad y la escala que necesitan “.
En una demostración, Ghodsi me mostró cómo es el nuevo espacio de trabajo de SQL Analytics. Es esencialmente una versión simplificada de la experiencia estándar de código pesado con la que los usuarios de Databricks están familiarizados. Como era de esperar, SQL Analytics proporciona una experiencia más gráfica que se centra más en visualizaciones y no en Python. código.
Si bien ya hay algunos analistas de datos en la plataforma Databricks, esto obviamente abre un gran mercado nuevo para la compañía, algo que seguramente reforzaría sus planes para una OPI el próximo año.
Source link