Julio de 2023
Estas características y mejoras de la plataforma Azure Databricks se publicaron en julio de 2023.
Nota:
Las versiones se publican por fases. Es posible que su área de trabajo de Azure Databricks no se actualice hasta una semana o más después de la fecha de lanzamiento inicial.
Los administradores del área de trabajo ahora pueden crear grupos de cuentas
31 de julio de 2023
Los administradores del área de trabajo ahora pueden crear grupos de cuentas a partir de sus áreas de trabajo federadas de identidad. Anteriormente, los administradores del área de trabajo solo podían crear grupos locales del área de trabajo. A los grupos de cuentas se les puede conceder acceso a los datos de un metastore de Unity Catalog y acceso a las identidades de áreas de trabajo federadas. Databricks recomienda usar grupos de cuentas en lugar de grupos locales del área de trabajo para aprovechar Unity Catalog y un lugar central para administrar la identidad.
El rol Administrador de grupos está disponible en versión preliminar pública
31 de julio de 2023
Ahora puede conceder permisos a usuarios, entidades de servicio y grupos de Databricks para administrar grupos. Los administradores de grupos pueden administrar la pertenencia a grupos. También pueden asignar a otros usuarios el rol de administrador de grupo. Los administradores de cuentas tienen el rol de administrador de grupos en todos los grupos de la cuenta. Los administradores de áreas de trabajo tienen el rol de administrador de grupos en los grupos de cuentas que crean.
Consulte ¿Quién puede administrar grupos de cuentas?.
CLI de Databricks actualizada a la versión 0.202.0 (versión preliminar pública)
27 de julio de 2023
La Interfaz de la línea de comandos de Databricks (CLI de Databricks) se ha actualizado a la versión 0.202.0. Para información más detallada, consulte los registros de cambios para la versión 0.202.0.
SDK de Databricks para Python actualizado a la versión 0.3.0 (beta)
27 de julio de 2023
El SDK de Databricks para Python versión 0.3.0 presenta compatibilidad con el servicio de directivas de red de cuentas; controla los parámetros de consulta anidados; agrega, quita y crea varios métodos, campos, clases de datos, servicios y más. Para información más detallada, consulte los registros de cambios para la versión 0.3.0.
SDK de Databricks para Go actualizado a la versión 0.14.1 (beta)
27 de julio de 2023
El SDK de Databricks para Goversión 0.14.1, controla correctamente los parámetros de consulta anidados, lo que corrige el filtrado en las listas de QueryHistory. Para información más detallada, consulte los registros de cambios para la versión 0.14.1.
SDK de Databricks para Go actualizado a la versión 0.14.0 (beta)
26 de julio de 2023
El SDK de Databricks para Go versión 0.14.0 agrega compatibilidad con el servicio de directivas de red de cuentas y agrega, quita y cambia varios métodos, campos y tipos. Para información más detallada, consulte los registros de cambios para la versión 0.14.0.
Ejecutar otro trabajo como tarea en un trabajo de Azure Databricks
25 de julio de 2023
Puede usar la nueva tarea Run Job para agregar otro trabajo como tarea en el trabajo de Azure Databricks, lo que le permite descomponer un flujo de trabajo de procesamiento grande en varios trabajos de componentes o crear componentes reutilizables para usarlos en varios trabajos. Para obtener información sobre el uso de la tarea en la interfaz de usuario de trabajos, consulte Creación y ejecución de trabajos de Azure Databricks. Para obtener información sobre el uso de la tarea con la API de REST Trabajos, consulte Trabajos en la referencia de la API de REST 2.1 o la referencia de Trabajos API 2.0.
La actualización de red del área de trabajo admite la interfaz de usuario (GA)
24 de julio de 2023
Anteriormente podría usar una plantilla de ARM con la línea de comandos o el Azure Portal para habilitar la conectividad segura del clúster o habilitar Azure Private Link.
Ahora también puede usar la interfaz de usuario de Azure Portal (sin plantilla) para las actualizaciones de red directamente en la instancia del área de trabajo de Azure Databricks. Ambos tipos de actualizaciones de red ahora están disponibles con carácter general.
Todos los usuarios pueden acceder a los productos de datos en Databricks Marketplace de forma predeterminada
24 de julio de 2023
A partir del 24 de julio y su implementación gradualmente en todas las áreas de trabajo aptas, todos los usuarios podrán instalar conjuntos de datos gratuitos o comprados previamente mediante Databricks Marketplace. Esto se hace posible concediéndole el privilegio USE MARKETPLACE ASSETS a todos los usuarios de todos los metastores de Unity Catalog. Este nuevo privilegio no tiene ningún impacto en el costo, ya que todas las transacciones de Marketplace tienen lugar fuera de Databricks. Si desea deshabilitar el acceso, consulte Deshabilitar el acceso a Marketplace.
Modo de métodos abreviados de teclado clásicos
21 de julio de 2023
Una nueva configuración le permite usar características del nuevo editor (como autocompletar mientras escribe, resaltado de sintaxis, formato de código, etc.) al tiempo que conserva los mismos métodos abreviados de teclado conocidos del editor anterior. Para acceder a esta configuración, abra la configuración del editor y cambie el modo de métodos abreviado de teclado del editor de cuadernos al clásico (Code Mirror).
La federación de almacén de lago permite ejecutar consultas en proveedores de bases de datos externas (versión preliminar pública)
21 de julio de 2023
Lakehouse Federation es la plataforma de federación de consultas para Azure Databricks, que aprovecha Unity Catalog para permitir que los usuarios y los sistemas ejecuten consultas en varios orígenes de datos externos sin necesidad de migrar todos los datos a un sistema unificado.
Lakehouse Federation está pensado para casos de uso como:
- Notificación ad hoc.
- Trabajo de prueba de concepto.
- Fase exploratoria de nuevas canalizaciones o informes de ETL.
- Compatibilidad con cargas de trabajo durante la migración incremental.
En cada uno de estos escenarios, la federación de consultas le permite obtener información más rápida, ya que puede consultar los datos en su lugar y evitar un procesamiento ETL complejo y lento. Además, obtendrá las ventajas de las interfaces de Unity Catalog y la gobernanza de datos, incluido el control de acceso específico, el linaje de datos y la búsqueda.
Consulte Qué es Lakehouse Federation.
Mover a la papelera habilitada para repositorios
19 de julio de 2023
La eliminación de repositorios ahora funciona de la misma manera que la eliminación de otros recursos del área de trabajo. En la lista Repositorios, haga clic con el botón derecho en el nombre del repositorio y seleccione Mover a la papelera. Después de 30 días, la carpeta Papelera se elimina automáticamente de forma permanente.
Creación de alertas para trabajos de ejecución lenta o bloqueados
18 de julio de 2023
Ahora puede configurar una duración esperada para un trabajo o tarea de trabajo de Azure Databricks y agregar notificaciones si un trabajo o tarea supera la duración esperada. Esta característica le permite obtener alertas para trabajos de ejecución lenta sin que se cancele la ejecución. Para configurar una duración esperada en la interfaz de usuario de flujos de trabajo de Azure Databricks, consulte Configuración de un tiempo de finalización esperado o un tiempo de espera para un trabajo. Para configurar la duración esperada con la API Trabajos 2.1, consulte Trabajos en la referencia de la API de REST.
SDK de Databricks para Go actualizado a la versión 0.13.0 (beta)
18 de julio de 2023
El SDK de Databricks para Go versión 0.13.0 agrega compatibilidad con la autenticación identidades administradas de Azure para operaciones de nivel de cuenta, agrega, cambia y quita varios métodos y campos, etc. Para información más detallada, consulte los registros de cambios para la versión 0.13.0.
SDK de Databricks para Python actualizado a la versión 0.2.0 (beta)
18 de julio de 2023
El SDK de Databricks para Python versión 0.2.0 agrega una implementación local de dbutils.widgets, agrega, cambia y quita varios métodos, campos y clases de datos, etc. Para información más detallada, consulte los registros de cambios para la versión 0.2.0.
CLI de Databricks actualizada a la versión 0.201.0 (versión preliminar pública)
18 de julio de 2023
La interfaz de la línea de comandos de Databricks (CLI de Databricks) versión 0.201.0 mejora la experiencia de auth login, admite la finalización con tabulación para hacer referencia a perfiles de configuración de autenticación de Azure Databricks, realiza adiciones, cambios y eliminaciones de varios comandos y grupos de comandos, etc. Para información más detallada, consulte los registros de cambios para la versión 0.201.0.
SDK de Databricks para Python actualizado a la versión 0.2.1 (beta)
18 de julio de 2023
El SDK de Databricks para Python versión 0.2.1 admite versiones anteriores de urllib. Para información más detallada, consulte los registros de cambios para la versión 0.2.1.
El Asistente de Databricks está en versión preliminar pública
18 de julio de 2023
Databricks Assistant funciona como un programador de pares complementarios basado en IA para que sea más eficaz a medida que se crean cuadernos, consultas y archivos. Puede ayudarle a responder rápidamente a preguntas mediante la generación, optimización, finalización, explicación y corrección de código y consultas. Consulte las Preguntas más frecuentes sobre Databricks Assistant para obtener más información e instrucciones sobre cómo habilitar el Asistente.
Desactivar usuarios y entidades de servicio de la cuenta
13 de julio de 2023
Ahora puede desactivar usuarios y entidades de servicio de la cuenta de Azure Databricks. Un usuario desactivado no puede iniciar sesión en la cuenta o identidad federada de áreas de trabajo de Azure Databricks. Sin embargo, todos los permisos del usuario y los objetos del área de trabajo permanecen sin cambios. Para más información, consulte Desactivación de un usuario en la cuenta de Azure Databricks y Desactivación de una entidad de servicio en la cuenta de Azure Databricks.
El aprovisionamiento SCIM de nivel de cuenta ahora desactiva a los usuarios cuando se desactivan en el proveedor de identidades
13 de julio de 2023
El aprovisionamiento SCIM de nivel de cuenta ahora desactiva a los usuarios cuando se desactivan en el proveedor de identidades. Anteriormente, cuando un usuario se desactivaba en un proveedor de identidades, el aprovisionamiento SCIM de nivel de cuenta los eliminaba de la cuenta de Azure Databricks. Para más información, consulte Sincronización de usuarios y grupos desde Microsoft Entra ID y Desactivación de un usuario en la cuenta de Azure Databricks.
Acceso de administrador del directorio de papelera
13 de julio de 2023
Los administradores del área de trabajo ahora pueden acceder a los directorios de papelera de otros usuarios.
La prevención de detección de tipo MIME y la representación de página de ataque XSS ahora están siempre habilitadas
12 de julio de 2023
Azure Databricks reduce el riesgo de la representación de páginas de ataque de tipo MIME y XSS agregando encabezados HTTP adecuados. Estas características se habilitaron de forma predeterminada y anteriormente se podían deshabilitar. Para mejorar la seguridad, Azure Databricks ahora siempre habilita las características y ya no hay configuraciones de administrador del área de trabajo para deshabilitarlas. En el caso de las áreas de trabajo que anteriormente deshabilitaban una o ambas características, ambas características ahora están habilitadas.
Los volúmenes de Unity Catalog se encuentran en versión preliminar pública
12 de julio de 2023
Ahora puede usar volúmenes en Unity Catalog para administrar el acceso a ubicaciones de almacenamiento de objetos en la nube en Databricks Runtime 13.2 y versiones posteriores. Los volúmenes proporcionan funcionalidades de acceso, almacenamiento, gobernanza y organización de archivos. Consulte Crear y trabajar con volúmenes.
Experiencia simplificada para enviar comentarios del producto desde el área de trabajo
11 de julio de 2023
Ahora es más fácil enviar comentarios sobre el producto desde el área de trabajo. Puede enviar comentarios y adjuntar capturas de pantalla con menos pasos y sin salir de la interfaz de usuario del área de trabajo. Para obtener más información, consulte Enviar comentarios sobre el producto.
Extensión de Databricks para Visual Studio Code actualizada a la versión 1.1.0
10 de julio de 2023
La extensión de Databricks para Visual Studio Code versión 1.1.0 habilita la integración de Databricks Connect de forma predeterminada, agrega características experimentales para cuadernos de Jupyter, etc. Para información más detallada, consulte los registros de cambios para la versión 1.1.0.
Las Funciones ahora se muestran en Explorador de catálogo (versión preliminar pública)
10 de julio de 2023
Las funciones definidas por el usuario de SQL y Python ahora están visibles en Explorador de catálogo. Puede ver los detalles de la función y administrar los permisos mediante esta nueva interfaz de usuario.
El proveedor de Terraform de Databricks se ha actualizado a la versión 1.21.0
7 de julio de 2023
El proveedor de Terraform de Databricksversión 1.21.0 agrega compatibilidad con suscripciones en paneles y tareas SQL de alerta en databricks_job, define utilidades de datos genéricas de Azure Databricks para definir orígenes de datos de nivel de cuenta y área de trabajo, etc. Para información más detallada, consulte los registros de cambios para la versión 1.21.0.
El desplazamiento máximo de las solicitudes de API List all jobs y List job runs ahora está limitado
6 de julio de 2023
El desplazamiento máximo que puede especificar en las solicitudes List all jobs y List job runs en la API Trabajos ahora está limitado. Para evitar este límite al usar estas solicitudes, use la paginación basada en tokens que no tiene este límite. Consulte GET /api/2.1/jobs/list y GET /api/2.1/jobs/runs/list en la referencia de la API de REST.
Databricks Runtime 13.2 está disponible de forma general
6 de julio de 2023
Databricks Runtime 13.2 y Databricks Runtime 13.2 ML ahora están disponibles con carácter general.
Consulte Databricks Runtime 13.2 (sin soporte técnico) y Databricks Runtime 13.2 para Machine Learning (sin soporte técnico).
Delta Sharing y Databricks Marketplace admiten el uso compartido de vistas (versión preliminar pública)
6 de julio de 2023
Ahora puede compartir vistas en Delta Sharing y Databricks Marketplace. Consulte Agregar vistas a un recurso compartido.
Los scripts de inicialización en DBFS llegan al final del ciclo de vida el 1 de septiembre de 2023
5 de julio de 2023
El 1 de septiembre de 2023, la compatibilidad con scripts de inicialización en DBFS llegará al final de ciclo de vida y la característica dejará de funcionar. Almacene scripts de inicialización en archivos del área de trabajo para asegurarse de que sigan funcionando después del 1 de septiembre de 2023.