Novedades de Azure Data Factory
El servicio Azure Data Factory se mejora de forma continua. Para mantenerse al día de los avances más recientes, este artículo proporciona información acerca de los elementos siguientes:
- Versiones más recientes
- Problemas conocidos
- Corrección de errores
- Funciones obsoletas
- Planes de cambios
Esta página se actualiza mensualmente, por lo que se recomienda visitarla con frecuencia.
Octubre de 2021
| Categoría del servicio | Mejoras en el servicio | Detalles |
| Flujo de datos | Conectores de Azure Data Explorer y Amazon Web Services S3 | El equipo de Integración de datos de Microsoft acaba de publicar dos nuevos conectores para asignar flujos de datos. Si usa Azure Synapse, ahora puede conectarse directamente a los cubos de AWS S3 para realizar transformaciones de datos. Tanto en Azure Data Factory como Azure Synapse, ahora puede conectarse de forma nativa a los clústeres de Azure Data Explorer en flujos de datos de asignación. Más información |
| Actividades de Power Query que dejan la versión preliminar para disponibilidad general (GA) | Microsoft ha publicado la actividad de canalización de Power Query de Azure Data Factory como "Disponible de forma general". Esta nueva característica proporciona la opción para preparar los datos de escalabilidad horizontal y reorganizarlos para los integradores de ciudadanos dentro de la interfaz de usuario del explorador de ADF para obtener una experiencia integrada para los ingenieros de datos. La característica de limpieza y transformación de datos de Power Query en ADF proporciona una potente capacidad de canalización fácil de usar para resolver sus patrones ETL y de integración de datos más complejos en un solo servicio. Más información | |
| Nueva transformación de datos que se convierten a cadena JSON en flujos de datos de asignación | La asignación de flujos de datos ha agregado una nueva transformación de datos denominada "Convertir a cadena JSON" para facilitar la conversión de tipos de datos complejos como estructuras y matrices en formato de cadena que se pueden enviar a destinos de salida estructurados. Más información | |
| Integration Runtime | Red virtual administrada de Azure Data Factory pasa a GA | Ahora puede aprovisionar Azure Integration Runtime como parte de una red virtual administrada y aprovechar los puntos de conexión privados para conectarse de forma segura a los almacenes de datos admitidos. El tráfico de datos atraviesa los vínculos de Azure Private Link, que proporcionan conectividad segura al origen de datos. Además, evita la filtración de datos a la red pública de Internet. Más información |
| Inserción de red virtual express para el entorno de ejecución de integración de SSIS (versión preliminar pública) | El entorno de ejecución de integración de SSIS ahora admite la inserción de red virtual express. Más información: Introducción a la inserción de red virtual para el entorno de ejecución de integración de SSIS Inserción de red virtual estándar contra express para el entorno de ejecución de integración de SSIS Inserción de red virtual express para el entorno de ejecución de integración de SSIS |
|
| Seguridad | Mejora de la integración de Azure Key Vault | Hemos mejorado la integración de Azure Key Vault añadiendo listas desplegables seleccionables por el usuario para elegir los valores secretos en el servicio vinculado, lo que aumenta la productividad y no requiere que los usuarios escriban los secretos, lo que podría provocar un error humano. |
| Compatibilidad con la identidad administrada asignada por el usuario en Azure Data Factory | La seguridad de las credenciales es fundamental para cualquier empresa. Con esto en mente, el equipo de Azure Data Factory (ADF) se compromete a hacer que el proceso de ingeniería de datos sea seguro pero sencillo para los ingenieros de datos. Nos complace anunciar la compatibilidad con la identidad administrada asignada por el usuario (versión preliminar) en todos los conectores o servicios vinculados que admiten la autenticación de Azure Active Directory (Azure AD). Más información |
Septiembre de 2021
| Categoría del servicio | Mejoras en el servicio | Detalles |
| Integración continua y entrega continua (CI/CD) | Funcionalidades de CI/CD ampliadas | Ahora puede crear una rama de Git basada en cualquier otra de Azure Data Factory. Más información |
| Movimiento de datos | Amazon Relational Database Service (RDS) para orígenes de Oracle | El conector de Amazon RDS para orígenes de Oracle ya está disponible tanto en Azure Data Factory como en Azure Synapse. Más información |
| Amazon RDS para orígenes de SQL Server | El conector de Amazon RDS para orígenes de SQL Server ya está disponible tanto en Azure Data Factory como en Azure Synapse. Más información | |
| Compatibilidad con la copia paralela de Azure Database for PostgreSQL | El conector de Azure Database for PostgreSQL ahora admite operaciones de copia paralela. Más información | |
| Flujo de datos | Uso de Azure Data Lake Storage (ADLS) Gen2 para ejecutar comandos previos y posteriores al procesamiento | Los comandos previos y posteriores al procesamiento del sistema de archivos distribuido de Hadoop (HDFS) ahora se pueden ejecutar mediante receptores de ADLS Gen2 en flujos de datos Más información |
| Edición de propiedades de flujos de datos para las instancias existentes de Azure Integration Runtime (IR) | Azure Integration Runtime (IR) se ha actualizado para permitir la edición de propiedades de flujos de datos para los entorno de ejecución de integración existentes. Ahora puede modificar las propiedades del proceso del flujo de datos sin necesidad de crear una instancia de Azure IR. Más información | |
| Configuración de TTL para Azure Synapse para mejorar el tiempo de inicio de ejecución de actividades de canalización | Azure Synapse Analytics ha agregado TTL a Azure Integration Runtime para que las actividades de canalización de flujo de datos puedan comenzar a ejecutarse en segundos, lo que minimiza considerablemente el tiempo de ejecución de las canalizaciones de flujo de datos. Más información | |
| Integration Runtime | Red virtual administrada de Azure Data Factory pasa a GA | Ahora puede aprovisionar Azure Integration Runtime como parte de una red virtual administrada y aprovechar los puntos de conexión privados para conectarse de forma segura a los almacenes de datos admitidos. El tráfico de datos atraviesa los vínculos de Azure Private Link, que proporcionan conectividad segura al origen de datos. Además, evita la filtración de datos a la red pública de Internet. Más información |
| Orquestación | Operacionalizar y proporcionar un Acuerdo de Nivel de Servicio para canalizaciones de datos | La combinación de la nueva métrica de tiempo transcurrido en la ejecución de canalización con las alertas de Data Factory permite a los desarrolladores de canalizaciones de datos ofrecer mejores SLA a sus clientes: usted nos dice cuánto tiempo se debe ejecutar una canalización y le enviaremos una notificación de forma proactiva cada vez que la canalización se ejecute más tiempo del esperado. Más información |
| Actividad de error (versión preliminar pública) | La nueva actividad de error permite producir un error en una canalización intencionadamente por cualquier motivo. Por ejemplo, puede usar la actividad de error si una actividad de búsqueda no devuelve datos que coincidan o una actividad personalizada finaliza con un error interno. Más información |
Agosto de 2021
| Categoría del servicio | Mejoras en el servicio | Detalles |
| Integración continua y entrega continua (CI/CD) | Mejoras de CI/CD con compatibilidad de GitHub en Azure Government y Azure China | Se ha agregado compatibilidad con GitHub en Azure Government y Azure China. Más información |
| Movimiento de datos | La API de Azure Cosmos DB de para el conector MongoDB es ahora compatible con las versiones 3.6 y 4.0 de Azure Data Factory. | La API de Cosmos DB de Azure Data Factory para el conector MongoDB es ahora compatible con las versiones del servidor 3.6 y 4.0. Más información |
| Mejore el uso de la instrucción COPY para cargar datos en Azure Synapse Analytics. | El conector de Azure Synapse Analytics de Azure Data Factory ahora admite la copia por fases y el origen de copia con *.* como wildcardFilename para la instrucción COPY. Más información | |
| Flujo de datos | Los puntos de conexión REST están disponibles como origen y receptor en Data Flow. | Los flujos de datos de Azure Data Factory y Azure Synapse Analytics ahora admiten puntos de conexión REST como origen y receptor con compatibilidad total con cargas útiles JSON y XML. Más información |
| Integration Runtime | La herramienta de diagnóstico está disponible para el entorno de ejecución de integración autohospedado. | Una herramienta de diagnóstico para el entorno de ejecución de integración auto-hospedado está diseñada para proporcionar una mejor experiencia de usuario y ayudar a los usuarios a encontrar posibles problemas. La herramienta ejecuta una serie de escenarios de prueba en la máquina del entorno de ejecución de integración autohospedado y cada escenario tiene casos de comprobación de estado típicos para problemas comunes. Más información |
| Orquestación | El desencadenador de eventos personalizado con la opción de filtrado avanzado está disponible de forma general. | Ahora puede crear un desencadenador que responda a un tema personalizado publicado en Event Grid. Además, puede aprovechar el filtrado avanzado para obtener un control preciso sobre los eventos a los que responder. Más información |
Julio de 2021
| Categoría del servicio | Mejoras en el servicio | Detalles |
| Movimiento de datos | Obtención de canalizaciones de ingesta de datos controladas por metadatos en la herramienta Copiar datos de ADF en 10 minutos (versión preliminar pública) | Con esto, puede compilar canalizaciones de copia de datos a gran escala con un enfoque basado en metadatos en la herramienta de copiar datos (versión preliminar pública) en 10 minutos. Más información |
| Flujo de datos | Nuevas funciones de asignación agregadas en las funciones de transformación de flujo de datos | Se ha agregado un nuevo conjunto de funciones de transformación de flujo de datos para permitir que los ingenieros de datos generen, lean y actualicen fácilmente tipos de datos de asignación y estructuras de asignación complejas. Más información |
| Integration Runtime | Cinco nuevas regiones disponibles en la VNET administrada de Azure Data Factory (versión preliminar pública) | Estas cinco nuevas regiones (Este de China 2, Norte de China 2, US Gov Arizona, US Gov Texas, US Gov Virginia) están disponibles en una red virtual administrada de Azure Data Factory (versión preliminar pública). Más información |
| Productividad de los desarrolladores | Mejoras en la página principal de ADF | La página principal de Data Factory se ha rediseñado con mejores funcionalidades de contraste y reflujo. Además, se han introducido algunas secciones en la página principal para ayudarle a mejorar la productividad en el recorrido de integración de datos. Más información |
| Nueva página de aterrizaje para Azure Data Factory Studio | Página de aterrizaje de la hoja Data Factory en Azure Portal Más información |
Junio de 2021
| Categoría del servicio | Mejoras en el servicio | Detalles |
| Movimiento de datos | Nueva experiencia del usuario con la herramienta Copiar datos de Azure Data Factory | La herramienta Copiar datos rediseñada ya está disponible con una experiencia de ingesta de datos mejorada. Más información |
| MongoDB y MongoDB Atlas se admiten como origen y receptor | Esta mejora admite la copia de datos entre cualquier almacén de datos compatible y la base de datos de MongoDB o MongoDB Atlas. Más información | |
| Always Encrypted es compatible con los conectores de Azure SQL Database, Azure SQL Managed Instance y SQL Server como origen y receptor | Always Encrypted está disponible en Azure Data Factory para los conectores de Azure SQL Database, Azure SQL Managed Instance y SQL Server para la actividad de copia. Más información | |
| La configuración de metadatos personalizados se admite en la actividad de copia si la recepción tiene lugar en ADLS Gen2 o Azure Blob | Cuando se escribe en ADLS Gen2 o Azure Blob, la actividad de copia admite la configuración de metadatos personalizados o el almacenamiento de la información de fecha de la última modificación del archivo de origen como metadatos. Más información | |
| Flujo de datos | SQL Server se admite ahora como origen y receptor en los flujos de datos | SQL Server se admite ahora como origen y receptor en los flujos de datos. Siga el vínculo para obtener instrucciones sobre cómo configurar las redes mediante la característica de red virtual administrada de Azure Integration Runtime para hablar con las instancias de SQL Server locales y basadas en máquinas virtuales en la nube. Más información |
| La reutilización rápida del clúster de flujo de datos ahora está habilitada de forma predeterminada para todas las nuevas instancias de Azure Integration Runtime. | ADF se complace en anunciar la disponibilidad general de la popular característica de reutilización de inicio rápido de flujo de datos. Ahora, todas las nuevas instancias de Azure Integration Runtime dispondrán de la reutilización rápida habilitada de manera predeterminada. Más información | |
| Actividad de Power Query (versión preliminar pública) | Ahora puede crear asignaciones de campos complejas en el receptor de Power Query mediante la limpieza y transformación de datos de Azure Data Factory. El receptor ahora está configurado en la canalización de la actividad de Power Query (versión preliminar pública) para dar cabida a esta actualización. Más información | |
| Se ha actualizado la interfaz de usuario de supervisión de flujos de datos en Azure Data Factory. | Azure Data Factory tiene una nueva actualización de la interfaz de usuario de supervisión para facilitar la visualización de las ejecuciones de trabajos de ETL del flujo de datos e identificar rápidamente áreas para la optimización del rendimiento. Más información | |
| SQL Server Integration Services (SSIS) | Ejecute cualquier instancia de SQL en 3 pasos sencillos con SSIS en Azure Data Factory | En esta publicación se proporcionan tres pasos sencillos para ejecutar cualquier instancia de SQL o script en cualquier lugar con SSIS en Azure Data Factory.
|