La versión preliminar pública de Azure Data Factory (ADF) v2 se anunció en Microsoft Ignite el 25 de septiembre de 2017. Con ADF v2, hemos agregado flexibilidad al modelo de aplicación de ADF y hemos habilitado construcciones de flujo de control que facilitan la creación de bucles, ramas, construcciones condicionales, ejecuciones a petición y programaciones flexibles en varias interfaces de programación, como Python, .Net, Powershell, API de REST y plantillas de ARM. Una de las peticiones en las que han coincidido los clientes es que se habilite una experiencia de creación y supervisión visual interactiva y muy completa que permita a los usuarios crear, configurar, probar, implementar y supervisar canalizaciones de integración de datos sin problemas. Hemos hecho caso de sus comentarios y nos complace anunciar el lanzamiento de Visual Tools para ADF v2. El objetivo principal de ADF Visual Tools es permitirle ser productivo con ADF, por lo que permite poner en marcha canalizaciones sin necesidad de escribir una sola línea de código. Puede usar una interfaz sin código, sencilla e intuitiva para arrastrar y colocar actividades al lienzo de una canalización, realizar series de pruebas y depuraciones de forma repetida, así como implementar y supervisar la ejecución de las canalizaciones. Esta versión incluye también paseos guiados donde se explica cómo utilizar las características de creación y supervisión visual habilitadas y funcionalidad para que los usuarios proporcionen sus valiosos comentarios.

Nuestro objetivo con Visual Tools para ADF v2 es aumentar la productividad y la eficiencia de los usuarios, tanto nuevos como avanzados, con una experiencia intuitiva. Para comenzar, haga clic en el icono Crear y supervisar en la hoja de Data Factory v2 aprovisionada.

 

Eche un vistazo a algunas de las fascinantes características que se han habilitado con la nueva versión de Visual Tools en ADF v2. También puede ver este breve vídeo:

 

Póngase en marcha rápido

1. Cree su primera canalización de ADF v2.

2. Copie rápidamente datos de un grupo de orígenes de datos con el asistente para copia.

3. Configure entornos de ejecución de integración de SSIS IR para migrar paquetes SSIS mediante lift and shift a Azure.

4. Configure un repositorio de código (VSTS GIT) para control de código fuente, colaboración, control de versiones, etc..

Creación visual

Creación de canalizaciones de flujo de control

Cree canalizaciones, arrastre y coloque actividades, conéctelas si se ejecutan correctamente, si dan error o cuando se completan.

Crear entornos de ejecución de integración en Azure y autohospedados

Cree un entorno de ejecución autohospedado para el traslado de datos híbridos o una instancia de Azure-SSIS IR para migrar paquetes SSIS mediante lift-and-shift a Azure. Cree conexiones de servicios vinculados para sus almacenes de datos o instancias de proceso.

Compatibilidad con todas las actividades de flujo de control que se ejecutan en servicios de proceso de Azure

Actividades de flujo de control:

• HDInsight Hive, HDInsight Pig, HDInsight MapReduce, HDI Streaming, HDI Spark, U-SQL, StoredProcedure, Web, ForEach, GetMetadata, Lookup, ExecutePipeline

Compatibilidad con servicios de proceso de Azure:

• HDI (a petición, BYOC), ADLA, Azure Batch

Desarrollo y depuración iterativos

Ejecute series de pruebas antes de asociar un desencadenador a la canalización y ejecutarla a petición o de acuerdo con una programación.

Parametrizar canalizaciones y conjuntos de datos

Use expresiones y variables del sistema para las parametrizaciones.

Completa funcionalidad de validación

Ahora puede validar sus canalizaciones para detectar configuraciones de propiedades que falten o sean incorrectas. Solo tiene que hacer clic en el botón Validar en el lienzo de la canalización. Esto generará una salida de validación en el cajón lateral. Después, puede hacer clic en cada entrada para ir directamente al lugar que falta por validar.

Desencadenar canalizaciones

Desencadene canalizaciones a petición o ejecútelas siguiendo una programación.

Usar VSTS GIT

VSTS GIT para control de código fuente, colaboración, control de versiones, etc.

Copia de datos

Almacenes de datos (65)

Se admiten 65 almacenes de datos. 18 almacenes con soporte técnico de primera clase que requiere que los usuarios proporcionen solo valores de configuración. Los otros 47 almacenes se pueden usar con JSON.

18 almacenes con soporte técnico de primera clase:

• Azure Blob, Azure CosmosDB, Azure Database for MySQL, Azure Data Lake Store, Amazon Redshift, Amazon S3, Azure SQL DW, Azure SQL, Azure Table, File System, HDFS, MySQL, ODBC, Oracle, Salesforce, SAP HANA, SAP BW, SQL Server.

47 almacenes que funcionan con JSON:

• Search Index, Cassandra, HTTP file, Mongo DB, OData, Relational table, Dynamics 365, Dynamics CRM, Web table, AWS Marketplace, PostgreSQL, Concur, Couchbase, Drill, Oracle Eloqua, Google Big Query, Greenplum, HBase, Hive, HubSpot, Apache Impala, Jira, Magento, MariaDB, Marketo, PayPal, Phoenix, Presto, QuickBooks, ServiceNow, Shopify, Spark, Square, Xero, Zoho, DB2, FTP, GE Historian, Informix, Microsoft Access, MongoDB, SAP Cloud for customer.

Copiar datos rápidamente de un grupo de orígenes de datos con el asistente para copia

El asistente para copia de ADF v1 que ya conoce está disponible ahora en ADF v2 para hacer una importación rápida de una sola vez. El asistente para copia genera canalizaciones con actividades de copia en el lienzo de creación. Las actividades de copia se pueden ampliar ahora para ejecutar otras actividades (como Spark, USQL, StoredProcedure, etc.) cuando se ejecutan correctamente, si dan error, etc. y crear toda la canalización del flujo de control.

Paseo guiado

Haga clic en el icono de información de la esquina inferior izquierda. Después, puede hacer clic en Paseo guiado para obtener instrucciones detalladas para supervisar visualmente la canalización y la ejecución de actividades.

Comentarios

Haga clic en el icono Comentarios para enviarnos su opinión sobre las diferentes características o sobre problemas que haya podido encontrar.

Selección de factoría de datos

Mantenga el puntero sobre el icono Factoría de datos de la esquina superior izquierda. Haga clic en el icono de flecha para ver una lista de suscripciones de Azure y factorías de datos que puede supervisar.

Supervisión visual

Supervisión con una vista de lista

Supervise la ejecución de canalizaciones, actividades y desencadenadores en una sencilla interfaz de vista de lista. Todas las ejecuciones se muestran con la zona horaria del explorador local. Puede cambiar la zona horaria y todos los campos de fecha y hora cambiarán a la zona horaria seleccionada.

Supervisión de ejecuciones de canalización:

Vista de lista que muestra cada ejecución de sus canalizaciones de Data Factory v2.

Supervisión de ejecuciones de actividad:

Vista de lista que muestra las ejecuciones correspondientes a cada ejecución de canalización. Haga clic en el icono Ejecuciones de actividad en la columna Acciones para ver las ejecuciones de actividad para cada ejecución de canalización.

Nota importante: Debe hacer clic en el icono Actualizar de la parte superior para actualizar la lista de ejecuciones de canalización y de actividad. Actualmente, no se ofrece actualización automática.

Supervisión de ejecuciones de desencadenador:

Completa funcionalidad de ordenación y filtrado

Ordene las ejecuciones de canalización en orden ascendente o descendente por inicio de ejecución y filtre las ejecuciones de canalización por nombre de canalización, inicio de ejecución y estado de ejecución.

Agregar o quitar columnas a la vista de lista

Haga clic con el botón derecho en el encabezado de la vista de lista y elija las columnas que desea que aparezcan en la vista de lista.

Reordenar el ancho de las columnas en la vista de lista

Para aumentar o reducir el ancho de las columnas en la vista de lista, mantenga el puntero sobre el encabezado de la columna.

Supervisar entornos de ejecución de integración

Supervise el estado de mantenimiento de sus entornos de ejecución de integración autohospedados, en Azure y de Azure-SSIS Integration Runtime.

Cancelar la ejecución de canalizaciones o volver a ejecutarlas

Cancele la ejecución de una canalización o vuelva a ejecutarla con parámetros ya definidos.

Esta es la primera versión pública de ADF v2 Visual Tools. Trabajamos continuamente para actualizar las partes que ya se han publicado con nuevas características según nos van indicando los clientes en sus comentarios. Puede obtener más información e instrucciones detalladas para utilizar ADF v2 Visual Tools.

Comience a crear canalizaciones con facilidad y rapidez usando Azure Data Factory. Si desea solicitar características o hacer algún comentario, visite el foro de Azure Data Factory.