Questions? Feedback? powered by Olark live chat software
Ignorar Navegação

Create a Data Factory Pipeline with Copy and Hive activities

Última atualização: 17/11/2016

This template creates a data factory pipeline with Copy and HDInsight Hive activities.

Este modelo de Gestor de Recursos do Azure (Azure Resource Manager, ARM) foi criado por um membro da comunidade e não pela Microsoft. Cada modelo de ARM está licenciado para si ao abrigo de um contrato de licença pelo respetivo proprietário e não pela Microsoft. A Microsoft não é responsável por modelos de ARM fornecidos e licenciados por membros da comunidade e não os analisa quanto a a segurança, compatibilidade ou desempenho. Os modelos de ARM da comunidade não são suportados ao abrigo de nenhum programa de suporte ou serviço da Microsoft e são disponibilizados TAL COMO ESTÃO sem qualquer tipo de garantia.

Parâmetros

Nome do Parâmetro Descrição
storageAccountResourceGroupName The resource group that contains your Azure storage account that contains the input/output data.
storageAccountName Name of the Azure storage account that contains the input/output data.
storageAccountKey Key for the Azure storage account.
blobContainer Name of the blob container in the Azure Storage account.
inputBlobFolder The folder in the blob container that has the input file.
inputBlobName Name of the input file/blob.
ftpHost Name or IP address of FTP server.
ftpUser User account that has access to the FTP server.
ftpPassword Password for the user account that has access to the FTP server.
ftpFolderName The folder in FTP that has the input file.
ftpFileName Name of the input file in FTP.
outputBlobFolder The folder in the blob container that will hold the transformed data.
hiveScriptFolder The folder in the blob container that contains the Hive query file.
hiveScriptFile Name of the hive query (HQL) file.
sqlServerName Name of the Azure SQL Server that will hold the output/copied data.
sqlDatabaseName Name of the Azure SQL Database in the Azure SQL server.
sqlServerUserName Name of the user that has access to the Azure SQL server.
sqlServerPassword Password for the user.
targetSQLTable Table in the Azure SQL Database that will hold the copied data.

Utilizar o modelo

PowerShell
New-AzureRmResourceGroupDeployment -Name <deployment-name> -ResourceGroupName <resource-group-name> -TemplateUri https://raw.githubusercontent.com/azure/azure-quickstart-templates/master/201-data-factory-ftp-hive-blob/azuredeploy.json
Instalar e configurar o PowerShell para Azure
Linha de comandos
azure config mode arm
azure group deployment create <my-resource-group> <my-deployment-name> --template-uri https://raw.githubusercontent.com/azure/azure-quickstart-templates/master/201-data-factory-ftp-hive-blob/azuredeploy.json
Instalar e Configurar a Interface de Linha de Comandos para Várias Plataformas do Azure