Provisions a Spark Cluster on Ubuntu Virtual Machines

Sist oppdatert: 06.04.2015

This template creates a Spark cluster on Ubuntu virtual machine image, enables persistence (by default) and applies all well-known optimizations and best practices

Denne Azure Resource Manager (ARM)-malen ble opprettet av et medlem av fellesskapet og ikke av Microsoft. Hver ARM-mal er lisensiert til deg i henhold til en lisensavtale med eieren, ikke med Microsoft. Microsoft er ikke ansvarlig for ARM-maler som leveres og lisensieres av medlemmer og siler dem ikke ut med tanke på sikkerhet, kompatibilitet eller ytelse. Fellesskapets ARM-maler støttes ikke av noe Microsoft-støtteprogram eller -tjeneste, og er gjort tilgjengelig SOM DE ER, uten noen form for garanti.

Parametere

Parameternavn Beskrivelse
adminUsername Administrator user name used when provisioning virtual machines
adminPassword Administrator password used when provisioning virtual machines
imagePublisher Image Publisher
imageOffer Image Offer
imageSKU Image SKU
virtualNetworkName The arbitrary name of the virtual network provisioned for the cluster
addressPrefix The network address space for the virtual network
subnetName Subnet name for the virtual network that resources will be provisioned in to
subnetPrefix Address space for the virtual network subnet
sparkVersion The version of the Spark package to be deployed on the cluster (or use 'stable' to pull in the latest and greatest)
sparkClusterName The arbitrary name of the Spark cluster (maps to cluster's configuration file name)
sparkNodeIPAddressPrefix The IP address prefix that will be used for constructing a static private IP address for each node in the cluster
sparkSlaveNodeIPAddressPrefix The IP address prefix that will be used for constructing a static private IP address for each node in the cluster
jumpbox The flag allowing to enable or disable provisioning of the jumpbox VM that can be used to access the Spark nodes
tshirtSize T-shirt size of the Spark cluster

Bruke malen

PowerShell

New-AzureRmResourceGroupDeployment -Name <deployment-name> -ResourceGroupName <resource-group-name> -TemplateUri https://raw.githubusercontent.com/azure/azure-quickstart-templates/master/spark-on-ubuntu/azuredeploy.json
Installere og konfigurere Azure PowerShell

Kommandolinje

azure config mode arm
azure group deployment create <my-resource-group> <my-deployment-name> --template-uri https://raw.githubusercontent.com/azure/azure-quickstart-templates/master/spark-on-ubuntu/azuredeploy.json
Installer og konfigurer Azures kommandolinjegrensesnitt for alle plattformer