Provisions a Spark Cluster on Ubuntu Virtual Machines

게시자: CognosysTech
마지막 업데이트: 2015-04-06

This template creates a Spark cluster on Ubuntu virtual machine image, enables persistence (by default) and applies all well-known optimizations and best practices

이 ARM(Azure Resource Manager) 템플릿은 Microsoft가 아니라 커뮤니티 구성원에 의해 만들어졌습니다. 각 ARM 템플릿은 Microsoft가 아닌 해당 소유자에 의해 사용이 허가됩니다. Microsoft는 커뮤니티 구성원에 의해 제공 및 라이선스가 부여된 ARM에 대해 책임이 없으며, 보안, 호환성 또는 성능을 검사하지 않습니다. 커뮤니티 ARM 템플릿은 Microsoft 지원 프로그램 또는 서비스에서 지원되지 않고, 어떠한 보증도 없이 있는 그래도 제공됩니다.

매개 변수

매개 변수 이름 설명
adminUsername Administrator user name used when provisioning virtual machines
adminPassword Administrator password used when provisioning virtual machines
imagePublisher Image Publisher
imageOffer Image Offer
imageSKU Image SKU
virtualNetworkName The arbitrary name of the virtual network provisioned for the cluster
addressPrefix The network address space for the virtual network
subnetName Subnet name for the virtual network that resources will be provisioned in to
subnetPrefix Address space for the virtual network subnet
sparkVersion The version of the Spark package to be deployed on the cluster (or use 'stable' to pull in the latest and greatest)
sparkClusterName The arbitrary name of the Spark cluster (maps to cluster's configuration file name)
sparkNodeIPAddressPrefix The IP address prefix that will be used for constructing a static private IP address for each node in the cluster
sparkSlaveNodeIPAddressPrefix The IP address prefix that will be used for constructing a static private IP address for each node in the cluster
jumpbox The flag allowing to enable or disable provisioning of the jumpbox VM that can be used to access the Spark nodes
tshirtSize T-shirt size of the Spark cluster

템플릿 사용

PowerShell
New-AzureRmResourceGroupDeployment -Name <deployment-name> -ResourceGroupName <resource-group-name> -TemplateUri https://raw.githubusercontent.com/azure/azure-quickstart-templates/master/spark-on-ubuntu/azuredeploy.json
Azure PowerShell 설치 및 구성
명령줄
azure config mode arm
azure group deployment create <my-resource-group> <my-deployment-name> --template-uri https://raw.githubusercontent.com/azure/azure-quickstart-templates/master/spark-on-ubuntu/azuredeploy.json
Azure 크로스 플랫폼 명령줄 인터페이스 설치 및 구성