This template creates a Spark cluster on Ubuntu virtual machine image, enables persistence (by default) and applies all well-known optimizations and best practices
Этот шаблон Azure Resource Manager (ARM) был создан участником сообщества, а не Майкрософт. Каждый шаблон ARM лицензирован для вас в соответствии с условиями лицензионного соглашения с владельцем, а не с Майкрософт. Майкрософт не несет ответственности за шаблоны ARM, предоставленные и лицензированные членами сообщества, и не отслеживает их безопасности, совместимости или производительности. Шаблоны ARM, созданные сообществом, не поддерживаются ни в соответствии с какой-либо программой поддержки Майкрософт, ни какими-либо службами поддержки Майкрософт и предоставляются КАК ЕСТЬ без каких-либо гарантий.
Параметры
| Имя параметра | Описание |
|---|---|
| adminUsername | Administrator user name used when provisioning virtual machines |
| adminPassword | Administrator password used when provisioning virtual machines |
| imagePublisher | Image Publisher |
| imageOffer | Image Offer |
| imageSKU | Image SKU |
| virtualNetworkName | The arbitrary name of the virtual network provisioned for the cluster |
| addressPrefix | The network address space for the virtual network |
| subnetName | Subnet name for the virtual network that resources will be provisioned in to |
| subnetPrefix | Address space for the virtual network subnet |
| sparkVersion | The version of the Spark package to be deployed on the cluster (or use 'stable' to pull in the latest and greatest) |
| sparkClusterName | The arbitrary name of the Spark cluster (maps to cluster's configuration file name) |
| sparkNodeIPAddressPrefix | The IP address prefix that will be used for constructing a static private IP address for each node in the cluster |
| sparkSlaveNodeIPAddressPrefix | The IP address prefix that will be used for constructing a static private IP address for each node in the cluster |
| jumpbox | The flag allowing to enable or disable provisioning of the jumpbox VM that can be used to access the Spark nodes |
| tshirtSize | T-shirt size of the Spark cluster |
| location | Location for all resources. |
Использование шаблона
PowerShell
New-AzureRmResourceGroupDeployment -Name <deployment-name> -ResourceGroupName <resource-group-name> -TemplateUri https://raw.githubusercontent.com/Azure/azure-quickstart-templates/master/spark-on-ubuntu/azuredeploy.jsonУстановка и настройка служб Azure PowerShell
Командная строка
azure config mode armУстановка и настройка кросс-платформенного интерфейса командной стройки Azure
azure group deployment create <my-resource-group> <my-deployment-name> --template-uri https://raw.githubusercontent.com/Azure/azure-quickstart-templates/master/spark-on-ubuntu/azuredeploy.json