我的 HDInsight 叢集需要多少個資料節點?

資料節點數目根據您的需求而有所不同。利用 Azure 雲端服務所具備的彈性,您可以嘗試各種叢集大小,以決定您自己最佳的效能和成本組合,只需對您任何時候使用的資源付費。叢集也可以依需求調整及縮小,以符合工作量的需求。

HDInsight

相關問題和答案

  • 每一個訂閱可建立多少個 HDInsight 資料節點都有預設限制。如果您需要建立更大的 HDInsight 叢集或多個 HDInsight 叢集,而總計超過目前的訂閱上限,您可以要求提高訂閱的計費上限。請使用「支援類型 = 計費」來開啟支援票證。根據您要求的每一訂閱的節點上限而定,可能會要求您提供其他資訊,讓我們能夠將您的部署最佳化。

  • 若要估計各種叢集大小的成本,請使用 Azure 計算機

  • 我們會針對叢集的執行分鐘數 (非時數) 進行收費,四捨五入到最接近的分鐘數。

  • HDInsight 為每種叢集類型部署的節點數各不相同。在特定叢集內,不同節點扮演的角色也不盡相同,如此能讓客戶根據工作負載的詳細資料將這些節點調整為合適的角色。例如,對於 Hadoop 叢集,如果執行的分析類型需消耗大量記憶體,您可以將叢集的背景工作節點佈建為擁有龐大記憶體。 適用於 HDInsight 的 Hadoop 叢集可藉由部署,而擁有兩個角色:

    • 前端節點 (2 個節點)
    • 資料節點 (至少 1 個節點) 適用於 HDInsight 的 HBase 叢集可藉由部署,而擁有三個角色:
    • 前端伺服器 (2 個節點)
    • 區域伺服器 (至少 1 個節點)
    • Master/Zookeepe 節點 (3 個節點) 適用於 HDInsight 的 Storm 叢集可部署為擁有三個角色:
    • Nimbus 節點 (2 個節點)
    • 監督伺服器 (至少 1 個節點)
    • Zookeeper 節點 (3 個節點) 適用於 HDInsight 的 Spark 叢集可藉由部署,而擁有三個角色:
    • 前端節點 (2 個節點)
    • 背景工作節點 (至少 1 個節點)
    • Zookeeper 節點 (3 個節點) (對 A1 Zookeeper 而言為免費) 使用 R-Server 會在叢集部署架構之外,增加一個邊緣節點。
  • If you run a cluster for 100 hours in US East with two D13 v2 head nodes, three D12 v2 data nodes, and three D11 v2 zookeepers, the billing would be the following in the two scenarios:

    • On a Standard HDInsight cluster—100 hours x (2 x $-/hour + 3 x $-/hour + 3 x $-/hour) = $-
    • On a Standard HDInsight cluster with Enterprise Security Package—100 hours x (2 x $-/hour + 3 x $-/hour + 3 x $-/hour) + 100 hours x (2 x 8 + 3 x 4 + 3 x 2) x $-/core-hour = $-
  • 您必須刪除叢集才能停止 HDInsight 叢集。依預設,所有 HDInsight 叢集作業的資料都會存放在 Azure Blob 儲存體中,因此資料不會受到此影響。如果您想要保存 Hive 中繼資料 (資料表,結構描述),您應該以外部中繼資料儲存空間佈建叢集。您可以在此文件中找到更多詳細資料。