在Debian中部署Hadoop時，任務調度策略主要通過YARN（Yet Another Resource Negotiator）實現。YARN是一個資源調度和集群資源管理系統，負責為各種應用程序分配和管理資源。以下是在Kubernetes（K8s）環境下Hadoop的關鍵資源調度策略：
默認調度器
- kube-scheduler：Kubernetes集群的默認調度器，負責將Pod分配到集群中的節點上。通過預選階段、優選階段和綁定階段來決定Pod的調度位置。
自定義調度器
- 用戶可以編寫自己的調度器，以實現特定的調度策略。這些調度器可以與默認調度器并行運行或替換默認調度器。
親和性與反親和性
- 允許Pod指定對節點的偏好，或者根據其他Pod的運行位置來選擇調度位置，避免與某些Pod運行在同一個節點上。
污點與容忍
- 節點可以設置污點，以防止Pod調度到該節點上；Pod可以定義容忍，以允許它們被調度到有相應污點的節點上。
資源配額和限制
- 用于管理計算資源在命名空間級別的使用，限制Pod可以使用的資源總量。
優先級和搶占
- Pod可以設置優先級，用于在資源不足時決定哪個Pod可以被搶占。
在Debian上部署Hadoop時，建議根據具體的業務需求和資源管理目標，選擇合適的調度器（如Capacity Scheduler、Fair Scheduler或自定義調度器），并調整相應的調度參數，以優化作業執行效率和資源利用。
