百PB級Hadoop叢集跨機房不停機遷移實踐

百PB級Hadoop叢集跨機房不停機遷移實踐

5支援了基於空間策略的副本,這個策略的作用是讓HDFS副本選擇的時候優先考慮DN使用率比較低的DN節點(大多是新機房新上線的節點),這樣資料在寫入的時候就會寫到新機房,減少了後續的遷移壓力,不過低版本的策略有缺陷,存在出現空指標的場景,需要...

2022-08-16
智慧檢測壩面缺陷

智慧檢測壩面缺陷

圖9 缺陷誤分類案例5 結 語本文針對混凝土壩面缺陷的檢測問題,透過採用遷移學習的方式對進行了預處理的資料進行迭代訓練,得到了所需的檢測模型,並最終在測試集 上獲得了較高的檢測正確率...

2022-01-17