Lambda架構

Lambda架構

Batch Layer的功能主要有兩點:儲存master dataset, 這是一個不變的持續增長的資料集在master dataset上預先計算查詢函式,構建查詢所對應的View儲存資料集根據前述對資料When&What特性的討論...

2021-12-21
批處理框架-- Spring Batch

批處理框架-- Spring Batch

在使用Spring batch的過程當中spring batch會自動建立一些表用於儲存一些job相關的資訊,用於儲存JobExecution的表為batch_job_execution,下面是一個從資料庫當中截圖的例項:什麼是Step每一...

2021-10-05
PyTorch中模型的可復現性

PyTorch中模型的可復現性

在yolov3中使用的就是線上增強,比如其中一部分增強方法:可以看到,如果設定了線上增強,那麼模型會以一定的機率進行增強,這樣會導致每次執行得到的訓練樣本可能是不一致的,這也就造成了模型的不可復現...

2021-05-12