開發生態
Yelp推出統一模型訓練平臺
iThome據報導
據報導，Yelp推出Training Orchestrator，統一不同機器學習團隊的模型訓練流程。開發者只需以Pydantic描述訓練步驟、輸入輸出與相依關係，系統便能自動組成DAG，處理執行順序、環境切換、監控與紀錄，並支援本機、Jupyter及Spark環境。每次訓練設定會存入MLflow；Yelp後續計畫加入模型評估、版本比較、可解釋性與資料血緣追蹤。
讀原始報導背景
Yelp的應用機器學習團隊過去各自維護以 Spark 為基礎的訓練批次、程式與設定，容易造成流程分散。Training Orchestrator改以設定驅動、以有向無環圖（DAG）描述執行流程，取代各團隊分別撰寫的 Spark 訓練腳本。
來源
本期分類