我是做算法的日常跟模型、特征、訓(xùn)練打交道。今天不聊技術(shù)想跟同行聊個(gè)我親身趟過的隱性過擬合——用咱們這行能聽懂的方式說。一、這組特征從去年冬天開始漂移我身體狀態(tài)一向像訓(xùn)練集基線平穩(wěn)可預(yù)期?？蓮娜ツ耆攵_始這套指標(biāo)悄悄變了分泌物不太對(duì)勁時(shí)多時(shí)少還帶點(diǎn)異味下腹偶爾隱隱墜著久坐悶著更明顯。我當(dāng)成噪聲、換季正常波動(dòng)壓根沒當(dāng)回事——跟線上偶發(fā)的warning一樣沒到告警閾值就懶得查更沒寫進(jìn)迭代復(fù)盤。那陣子項(xiàng)目趕上線我連著值了幾個(gè)夜班咖啡當(dāng)水灌身體這條loss曲線早該盯了我卻假裝收斂。二、滄州土生土長(zhǎng)風(fēng)土里熬出來的累我是土生土長(zhǎng)的滄州人爸媽住在運(yùn)河區(qū)從小啃著金絲小棗、看吳橋雜技長(zhǎng)大。咱這兒冬天干冷屋里暖氣一開人整日縮在工位上盯著屏幕調(diào)參水都忘了喝?；疱侂u倒是沒少吃可辣的越吃越燥。咱滄州到底是武術(shù)之鄉(xiāng)可我這點(diǎn)精氣神全耗在模型里鐵獅子跟前遛彎的勁兒都沒了樣本里的休息那一行數(shù)據(jù)被我一路刪到了零。三、同事一句話把我從過擬合里拉出來組里leader看我老揉肚子、臉色發(fā)白私下說你這模型沒收斂得去查查別硬撐。我想起自己常跟新人念叨特征漂移要早干預(yù)、別等過擬合再救輪到自己卻一拖再拖。前陣子正好休班我才動(dòng)了念頭。