做安防項(xiàng)目這些年夜視這塊一直是讓人又愛又恨的部分。愛的是需求實(shí)在太多小區(qū)、工地、養(yǎng)殖場、倉庫哪個(gè)地方晚上不需要看恨的是傳統(tǒng)紅外方案拍出來的畫面黑白的人臉看不清、車牌讀不出、衣服顏色全是灰的出了事想復(fù)盤畫面壓根不具備證據(jù)價(jià)值。所以當(dāng)“AI全彩邊緣計(jì)算云平臺(tái)”這套組合開始能真正落地的時(shí)候我第一時(shí)間就把手里的一個(gè)中型園區(qū)項(xiàng)目改了方案前后踩了無數(shù)坑也把整套鏈路摸透了。這篇文章就把這個(gè)方案的完整設(shè)計(jì)思路、硬件選型、模型部署、云平臺(tái)搭建到排障方法一次講完給正在做同類項(xiàng)目的安防工程師、系統(tǒng)集成商、還有打算自己搭一套監(jiān)控體系的開發(fā)團(tuán)隊(duì)做個(gè)參考。1. 項(xiàng)目整體設(shè)計(jì)與方案選型1.1 為什么放棄傳統(tǒng)紅外夜視改做AI全彩傳統(tǒng)紅外夜視方案的問題不在于“看不見”而在于“看得見卻認(rèn)不清”。紅外燈打出去傳感器接收的是反射的紅外光畫面天然是黑白的而且因?yàn)榧t外光的波長特性畫面經(jīng)常出現(xiàn)“發(fā)白”“發(fā)霧”的現(xiàn)象人臉細(xì)節(jié)丟失得很厲害。更麻煩的是彩色信息一旦丟失后續(xù)做AI識(shí)別就會(huì)很被動(dòng)——車牌識(shí)別依賴顏色行人穿著描述依賴顏色人臉的膚色特征也依賴顏色黑白畫面等于直接把AI的一半輸入信息砍掉了。全彩夜視的邏輯是換一條路用低照度大靶面?zhèn)鞲衅髋渖洗蠊馊︾R頭再加上智能補(bǔ)光策略和AI圖像增強(qiáng)算法讓攝像機(jī)在光線極暗的環(huán)境下也能輸出彩色畫面同時(shí)保留足夠清晰的紋理細(xì)節(jié)。這樣做的直接收益就是AI識(shí)別率上來了事后取證有效了客戶也愿意為“夜里也能看到彩色畫面”買單。但是全彩方案不是簡單換一顆傳感器就能做成的它需要邊緣算力去跑圖像增強(qiáng)算法也需要一個(gè)能遠(yuǎn)程管理大量設(shè)備的云平臺(tái)來統(tǒng)一調(diào)度。這正好引出了這套方案的三層架構(gòu)邏輯。1.2 邊緣計(jì)算和云平臺(tái)在這套方案里分別干什么很多做監(jiān)控工程的朋友對(duì)“邊緣計(jì)算”和“云平臺(tái)”的理解是“二者選其一”覺得上了邊緣就不需要云上了云就把所有視頻傳到云端去跑分析。這個(gè)理解在安防場景里是很大的誤區(qū)。邊緣計(jì)算和云平臺(tái)不是替代關(guān)系而是分工關(guān)系各管一段。邊緣計(jì)算負(fù)責(zé)的是“即時(shí)反應(yīng)”和“隱私過濾”視頻流永遠(yuǎn)在本地做AI推理人臉抓拍、人體檢測、火焰識(shí)別、區(qū)域入侵這些任務(wù)全部在設(shè)備側(cè)完成只有“產(chǎn)生告警的事件片段”和“結(jié)構(gòu)化特征數(shù)據(jù)”才會(huì)上云原始視頻流默認(rèn)不出本地網(wǎng)絡(luò)云平臺(tái)負(fù)責(zé)的是“全局管理”和“事后追溯”統(tǒng)一管理成百上千臺(tái)邊緣設(shè)備下發(fā)算法模型、調(diào)整補(bǔ)光策略、遠(yuǎn)程升級(jí)固件接收邊緣端上報(bào)的告警事件做存儲(chǔ)、檢索、聯(lián)動(dòng)通知向Web端、App端提供統(tǒng)一的視頻回看、告警彈窗、電子地圖等服務(wù)這樣做最大的好處是帶寬省了、實(shí)時(shí)性上去了、隱私問題也解決了。一個(gè)400萬像素的攝像頭主碼流算下來至少4Mbps100臺(tái)設(shè)備全量上云需要400Mbps帶寬普通項(xiàng)目根本扛不住而在邊緣端做推理一幀檢測只需要幾十毫秒比視頻傳回云端再分析快了一個(gè)數(shù)量級(jí)真正做到了“事發(fā)生即知道”。1.3 方案選型要考量的三個(gè)核心維度我在選型時(shí)給自己定了三個(gè)硬指標(biāo)這套思路也可以直接套用到你自己的項(xiàng)目里。第一個(gè)指標(biāo)是場景適配度。全彩夜視不是萬能的室內(nèi)外光照環(huán)境差異極大。室內(nèi)可以依賴補(bǔ)光燈室外如果補(bǔ)光太強(qiáng)會(huì)擾民太弱又達(dá)不到全彩效果。所以攝像機(jī)必須支持可調(diào)補(bǔ)光策略最好帶有IR-CUT雙濾鏡自動(dòng)切換白天切紅外截止濾鏡保證顏色準(zhǔn)確夜間切全光譜濾鏡配合補(bǔ)光。第二個(gè)指標(biāo)是算力冗余度。邊緣AI芯片的算力不能剛好卡在需求線上要留有30%以上的余量。因?yàn)樗惴Ｐ褪遣粩嗟慕裉炫芤粋€(gè)人形檢測明天可能要加一個(gè)煙霧識(shí)別如果算力吃得太滿新模型就推不上去。我在這套方案里選擇的是2TOPS左右的AI算力芯片跑兩三個(gè)輕量檢測模型比較從容。第三個(gè)指標(biāo)是運(yùn)維友好度。安防設(shè)備部署在室外或工地現(xiàn)場遠(yuǎn)程運(yùn)維能力是剛需。如果設(shè)備不支持遠(yuǎn)程升級(jí)、不支持遠(yuǎn)程調(diào)參、不支持異常狀態(tài)上報(bào)那后期維護(hù)成本會(huì)直接拖垮項(xiàng)目利潤。這一條在選型時(shí)甚至比硬件本身的性能參數(shù)更重要。2. 核心硬件選型與參數(shù)計(jì)算2.1 低照度傳感器怎么選光圈、靶面、靈敏度全彩夜視的第一關(guān)是“進(jìn)光量”。傳感器接收不到足夠的光線算法再好也無濟(jì)于事。2026年前后做全彩夜視方案傳感器選型基本集中在1/1.8英寸到1/1.2英寸的星光級(jí)CMOS比如Sony IMX585、IMX577這個(gè)級(jí)別的產(chǎn)品或者國產(chǎn)的思特威SC850SL等。這些傳感器的共同特點(diǎn)是單像素尺寸夠大量子效率高在0.001Lux級(jí)別的照度下還能輸出可用的彩色畫面。鏡頭的光圈同樣關(guān)鍵。F1.0光圈的進(jìn)光量是F1.6的約2.56倍計(jì)算方式是(1.6/1.0)2光圈每降一檔進(jìn)光量差異是幾何級(jí)的。在做全彩方案時(shí)我強(qiáng)烈建議直接上F1.0到F1.2的大光圈鏡頭千萬不能省這個(gè)成本。很多項(xiàng)目畫面整體昏暗不是因?yàn)閭鞲衅鞑缓枚晴R頭光圈太小白瞎了傳感器的性能。還有一個(gè)容易忽略的參數(shù)是最低照度這個(gè)指標(biāo)。廠商標(biāo)的“0.0001Lux”基本都是黑白的極限真正要看的是“彩色最低照度”。比如IMX585標(biāo)稱彩色最低照度0.0008Lux這才是全彩夜視的真實(shí)底限。達(dá)不到這個(gè)指標(biāo)畫面的“彩”也是死黑一片毫無意義。2.2 邊緣AI算力芯片TOPS不是越大越好邊緣AI芯片選型上安防項(xiàng)目最常見的選擇就是瑞芯微RV1126、RV1106晶視智能的CV181x系列以及地平線旭日X3等。它們各自的側(cè)重不太一樣芯片型號(hào)NPU算力典型編碼能力適用場景RV11060.5 TOPS500萬像素H.265輕量級(jí)單模型檢測低功耗RV11262.0 TOPS400萬像素H.265 1080P多路主流全彩方案可跑2-3個(gè)模型CV181x0.5-1 TOPS400萬像素H.264/H.265低成本場景畫質(zhì)增強(qiáng)為主旭日X35 TOPS4K編碼 多路分析高端場景需要多算法并行我在這套方案里選的是瑞芯微RV1126加一顆ISP協(xié)處理器的組合理由有三點(diǎn)一是RV1126的2TOPS算力跑YOLOv8n量化為INT8之后能做到30毫秒以內(nèi)的單幀推理足夠應(yīng)對(duì)主流安防場景二是它的ISP對(duì)低照度處理有專門的降噪和寬動(dòng)態(tài)優(yōu)化配合RGB-IR sensor能出比較干凈的全彩畫面三是生態(tài)成熟RKNN工具鏈文檔齊全部署踩坑少。這里要提醒一句TOPS這個(gè)參數(shù)是理論峰值實(shí)際推理速度要結(jié)合模型結(jié)構(gòu)來看。同樣是2TOPS跑大模型和跑輕量模型的速度差異可能是5倍以上。非要比較的話建議直接用目標(biāo)模型在目標(biāo)芯片上跑一遍實(shí)測幀率不要只看算力圖安心。2.3 帶寬、存儲(chǔ)和功耗的估算方法這套方案里帶寬、存儲(chǔ)、功耗三塊如果不提前算清楚項(xiàng)目上線就是災(zāi)難。我以一臺(tái)400萬像素?cái)z像機(jī)為例算一組常見參數(shù)給大家參考。主碼流設(shè)置為2560x1440分辨率、H.265編碼、25幀每秒、碼率控制在4Mbps子碼流設(shè)置為704x576、H.264、碼率512Kbps。按這個(gè)配置單臺(tái)設(shè)備24小時(shí)錄像文件大小 4Mbps ÷ 8 × 3600 × 24 ≈ 43.2GB/天存儲(chǔ)30天需要約1.3TB52臺(tái)設(shè)備就是約67.6TB這樣算下來存儲(chǔ)方案就不能全部丟在云端了。實(shí)際部署時(shí)我采用的是“邊緣SD卡本地環(huán)形存儲(chǔ)云平臺(tái)只存告警片段”的混合策略云對(duì)象存儲(chǔ)只保留30天的告警視頻全天錄像留在本地NVR或SD卡里。這樣云存儲(chǔ)成本直接降為原來的十分之一不到。功耗估算方面一臺(tái)全彩攝像機(jī)的滿載功耗大約在5W到8W之間包含補(bǔ)光燈、AI推理、4G模塊。如果用太陽能供電按陰雨連綿的冬季場景至少要根據(jù)當(dāng)?shù)剡B續(xù)陰雨天數(shù)×24小時(shí)×8W來配電池容量。舉例來說如果要求連續(xù)陰雨天撐3天那電池容量至少是3×24×8Wh 576Wh鋰電池組按12V系統(tǒng)算需要48Ah以上再疊加系統(tǒng)損耗建議直接上60Ah。3. 邊緣AI模型部署與圖像優(yōu)化3.1 模型選型與輕量化不是只有YOLO邊緣端做安防AI檢測大家第一反應(yīng)就是YOLO系列這沒錯(cuò)但現(xiàn)在可選的空間其實(shí)很大。2026年的主流選擇大致分兩類一類是YOLOv8n/YOLOv10n這種通用目標(biāo)檢測適合做行人、車輛、物品檢測另一類是更輕量級(jí)的分類模型或關(guān)鍵點(diǎn)模型比如MobileNetV3、PFLD適合做人臉抓拍、區(qū)域人數(shù)統(tǒng)計(jì)這類更細(xì)的任務(wù)。我的建議是不要用一個(gè)大模型包打天下而是把檢測任務(wù)拆開用多個(gè)輕量模型組合。比如人形和車輛檢測用一個(gè)YOLOv8n640x640輸入INT8量化人臉檢測單獨(dú)用一個(gè)RFB或SCRFD輕量模型只在檢測到人形后再觸發(fā)避免全程空轉(zhuǎn)區(qū)域入侵和絆線檢測不需要額外模型直接基于人形檢測框做規(guī)則判斷在CPU側(cè)跑就行這樣組合的好處是算力分配合理人臉抓拍只在必要時(shí)才消耗系統(tǒng)資源整機(jī)的平均功耗也能降下來。實(shí)測下來RV1126跑YOLOv8n人車檢測每秒10幀 偶發(fā)人臉抓拍的模式NPU占用率保持在70%以下CPU也沒有明顯吃緊整體運(yùn)行很穩(wěn)定。3.2 模型轉(zhuǎn)換和INT8量化精度掉點(diǎn)的救回方法拿到訓(xùn)練好的模型后不能直接丟進(jìn)芯片里跑必須經(jīng)過模型轉(zhuǎn)換工具鏈。RKNN平臺(tái)走的是ONNX → RKNN的路線具體操作步驟我用RKNN-Toolkit2來說# 安裝rknn-toolkit2的環(huán)境依賴 pip install rknn-toolkit2-1.6.0-cp38-cp38-linux_x86_64.whl # 將PyTorch模型導(dǎo)出為ONNX import torch model torch.load(yolov8n.pt) dummy_input torch.randn(1, 3, 640, 640) torch.onnx.export( model, dummy_input, yolov8n.onnx, opset_version11, input_names[images], output_names[output0] )轉(zhuǎn)換過程中最關(guān)鍵的參數(shù)就是量化方式。RV1126的NPU原生不支持FP16所以只能做INT8量化。但I(xiàn)NT8量化經(jīng)常掉點(diǎn)我遇到最典型的案例是人形檢測的mAP從0.87掉到0.81表面看還在可用范圍但漏檢率明顯上升了。幾個(gè)救回精度的實(shí)操方法校準(zhǔn)數(shù)據(jù)集不能太隨意量化校準(zhǔn)需要準(zhǔn)備幾百到上千張貼近真實(shí)場景的圖像包含白天、夜晚、逆光、雨霧等各類情況讓模型的激活值分布更接近真實(shí)部署環(huán)境打開混合量化RKNN支持對(duì)特定層使用FP16或INT16優(yōu)先把輸出的解碼頭部分保持高精度因?yàn)檫@部分對(duì)檢測框回歸的精度影響最大合理設(shè)置置信度閾值量化后模型輸出的置信度會(huì)整體偏低部署時(shí)閾值不要沿用訓(xùn)練時(shí)的0.5建議下調(diào)到0.35到0.4之間再做連續(xù)幀確認(rèn)效果反而更穩(wěn)3.3 全彩畫質(zhì)的核心算法組合3DNR、寬動(dòng)態(tài)和智能補(bǔ)光策略全彩夜視的“彩”只是基礎(chǔ)真正讓畫面能用的關(guān)鍵是把噪聲按下去、把動(dòng)態(tài)范圍撐開。3D降噪3DNR是夜視畫面的第一道關(guān)口。夜間畫面噪聲點(diǎn)多表現(xiàn)為滿屏的彩色噪點(diǎn)和閃爍的小亮點(diǎn)特別影響AI檢測的效果。3DNR的原理是利用前后幀的時(shí)間域信息做降噪靜止區(qū)域多幀融合運(yùn)動(dòng)區(qū)域單幀處理。實(shí)際調(diào)參時(shí)需要重點(diǎn)看“運(yùn)動(dòng)拖影”這個(gè)副作用降噪強(qiáng)度太高人一走動(dòng)畫面就拖著長長的殘影反而會(huì)讓檢測框漂移。我的經(jīng)驗(yàn)是把3DNR強(qiáng)度設(shè)在中等偏上同時(shí)打開運(yùn)動(dòng)自適應(yīng)補(bǔ)償讓移動(dòng)目標(biāo)邊緣銳利、靜止區(qū)域干凈。寬動(dòng)態(tài)WDR/HDR解決的是高反差場景比如夜間車燈亮處與暗處背景同時(shí)出現(xiàn)的畫面。普通傳感器遇到這種情況要么車燈處一片死白要么背景一團(tuán)漆黑。全彩方案建議開啟多幀合成寬動(dòng)態(tài)但要注意寬動(dòng)態(tài)會(huì)降低幀率也增加了圖像處理延遲在運(yùn)動(dòng)抓拍場景下有時(shí)反而會(huì)影響畫質(zhì)需要現(xiàn)場做權(quán)衡。智能補(bǔ)光策略可能是全彩夜視最容易被忽略、卻最能拉開效果差距的一環(huán)。補(bǔ)光不是簡單地把LED燈珠調(diào)亮就完了我踩過的最深一個(gè)坑是補(bǔ)光強(qiáng)度調(diào)高之后近處物體嚴(yán)重過曝遠(yuǎn)處還是一團(tuán)黑。后來改成“PWM脈沖調(diào)制自動(dòng)曝光聯(lián)動(dòng)”的策略讓補(bǔ)光燈的亮度跟隨ISO和快門速度動(dòng)態(tài)調(diào)整近處不過曝、遠(yuǎn)處的細(xì)節(jié)也能拉開曝光時(shí)間拉出來。再加上紅外光與可見光LED的混合配比才能做到24小時(shí)全天候畫面色彩穩(wěn)定。4. 云平臺(tái)架構(gòu)與端云協(xié)同4.1 平臺(tái)整體架構(gòu)感知層、邊緣層、平臺(tái)層、應(yīng)用層云平臺(tái)這部分如果從頭造輪子工作量非常大實(shí)際項(xiàng)目里我更推薦基于現(xiàn)成的云平臺(tái)底座來做。整體架構(gòu)可以拆成四層感知層就是前端的各種攝像機(jī)、門磁、煙感等設(shè)備邊緣層負(fù)責(zé)視頻流接入、AI推理、告警事件生成、設(shè)備自檢平臺(tái)層主要承接設(shè)備管理、事件存儲(chǔ)、消息推送、視頻點(diǎn)播、算法OTA應(yīng)用層則包括Web管理后臺(tái)、App端、微信小程序、大屏展示等。四層架構(gòu)里最需要注意的邊界是邊緣層和平臺(tái)層之間的通信協(xié)議是“事件驅(qū)動(dòng)”而非“視頻流驅(qū)動(dòng)”。邊緣端周期性上報(bào)設(shè)備心跳和狀態(tài)發(fā)生事件時(shí)上報(bào)結(jié)構(gòu)化告警數(shù)據(jù)包平臺(tái)層需要視頻回看時(shí)通過信令去邊緣端拉取對(duì)應(yīng)的錄像片段而不是讓邊緣端把視頻流量不分青紅皂白地全部推向云端。這樣做的好處一方面是降低了云平臺(tái)的帶寬壓力另一方面是云平臺(tái)只處理“有意義的數(shù)據(jù)”就算同時(shí)接入500臺(tái)設(shè)備云端的數(shù)據(jù)庫負(fù)載和消息隊(duì)列壓力也不會(huì)爆炸。4.2 設(shè)備接入?yún)f(xié)議選型MQTT為主、RTSP按需拉流設(shè)備接入云平臺(tái)有兩個(gè)層面的通道信令通道和媒體通道。信令通道我選的是MQTT over TLS媒體通道則選擇RTSP按需拉流。MQTT在安防場景的好處很明顯極低的帶寬占用、天生的離線消息緩存機(jī)制、以及成熟的發(fā)布訂閱模型。設(shè)備端每30秒上報(bào)一次心跳攜帶CPU溫度、NPU占用率、SD卡剩余空間、信號(hào)強(qiáng)度等信息發(fā)生告警時(shí)立即發(fā)布一條消息到“/v1/devices/{deviceId}/events”主題平臺(tái)端的告警服務(wù)訂閱這個(gè)主題做后續(xù)處理。媒體通道上邊緣端設(shè)備內(nèi)置RTSP服務(wù)云平臺(tái)的流媒體網(wǎng)關(guān)需要回看或直播時(shí)通過MQTT下發(fā)“開始推流”指令然后對(duì)接RTSP地址拉流再用ZLMediaKit或SRS這類流媒體服務(wù)器轉(zhuǎn)封裝成HLS或WebRTC分發(fā)給Web端和移動(dòng)端。這里提醒一下如果設(shè)備數(shù)量多流媒體網(wǎng)關(guān)一定要做并發(fā)拉流限制防止大量客戶端同時(shí)點(diǎn)回放時(shí)把邊緣設(shè)備打到卡死。4.3 告警事件的數(shù)據(jù)結(jié)構(gòu)和存儲(chǔ)設(shè)計(jì)告警事件的數(shù)據(jù)結(jié)構(gòu)設(shè)計(jì)直接決定了后續(xù)云平臺(tái)的功能能走多遠(yuǎn)。一個(gè)合格的告警數(shù)據(jù)包至少應(yīng)該包含這些字段我貼一段實(shí)際的JSON示例{ eventId: 550e8400-e29b-41d4-a716-446655440000, deviceId: CAM-001, deviceName: 北門崗?fù)? eventType: intrusion, timestamp: 1736600000, confidence: 0.92, imageUrl: https://oss.example.com/events/cam001_intru.jpg, videoUrl: https://oss.example.com/events/cam001_intru_30s.mp4, detectObjects: [ { label: person, bbox: [128, 216, 372, 689] } ], deviceStatus: { cpuLoad: 62, npuLoad: 78, storageFree: 32.5 } }存儲(chǔ)設(shè)計(jì)上我用的是混搭方案告警結(jié)構(gòu)化數(shù)據(jù)eventId、deviceId、type、time、confidence存在MySQL或TiDB按設(shè)備ID和時(shí)間戳建聯(lián)合索引保證檢索效率告警圖片和視頻片段存對(duì)象存儲(chǔ)OSS/S3兼容路徑規(guī)則是/bucket/events/{yyyy}/{mm}/{dd}/{deviceId}_{eventId}.jpg設(shè)備最新在線狀態(tài)和設(shè)備參數(shù)存Redis方便Web端實(shí)時(shí)刷新設(shè)備監(jiān)控面板檢測到的目標(biāo)特征向量如果需要做人車檢索、以圖搜圖再加一層向量數(shù)據(jù)庫比如Milvus或Qdrant這套設(shè)計(jì)做完告警查詢頁面上的“按設(shè)備查找”“按時(shí)間范圍查找”“按事件類型查找”基本都能在500毫秒內(nèi)返回結(jié)果用戶體驗(yàn)是質(zhì)的提升。4.4 端云協(xié)同的OTA升級(jí)流程在邊緣計(jì)算方案里設(shè)備固件更新比傳統(tǒng)攝像機(jī)復(fù)雜得多因?yàn)橐瑫r(shí)解決“算法模型更新”和“系統(tǒng)固件更新”兩個(gè)問題。我把OTA分成了兩條鏈路算法模型的OTA走的是輕量路徑。模型文件單獨(dú)打包版本號(hào)控制在云平臺(tái)上邊緣端每5分鐘檢查一次版本號(hào)發(fā)現(xiàn)新版本就按“先下載、再校驗(yàn)、最后切換”的流程更新。切換前保留舊模型一份一旦新模型連續(xù)推理異常超過N次就自動(dòng)回滾到舊模型避免遠(yuǎn)程把設(shè)備“升廢”了。系統(tǒng)固件的OTA走的是保守路徑。固件包一般80MB到200MB不等采用了分片下載加斷點(diǎn)續(xù)傳。更新前必須檢查設(shè)備電量或供電狀態(tài)防止更新中途斷電變磚。更新完成后設(shè)備上報(bào)新固件版本號(hào)平臺(tái)端核對(duì)通過后才把設(shè)備標(biāo)記為“穩(wěn)定版本”。這一套流程我實(shí)際測試下來100臺(tái)設(shè)備批量升級(jí)的失敗率能控制在2%以下。5. 常見問題與排查技巧實(shí)錄5.1 夜視畫面偏色偏紫、偏紅、偏綠分別怎么處理全彩夜視最常遇到的畫質(zhì)問題就是偏色。我做過幾次現(xiàn)場排查后總結(jié)了一套規(guī)律畫面偏紫或偏紅九成是紅外光和可見光的波長串?dāng)_導(dǎo)致的。全彩夜視的傳感器在全光譜模式下同時(shí)接收可見光和紅外光如果鏡頭鍍膜和IR-CUT切換配合不好紅外光就會(huì)參與可見光顏色計(jì)算紅色通道被拉高畫面整體發(fā)紫。解決方向是先檢查IR-CUT是否在夜間正常切換到全光譜模式再檢查補(bǔ)光燈的IR LED與可見光LED的配比通常把IR功率降低20%到30%畫面顏色就能拉回來。畫面偏綠多半是傳感器白平衡算法在暗光下失靈了。解決思路是給ISP指定一個(gè)色溫范圍比如夜間強(qiáng)制使用3500K到4500K的暖色溫區(qū)間而不是讓它自己漂。高級(jí)一點(diǎn)的方案是引入AWB自動(dòng)白平衡鎖定功能在亮度低于閾值時(shí)切換為固定白平衡增益參數(shù)。畫面偏藍(lán)常見于月光較強(qiáng)的戶外場景CIE光源的色溫偏高。處理方式相對(duì)簡單把白平衡向暖色調(diào)偏移150K到250K即可。5.2 補(bǔ)光過曝與畫面發(fā)霧的平衡夜間補(bǔ)光過曝是我最后悔沒早點(diǎn)解決的問題。一開始追求畫面亮補(bǔ)光燈拉到最大結(jié)果近處墻面一片慘白遠(yuǎn)處人物完全被“亮墻”的曝光壓制成了剪影。后來把補(bǔ)光策略改成“分區(qū)階梯控制”近距離區(qū)域0到10米用低功率柔和補(bǔ)光中距離區(qū)域10到30米用中功率泛光遠(yuǎn)距離只靠傳感器靈敏度和算法增強(qiáng)。具體實(shí)現(xiàn)上通過調(diào)節(jié)PWM占空比讓補(bǔ)光燈亮度跟著ISO值走ISO越高補(bǔ)光功率越低防止死白。畫面發(fā)霧的問題則來自兩個(gè)容易被忽略的地方一個(gè)是鏡頭起霧室外溫差大時(shí)鏡頭鏡片內(nèi)側(cè)結(jié)露另一個(gè)是補(bǔ)光燈照射空氣中的灰塵和水汽產(chǎn)生類似汽車遠(yuǎn)光燈在霧天里的散射效果。前者需要在外罩內(nèi)放置干燥劑并確保設(shè)備通風(fēng)口密封后者則要降低補(bǔ)光燈的仰角讓它盡量貼近視場角照射減少空氣中的散射體積。5.3 設(shè)備頻繁掉線怎么辦邊緣計(jì)算設(shè)備部署在戶外網(wǎng)絡(luò)環(huán)境比機(jī)房惡劣得多。設(shè)備頻繁掉線是最常見的運(yùn)維投訴我這里給一張速查表現(xiàn)象可能原因排查與解決心跳間隔越來越長最終掉線網(wǎng)絡(luò)抖動(dòng)導(dǎo)致MQTT連接反復(fù)重連檢查設(shè)備到基站/交換機(jī)的丟包率調(diào)整MQTT心跳間隔為20秒重連退避策略改為指數(shù)退避設(shè)備頻繁重啟供電不穩(wěn)定或散熱不良用萬用表測設(shè)備端電壓是否在額定范圍內(nèi)檢查補(bǔ)光燈長時(shí)間工作后的溫度超過60℃必須加散熱片或風(fēng)扇云平臺(tái)顯示離線但本地畫面正常設(shè)備端NTP時(shí)間漂移導(dǎo)致心跳時(shí)間戳異常確認(rèn)設(shè)備是否正確配置NTP服務(wù)器定期同步時(shí)間多臺(tái)設(shè)備同一時(shí)間掉線局域網(wǎng)交換機(jī)故障或上行帶寬被占滿檢查交換機(jī)的端口流量確認(rèn)流媒體回放任務(wù)是否占用過多上行帶寬設(shè)置按時(shí)間段限流5.4 AI誤報(bào)的元兇和過濾策略AI誤報(bào)在全彩夜視方案里比傳統(tǒng)紅外更麻煩因?yàn)椴噬嬅娌蹲降降募?xì)節(jié)變多了算法會(huì)把飄動(dòng)的樹葉、走動(dòng)的貓狗、車輛的燈光影子都識(shí)別成可疑目標(biāo)。我的過濾策略分了三層第一層是置信度閾值過濾。單幀檢測的置信度低于0.35直接丟棄這個(gè)閾值可以在平臺(tái)上動(dòng)態(tài)下發(fā)每個(gè)場景單獨(dú)配置。第二層是連續(xù)幀確認(rèn)機(jī)制。目標(biāo)連續(xù)出現(xiàn)3到5幀才生成告警單幀的瞬時(shí)閃爍不觸發(fā)。這在很多平臺(tái)上叫“幀間隔校驗(yàn)”實(shí)現(xiàn)起來也簡單維護(hù)一個(gè)每個(gè)目標(biāo)的tracking狀態(tài)沒有穩(wěn)定跟住的目標(biāo)不生成事件。第三層是ROI區(qū)域屏蔽。在平臺(tái)上用多邊形畫出需要檢測的警戒區(qū)域區(qū)域外的檢測結(jié)果一律過濾。比如路邊大樹被風(fēng)刮動(dòng)一直在畫面里晃只要把樹的區(qū)域劃進(jìn)忽略區(qū)誤報(bào)就瞬間降下來了。這三層做完常規(guī)場景下的誤報(bào)率能從每天幾十次降到個(gè)位數(shù)。6. 落地的幾個(gè)體會(huì)與后續(xù)擴(kuò)展6.1 方案落地后我真實(shí)感受到的效率變化這套方案上線運(yùn)行之后最直觀的變化是安保人員的處理速度上來了。以前接到報(bào)警要自己翻錄像、拖進(jìn)度條去找關(guān)鍵畫面現(xiàn)在是App推送一條告警附帶抓拍圖片和30秒短視頻當(dāng)場就能判斷要不要處理。園區(qū)里丟過幾輛電動(dòng)車事后找回全靠夜間的彩色抓拍識(shí)別出了車輛顏色和人員穿著特征這在黑白畫面時(shí)代幾乎不可能做到。云平臺(tái)的價(jià)值也在長尾階段的運(yùn)維里體現(xiàn)出來了。設(shè)備離線、SD卡異常、補(bǔ)光燈損壞這種問題以前要等用戶報(bào)修才知道現(xiàn)在設(shè)備自檢主動(dòng)上報(bào)平臺(tái)端大屏直接彈出來維護(hù)人員帶著備件去現(xiàn)場一次搞定。這個(gè)“事前發(fā)現(xiàn)”的能力比事后處理更省成本也讓客戶對(duì)項(xiàng)目的滿意度高了不少。6.2 可以繼續(xù)擴(kuò)展的三個(gè)方向這個(gè)方案的架構(gòu)搭好之后后續(xù)要加功能其實(shí)是比較順的。我個(gè)人覺得有三個(gè)方向值得優(yōu)先探索第一是多攝像機(jī)聯(lián)動(dòng)追蹤。邊緣端檢測到一個(gè)目標(biāo)后通過云平臺(tái)協(xié)調(diào)相鄰攝像機(jī)的預(yù)置位轉(zhuǎn)動(dòng)實(shí)現(xiàn)目標(biāo)跨攝像機(jī)接力跟蹤。這在園區(qū)安防里實(shí)用性極高相當(dāng)于不需要昂貴的GPU服務(wù)器靠云平臺(tái)調(diào)度和邊緣端算力就實(shí)現(xiàn)了類似“全局追蹤”的效果。第二是更豐富的告警聯(lián)動(dòng)。告警事件不只是推給App還可以聯(lián)動(dòng)聲光報(bào)警器、出入口道閘、門禁系統(tǒng)。比如深夜檢測到人形目標(biāo)進(jìn)入倉庫區(qū)域平臺(tái)自動(dòng)觸發(fā)聲光報(bào)警并遠(yuǎn)程鎖閉周邊門禁形成閉環(huán)處置鏈路。第三是視頻結(jié)構(gòu)化檢索。邊緣端上報(bào)的檢測目標(biāo)特征向量積累到一定量級(jí)后云平臺(tái)可以做“以人搜人”“以車搜車”用查詢目標(biāo)的特征向量和庫里歷史特征做相似度比對(duì)。這對(duì)事后偵查的效率提升是顛覆性的客戶愿意為這個(gè)功能付很高的溢價(jià)。6.3 最后分享一個(gè)自己總結(jié)的排障技巧最后說一個(gè)我在現(xiàn)場多次用過的小技巧可能文檔里永遠(yuǎn)查不到接入云平臺(tái)之前先讓設(shè)備在純局域網(wǎng)環(huán)境下跑滿48小時(shí)采集心跳數(shù)據(jù)、看門狗復(fù)位次數(shù)、NPU占用率和SD卡寫入速度。如果這48小時(shí)里有任何一項(xiàng)指標(biāo)異常說明硬件層面存在問題先解決再上云。如果48小時(shí)全程穩(wěn)定上云之后出問題的概率會(huì)大幅降低。很多設(shè)備問題看起來像“云端連接不穩(wěn)定”實(shí)際上是設(shè)備本地在壓力下先崩了上云只是把問題暴露出來而已。先治本再上云這是這套方案里最省心的一條經(jīng)驗(yàn)。