RK3588作為瑞芯微旗艦級(jí)芯片,工業(yè)級(jí)的算力受到了很多領(lǐng)域的青睞,但是由于前端相機(jī)的選擇不同,并不是每塊RK3588的圖像處理板都可以直接拿來(lái)使用,需要的是根據(jù)相機(jī)接口和應(yīng)用場(chǎng)景進(jìn)行深度定制。成都慧視光電技術(shù)有限公司就有這樣的快速集成定制的能力。作為擁有多年圖像處理板開(kāi)發(fā)經(jīng)驗(yàn)的團(tuán)隊(duì),成都慧視能夠快速定制SDI、CVBS、CAMERALINK、USB、LVDS、DVP等豐富接口的RK3588系列圖像處理板,并能夠根據(jù)應(yīng)用環(huán)境定制外殼、散熱器等。應(yīng)急救援的識(shí)別模塊怎么購(gòu)買(mǎi)?湖北穩(wěn)定目標(biāo)識(shí)別自主可控
而維修機(jī)器人則能夠通過(guò)圖像識(shí)別、精細(xì)遠(yuǎn)程控制技術(shù),實(shí)現(xiàn)遠(yuǎn)程快速維修,通過(guò)加裝高性能圖像處理板,機(jī)器人能夠精細(xì)電網(wǎng)缺陷以及損壞程度,并通過(guò)攝像頭實(shí)時(shí)回傳高清畫(huà)面,工程師只需要遠(yuǎn)程操控機(jī)器人進(jìn)行修補(bǔ),實(shí)現(xiàn)精細(xì)縫合。整個(gè)過(guò)程只需要極少數(shù)的人員參與,整個(gè)巡檢維修的時(shí)間能夠從7小時(shí)縮減到1小時(shí),極大地保障了電力供應(yīng)。成都慧視光電采用RK3588開(kāi)發(fā)而成的Viztra-HE030圖像處理板,具備八核處理器,采用BTB傳輸接口,擁有極強(qiáng)傳輸能力,成都慧視能夠憑借豐富的經(jīng)驗(yàn),快速集成開(kāi)發(fā)SDI、CVBS、DVP、LVDS、cameralink等接口以及金屬外殼和散熱器。通過(guò)6.0TOPS的算力,以及豐富的接口定制,板卡能夠快速適配不同的無(wú)人機(jī)和機(jī)器人,用在我國(guó)西部電力運(yùn)維領(lǐng)域,將是工程師打造智能化維護(hù)的關(guān)鍵技術(shù)。湖北穩(wěn)定目標(biāo)識(shí)別自主可控打造一套穩(wěn)定的識(shí)別模塊需要多久?
這個(gè)過(guò)程中,采用無(wú)人機(jī)是個(gè)高效的辦法。無(wú)人機(jī)高空觀察能夠獲得更多的視野,并且針對(duì)許多人無(wú)法到達(dá)的地方,還能夠快速抵近觀察,防止驚擾。此外,更高效的措施是在無(wú)人機(jī)上加裝具備圖像處理的板卡,這時(shí)候無(wú)人機(jī)就是一個(gè)智慧眼,它能夠在算法的輔助下,對(duì)野豬等動(dòng)物進(jìn)行AI搜尋,并且具備目標(biāo)鎖定功能。當(dāng)無(wú)人機(jī)發(fā)現(xiàn)疑似目標(biāo)就可以抵近觀察,一旦確認(rèn)目標(biāo)就能夠立即鎖定跟蹤,這樣,地面圍剿人員就可以快速像區(qū)域靠攏,對(duì)野豬進(jìn)行逮捕驅(qū)逐。這樣的無(wú)人機(jī)智慧眼可以用成都慧視開(kāi)發(fā)的Viztra-HE030圖像處理板來(lái)實(shí)現(xiàn),這塊板卡采用瑞芯微旗艦級(jí)芯片RK3588,算力能夠達(dá)到6.0TOPS,處理村落、樹(shù)林等復(fù)雜環(huán)境不在話下。同時(shí),針對(duì)于野生動(dòng)物目標(biāo)識(shí)別算法的AI訓(xùn)練,成都慧視還可以提供專門(mén)的AI訓(xùn)練平臺(tái)SpeedDP,通過(guò)大量的模型訓(xùn)練實(shí)現(xiàn)AI自動(dòng)圖像標(biāo)注,進(jìn)而幫助提升算法識(shí)別性能。
目標(biāo)識(shí)別算法是一種深度學(xué)習(xí)算法,其聰明程度需要我們不斷訓(xùn)練,這就得益于大量的圖像標(biāo)注,通過(guò)對(duì)車(chē)輛行駛環(huán)境的數(shù)據(jù)集的大量標(biāo)注,能夠讓AI更加聰明,標(biāo)注得越多,識(shí)別的精度就可能越高。但是大量的圖像標(biāo)注跟工作顯然會(huì)耗費(fèi)大量的時(shí)間精力。而慧視SpeedDP的出現(xiàn)很好地解決了這個(gè)問(wèn)題。SpeedDP是一個(gè)深度學(xué)習(xí)AI算法訓(xùn)練開(kāi)發(fā)平臺(tái),他能夠通過(guò)現(xiàn)有的算法模型或者自訓(xùn)練一個(gè)算法模型,實(shí)現(xiàn)對(duì)新數(shù)據(jù)集的快速AI自動(dòng)標(biāo)注,以此反復(fù),幫助使用者提升算法性能。能夠有效節(jié)約大量的時(shí)間。HDMI相機(jī)目標(biāo)識(shí)別用圖像處理板。
成都慧視開(kāi)發(fā)的RK3588系列高性能圖像處理板Viztra-HE030,能夠在-40℃~65℃的環(huán)境中進(jìn)行工作,用在寒冷的北方冬天電力巡檢領(lǐng)域,可以有效支撐無(wú)人機(jī)的穩(wěn)定工作。此外,這款板卡的存儲(chǔ)溫度范圍在-55℃~75℃,遇到更加極端寒冷的天氣時(shí),不使用也能夠有效抗寒。RK3588屬于旗艦機(jī)芯片,搭載八核64位CPU,主頻高達(dá)2.4GHz。集成ARMMali-G610MP4四核GPU,內(nèi)置AI加速器NPU,可提供6Tops算力,用在電力巡檢領(lǐng)域能夠快速穩(wěn)定處理復(fù)雜的場(chǎng)景,幫助進(jìn)行保供電工作。如何提升識(shí)別算法的性能?天津穩(wěn)定目標(biāo)識(shí)別系統(tǒng)
夜間AI識(shí)別模塊定制。湖北穩(wěn)定目標(biāo)識(shí)別自主可控
但這也遇到很多難點(diǎn),通常情況下,視頻回傳的延遲大概在200ms左右,隨著大量的彈打出,視頻傳輸所需帶寬就面臨壓力,如何在通信帶寬有限的情況下,保證視頻順暢、清晰、無(wú)卡頓地傳輸,是分析改進(jìn)這個(gè)工作需要解決的前期難點(diǎn)。針對(duì)于這個(gè)問(wèn)題,慧視光電利用GS弱網(wǎng)高清音視頻傳輸系統(tǒng)和RK3588打造的Viztra-HE030圖像處理板結(jié)合,推出了低延遲低帶寬圖傳解決方案。在一個(gè)窄帶收發(fā)信道內(nèi),例如在信道有效帶寬0.5Mb/s~2Mb/s內(nèi),多路視頻和交互控制共用一對(duì)收發(fā)信道,信道支持?jǐn)?shù)據(jù)透?jìng)?,外部系統(tǒng)可以使用該信道,傳輸任意格式的數(shù)據(jù);可實(shí)時(shí)調(diào)整視頻碼率,在低至500K帶寬情況下依然可以回傳清晰流暢的圖像??梢允乖O(shè)備飛的更遠(yuǎn)、走的更遠(yuǎn);可實(shí)現(xiàn)視頻中繼轉(zhuǎn)發(fā);能夠基于H265實(shí)時(shí)視頻編碼;可實(shí)現(xiàn)基于視頻流的“人在回路低延遲控制”?;谄胀?0幀相機(jī),實(shí)現(xiàn)15ms的低延遲編解碼,加上數(shù)據(jù)鏈傳輸延遲時(shí)間在30ms左右,目前業(yè)界前列。通用性強(qiáng),使用更加靈活,適用更多應(yīng)用場(chǎng)景;支持多路SDI視頻在低至500K帶寬情況下的同時(shí)傳輸(1080P60FPS),徹底解決“帶寬苦惱”;整體時(shí)延約60ms(含相機(jī)、編解碼、顯示,不含傳輸),實(shí)現(xiàn)實(shí)時(shí)控制、實(shí)時(shí)打擊。湖北穩(wěn)定目標(biāo)識(shí)別自主可控