“啟明935A”系列芯片已經(jīng)成功點(diǎn)亮,并完成各項(xiàng)功能性測(cè)試,達(dá)到車(chē)規(guī)級(jí)量產(chǎn)標(biāo)準(zhǔn)。啟明935A是行業(yè)首顆基于Chiplet(芯粒/小芯片)異構(gòu)集成范式的自動(dòng)駕駛芯片,但并非單一芯片,而是一個(gè)家族系列。啟明935HUBChiplet可以和不同數(shù)量的大熊星座AIChiplet互相搭配,再結(jié)合靈活的封裝方式,快速形成不同性能等級(jí)的SoC芯片。它還支持高帶寬的PBLink多芯互連,雙芯雙向帶寬128GB/s,四芯雙向帶寬64GB/s。啟明935A每顆芯片都支持比較大20路的1080p60攝像頭輸入,可應(yīng)用于各類(lèi)端側(cè)AI部署。得益于大熊星座NPU天然支持Transformer結(jié)構(gòu),初步支持的模型有Yolo系列、ResNet50、PSPNet、PointNet++、TrafficSign_Retinanet、BevDet、miniCPM、Unet_ResNet50、PointPillars、PillarNest、M2track、BevFusion、PaliGemma、LLaMa-3B、8B等等。如何快速一鍵標(biāo)注多張圖片?山西智慧城市AI智能
進(jìn)入冬季,北方各地陸續(xù)出現(xiàn)冰凍天氣,給不少地方的保供電工作增添了難度。目前,大多數(shù)地方都采用無(wú)人機(jī)巡檢的模式,但是面臨如此寒凍的天氣,無(wú)人機(jī)也可能會(huì)“懈怠”。但是大面積覆冰的影響下,人工巡檢又很難到達(dá)很多區(qū)域,所以還是不得不依靠無(wú)人機(jī),只是需要性能更加強(qiáng)悍的無(wú)人機(jī)。無(wú)人機(jī)電力巡檢依靠可見(jiàn)光或者紅外兩種方式進(jìn)行自動(dòng)巡視檢測(cè),這其中,用于進(jìn)行圖像處理的傳感器性能尤其重要。面臨如此寒冷的天氣,圖像處理板能否正常工作十分關(guān)鍵,因此選對(duì)圖像處理板,關(guān)系整個(gè)寒冬的電力巡檢。山西智慧城市AI智能慧視光電開(kāi)發(fā)的AI智能算法。
多目標(biāo)跟蹤是指在連續(xù)的圖像中,通過(guò)目標(biāo)檢測(cè)算法識(shí)別出每一幀中的目標(biāo),并在時(shí)間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會(huì)不斷發(fā)生尺度、形變、遮擋等變化,而且還會(huì)有目標(biāo)出現(xiàn)和消失的情況,再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動(dòng)的情況(例如無(wú)人機(jī)高空檢測(cè)),就會(huì)給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo),所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此,成都慧視針對(duì)于多目標(biāo)檢測(cè)跟蹤抖動(dòng)丟失的優(yōu)化方法是:1.改進(jìn)目標(biāo)檢測(cè),使用更加魯棒的目標(biāo)檢測(cè)算法。2.增強(qiáng)特征描述,利用深度學(xué)習(xí)提取更高級(jí)別的語(yǔ)義特征,這些特征對(duì)于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運(yùn)動(dòng)模型,在算法中加入對(duì)攝像頭運(yùn)動(dòng)的估計(jì),通過(guò)補(bǔ)償攝像頭運(yùn)動(dòng)來(lái)減小目標(biāo)真實(shí)運(yùn)動(dòng)與預(yù)測(cè)之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略,設(shè)計(jì)更靈活的數(shù)據(jù)關(guān)聯(lián)算法,允許更大的距離閾值來(lái)匹配候選目標(biāo)。
成都慧視開(kāi)發(fā)的RK3588系列高性能圖像處理板Viztra-HE030,能夠在-40℃~65℃的環(huán)境中進(jìn)行工作,用在寒冷的北方冬天電力巡檢領(lǐng)域,可以有效支撐無(wú)人機(jī)的穩(wěn)定工作。此外,這款板卡的存儲(chǔ)溫度范圍在-55℃~75℃,遇到更加極端寒冷的天氣時(shí),不使用也能夠有效抗寒。RK3588屬于旗艦機(jī)芯片,搭載八核64位CPU,主頻高達(dá)2.4GHz。集成ARMMali-G610MP4四核GPU,內(nèi)置AI加速器NPU,可提供6Tops算力,用在電力巡檢領(lǐng)域能夠快速穩(wěn)定處理復(fù)雜的場(chǎng)景,幫助進(jìn)行保供電工作。SpeedDP能夠成本AI人才教學(xué)的得力工具。
這種智慧化的建設(shè)就是采用圖像處理。在無(wú)人機(jī)內(nèi)部安裝圖像處理板,這些圖像處理板和相機(jī)、算法的有機(jī)結(jié)合就形成了無(wú)人機(jī)的智慧眼,有了這個(gè)智慧眼,無(wú)人機(jī)就能夠?qū)σ曇胺秶鷥?nèi)的物體進(jìn)行AI識(shí)別,從而自動(dòng)完成避障、巡檢等操作。成都慧視開(kāi)發(fā)的小型化圖像處理板Viztra-LE026就是專(zhuān)門(mén)為無(wú)人機(jī)設(shè)計(jì)的一款“智慧眼”處理器。這塊板卡采用了RV1126開(kāi)發(fā)而成,具備2.0TOPS的算力,外形呈圓形化設(shè)計(jì),整體外觀大小為Ф38mm*12mm,重量只有12g,功耗不高于4W,用在無(wú)人機(jī)領(lǐng)域具有功耗低、尺寸小的優(yōu)勢(shì),不會(huì)過(guò)多占用和消耗無(wú)人機(jī)的內(nèi)部空間和續(xù)航。圖像標(biāo)注是算法性能提升的必經(jīng)之路。四川算法定制AI智能解決方案
哪里能夠定制跟蹤船的AI算法?山西智慧城市AI智能
SpeedDP的出現(xiàn)則正好解決了這一問(wèn)題,它是一個(gè)基于瑞芯微的深度學(xué)習(xí)算法開(kāi)發(fā)平臺(tái),提供從數(shù)據(jù)標(biāo)注、模型訓(xùn)練、測(cè)試驗(yàn)證到RockChip嵌入式硬件平臺(tái)模型部署的可視化AI開(kāi)發(fā)功能。平臺(tái)支持本地化服務(wù)器部署,高校、特殊單位等數(shù)據(jù)敏感的用戶無(wú)需擔(dān)心數(shù)據(jù)信息泄露的問(wèn)題。高校等單位可以通過(guò)模型訓(xùn)練和模型評(píng)估等功能,打造一個(gè)符合需求的AI模型,來(lái)幫助進(jìn)行海量的數(shù)據(jù)標(biāo)注,這不僅將節(jié)約大量的數(shù)據(jù)標(biāo)注時(shí)間,更重要的是能夠幫助提升自身算法在RK3588圖像處理板的檢測(cè)識(shí)別能力。山西智慧城市AI智能