銀牛微電子發布高性能3D圖像和視覺處理器NU4500

芯智訊 2024-05-17 22:28:52

5月17日,以“驅動智能機器人創新”爲主題的“第十四屆松山湖中國IC創新高峰論壇”正式在廣東東莞松山湖召開。合肥銀牛微電子有限責任公司研發副總裁周凡在論壇上推出了其最新的高性能3D圖像和視覺處理器NU4500。

3D視覺和AI是3D空間計算的關鍵技術,是智能識別、自主決策和精准控制的基礎,應用前景廣闊,不僅在智能制造、自動駕駛、機器人等領域發揮重要作用,還將在元宇宙XR、消費電子、物流無人機、3D掃描、虛擬數字人等前沿應用領域中展現出巨大的潛力。周凡博士也表示,3D空間計算技術正逐步滲透到各個領域,徹底改變人類的生活方式和生産方式。

目前空間計算的應用面臨三大痛點:1、2D視覺已經無法滿足日益複雜的終端應用要求 ;2、延時大功耗大軟件化3D算法+傳統AI芯片或者FPGA芯片的方案不可持續。3、適用于複雜場景的3D感知設備價格昂貴 、多傳感器融合大幅增加系統成本及複雜度 單芯片解決方案 。

爲了破解這三大痛點,銀牛微電子聚焦于3D視覺、3D雙目立體算法芯片化,並單芯片實現了3D+SLAM+AI,無需額外的AI芯片及激光SLAM,可以助力設備實現低功耗、低成本、小型化。

作爲一家長期深耕于3D視覺領域的企業,銀牛微電子總部位于合肥,並在上海、以色列、北京和深圳設立了公司和分公司。需要特別指出的是,銀牛微電子在2020年就完成對于全球知名的3D計算機視覺和圖像處理器芯片設計廠商以色列Inuitive的收購。

Inuitive作爲一家成立超10年的3D機器視覺廠商,在3D機器視覺領域有著深厚的技術積累,具備豐富的3D視覺、複雜SoC芯片設計、低功耗設計和邊緣AI計算經驗,其核心的IP都是完全自研的。Inuitive的3D深度感知圖像處理器芯片,具有強大的AI能力,結合SLAM實時跟蹤建圖引擎,以及通用CPU內核與豐富的I/O接口,可以極大限度的滿足客戶的3D機器視覺産品開發需求,並且芯片的工作功耗也是非常的低。

在收購Inuitive之後,2021年,銀牛微電子就推出了基于NU4000芯片的3D機器視覺模組,並在2022年推出了全新的具有3.5Tops算力的NU4100芯片,可以支持6路視頻的輸入,720P@120FPS,運動到顯示延遲僅1ms。2023年9月該芯片成功量産,並獲得了多家頭部客戶的采用。

周凡表示,銀牛微電子是目前全球唯一量産單芯片集成芯片化3D視覺感知、Al、SLAM模塊的SoC芯片廠商,同時也是全球唯二的3D雙目立體算法芯片化的量産芯片廠商。

銀牛微電子此次最新發布的NU4500,是一款高度集成的空間計算系統集成主控芯片,基于12nm工藝,擁有八核ARM Cortex-A55 CPU,集成了Synopsys APX5.2/NPU4K 視覺/AI處理器,可提供7.5Tops算力。同時還集成了ARC EM11D音頻DSP、高分辨率雙攝像頭ISP、H264/HEVC 視頻編碼器引肇、安全子系統。接口方面可支持USB3.0、Pcle-Gen4、SDIO/eMMC和LPDDR4x/5等高速接口。

NU4500還擁有基于硬件的圖像深度視覺引擎,包括領先的自研的深度引擎、計算機視覺加速引擎、圖像後處理模塊、異步時間扭曲(ATW)引擎等,能夠與其高性能CPU、VPU、AI和ISP內核緊密結合,可以支持單芯片10個輸入視頻流,具備強大的3D空間計算功能,能夠以低功耗提供3D感知、AI和各種空間計算應用支持。

得益于NU4500強大的性能,其能夠支持廣泛應用在包括人形機器人/AMR/AGV在內的泛機器人、 元宇宙XR、消費電子、物流無人機3D掃描等前沿應用領域。

周凡表示,目前銀牛微電子已贏得全球龍頭企業信賴,超過150客戶簽署合同或上機測試。深度合作客戶包括小米、極智嘉、Varjo 等國內外頭部企業。

編輯:芯智訊-浪客劍

1 阅读:49

芯智訊

簡介:專注于手機、芯片、智能硬件等相關領域的行業資訊報道。