晶视智能(CVITEK)近日正式发布全新一代高性能终端人工智能芯片CV1835及CV1832,分别面向5百万及 3百万像素的编解码AI摄像头应用。CV1835/1832集成第二代全自研深度学习张量处理器(TPU),智能图像处理引擎(Smart ISP),硬件级别高度安全资料保护架构(Security), 语音处理引擎及H.264/265智能编解码技术。同时,通过多年自研的AI 工具链(ToolChain)及CV1835/1832的优异算力的深度融合,打造数据安全及生态开放的终端AI算力平台。CV1835/1832 拥有同级终端AI芯片较强算力及高集成带来的高性价比,与合作伙伴携手,提供智能安防,车载视觉,智慧零售等行业完整的人工智能解决方案。
图1: 芯片照片
高算力效能
CV1835/1832针对终端AI设计的低功耗深度学习TPU提供1. 5 TOPS/1.0 TOPS 峰值性能,支持定点数及浮点数运算, 并能有效地为所有的张量处理器核心提供极高的带宽数据流。搭载自研的AI ToolChain,在同级芯片的算法模型实测中,效能领先。此外,CV1835/1832 搭载双核心 ARM A53 64bit CPU,拥有同级芯片中较高的CPU算力,晶视智能同时提供智能图像硬件(IVP,Intelligent Video Processing),大幅减少从传感器到流媒体输出及人工智能处理的前处理运算时间,在各种深度学习应用下,全面提升本地识别的实时运算能力。
图2: CV1835 及前一代 1880 效能比较
数据安全保护
针对社会日益关注的信息安全,CV1835/1832内置安全启动,安全存储,以及安全传输的全栈硬件,全面支持TLS/DTLS,AES128/256,SHA256,RSA2048/4096,国密SM2/SM3/SM4等安全技术。此外,针对视频内容及人工智能模型而特殊设计的专业保护机制,极大提升信息安全的同时,也全面保护合作伙伴AI算法的知识产权。
开放生态
经过多年的研发,晶视智能在AI ToolChain上有着积厚的技术积累,先后与数十家算法合作伙伴共同打造并导入MLIR框架,包含编译器(Compiler),量化器(Calibration),及性能调校工具((Profiling),可以为性能优化和数据重用提供较佳的编程灵活性。强大的深层学习模型编译器和软件SDK开发包支持Caffe、Pytorch,ONNX,Tensorflow等主流框架,使客户及合作伙伴的算法模型可以轻松地移植到CV1835/CV1832平台上。高精度量化工具可以进一步优化移植模型的精度,在多种不同种类模型做定点数的移植上,都可以控制精度损失小于1%。同时, 针对TPU特别设计的性能调校工具可针对算法模型的布建分析,更进一步优化性能。
智能图像处理
CV1835/1832集成了全自研安防级别图像处理(ISP)技术。其中,CV1835支持双路传感器输入,CV1832支持单路传感器输入,每一路传感器后级处理均支持星光级降噪,宽动态,去雾,鱼眼畸变校正等图像处理功能,为安防及家用型摄像头应用提供高品质的影像输出。,此外,亦可运用晶视智能自主研发TPU处理器, 结合AI技术,进一步提升图像画质或是从事各式场景侦测。同时,H.264/265编解码器亦可结合ISP/TPU技术,将视频画面中的重点资讯加以强化获保留,提供高清晰高还原的低码流智能编码解决方案。
图3: 宽动态实测
图4: 星光级降噪
丰富外围接口支持 & 完善SDK工具包
CV1835支持双传感器输入(1832支持单传感器),并支持 MIPI DSI,BT656/601,LVDS 等显示接口. 透过其强大的人工智能图像/语音/编解码处理及多样化的输入输出接口,得到行业合作伙伴的广泛认可。公司目前已经与智能安防,智能门禁考勤,智能车载,智能交通等众多行业客户达成深度合作。近期将推出针对4K超高清方案,全面打造从2MPixel到4K超高清人工智能的算力平台。此外,CVITEK提供网完整SDK开发包,客户只需很小的转移成本下, 可一次完成从2M到4K超高清的人工智能产品方案开发.。晶视智能致力打造安全数据,及开放生态的终端AI高性能算力芯片平台,与合作伙伴携手并进,共创人工智能应用的新时代。
圖5: 防疫应用
图6: 智慧交通