高通近期将不少资源投注在 AI 、嵌入式应用与物联网上,而稍早它们也公布针对物联网终端装置的视觉智慧平台产品,首批的两款产品采用 10nm 制程,分别为 QCS605 以及 QCS603 ,整合高通在运算与 AI 的技术,搭载高通的 ISP 、高通人工智能引擎、 GPU 与 ARM 多核 CPU 技术、向量处理器,提供高性能的机器视觉技术与应用,能用于工业与消费级的安防相机、运动相机、穿戴式影像产品、 VR 与 360 相机、 机器人以及智慧显示器等。
基于 QCS605 以及 QCS603 已经开始进行送样,同时也与华晶科技合作,推出基于 QCS605 的 VR 360 度相机,并预计在 2018 下半年推出 QCS603 的工业级安控相机参考设计。目前包括 KEDACOM 与 Ricoh Theta 皆宣布将采用此平台开发新影像产品,另外如商汤科技、 Pilot.ai 与 MM Solution 等也将提供如支援脸部、图像与物体辨识技术,以及运动与物体侦测、分类与追踪,还有先进图像品质校准服务等资源。
QCS605 与 QCS603 皆采用高通半客制化 Kryo 300 系列 CPU 搭配 Adreno 615 GPU ,而效能较高的 QCS605 采用 2 Kryo 300 Gold ( 2.5GHz) 6 Kryo 300 Silver ( 1.7GHz ) CPU ,至于 QCS603 为 2 Kryo 300 Gold ( 1.6GHz) 2 Kryo 300 Silver( 1.7GHz )组合,两者皆具备 Hexagon 685 DSP ,可支援整合高通 Snapdragon 神经处理引擎软件框架、 ONNX 交换格是、 Android 神经网络 API 与高通 Hexagon Neural Network 的高通人工智能引擎,能够达到每秒 2.1TOPS 的深度神经推理网络性能。
同时两项视觉智慧平台搭载双 14bit 的 Spectra 270 ISP ,可支援 4K@60fps 或是 5.7K@30fps 的影片,或是以更低分辨率进行多路并行串流,同时支援双 16M 相机,并且可提供避免在 HDR 产生叠影的交错式 HDR 、电子防手振、变形校正、降噪、色差校正与硬件式移动补偿式时间滤波。
同时两项视觉智慧平台皆可支援最高 WQHD 分辨率的触控屏幕,也可相容馆饭的操作系统,开发者能够借由其支援的硬件加速合成、 3D 覆盖、 OpenGL 、 OpenCL 与 Vulkan 等主流 API ,能作为开发者进行产品差异化,并可用于 VR 360 相机的终端内容自动拼接,机器人导航与避障,或是运动相机的影片摘要机能。
此外还搭载 MU-MIMO 与双频同步的 2 x 2 802.11ac WiFi 、蓝牙 5.1 ,以及支援高通 3D 音讯、高通 Aqstic 音讯与 aptX 音讯等,搭配人工智能技术,可支援自然语言处理;音讯语音辨识;语音插播与在嘈杂环境下的关键音讯收音;当然为了符合工业安全需求,也提供如硬件可信根的安全启动、可信执行环境、硬件加密引擎、储存安全、金钥分发与无线协议安全等。