手机怎么连接和慧眼看这里!麒麟980放大招？AI慧眼2.0都能带来哪些新奇体验？

近年来，很多智能手机推出了与AI相关的功能，其中应用最多的是摄影领域。AI对不起，AI场景识别开始在手机拍照功能上普及。

说起最先掀起这股AI拍照"潮流"的，要数华为去年推出的麒麟970，首次在手机端实现AI运算，带来了很多新的体验，也是在搭载麒麟970的手机推出"AI慧眼"的摄影体验之后，国内的手机厂商才开始跟风。

月初，华为在IFA 2018发布了其最新的旗舰手机芯片麒麟980，并推出了升级版"慧眼2.0"，看来华为将继续在手机的视觉应用领域出招。那么这项"黑科技"将带来哪些新体验？华为是不是将会引领又一波手机体验的新潮流？这些暂时还不得而知，不过有关慧眼2.0的技术内容倒是可以先来研究一下。

慧眼2.0是什么？

从字面意思来看，"慧眼"对应的应该是智慧，自然容易联想到华为在端侧AI上的优势。根据目前公布的信息来看，慧眼2.0是华为深入拍照及小视频应用场景进行的深度优化，提供的端到端解决方案。慧眼2.0在手机的视觉入口上提供了包括"感知、测量、认知、计算"的完整解决方案，人工智能深度参与进视觉处理的各个环节，在提升使用体验的同时，也支持更多的AI应用。

这让人很容易联想到华为在IFA现场，演示的麒麟980多人姿态实时识别能力。在演示中，麒麟980能够精准的识别人体骨骼线条，多人站在镜头前进行挥手、跳跃、舞蹈等动作，麒麟980都能够实时精准的进行识别，这也是麒麟980 AI实力的直观体现。这项能力应该也会延伸出很多丰富的体验，笔者大胆猜测，在将来的手机中如果用上这项能力，或许会出现类似给小视频切换人物身体特效的应用，或者能让舞蹈爱好者跟着AI学跳舞的应用，打破现在AI拍照体验的局限性，带来更多好玩的东西。

（gif图）

从慧眼2.0的结构图可以看出，麒麟980的CPU/GPU/DSP/NPU构成了底层硬件，为上层的AI图像处理提供运算性能支持。在上层运算中，ISP和摄像头用于收集图像数据，经过AI运算，能够为手机用户带来图像、视频及AR方面的应用提升，带来更智慧的视觉体验。刚才说到的AI多人姿态实时识别，正是通过摄像头收集人体动作的图像信息，再经过AI实时运算，实现了与AR相关的人体姿态能力，为将来的AI和AR体验开启无限想象。另外，麒麟980在AI算力上也有非常大的提升，基于华为在端侧AI方面的研究与技术升级，设计出了完整的端侧AI闭环架构。

基于完整的闭环逻辑，麒麟980就可以在接收到图像信息后实时完成多种复杂的运算处理。结构图显示，视频方面，麒麟980能够做到人体肢体的检测与识别，支持区域分割、主体抠图和视频跟踪追焦等功能，实时完成逐帧的画面处理；在处理图片时，麒麟980能够实现文本识别、图像超分辨率及RAW图像降噪、RGB还原等功能，让用户明显感受到AI拍照及摄像的体验提升。在AI图像处理能力升级的背后，是华为在端侧AI不断探索完善的计算架构，将SoC芯片的强劲AI运算力与算法、数据以及终端设备形成完整闭环，发挥综合AI运算实力。

慧眼2.0技术解读3："黑科技"玩转AR

近年来，AR应用开始成为智能手机的亮点功能，用户可以通过AR在手机屏幕里看到现实世界与虚拟世界的结合，获得趣味体验。而AR效果的实现需要结合麒麟980的算法与AI图像识别能力，综合对图像进行处理。麒麟980支持AR应用的视频流特征提取、姿态估计以及地图重建，让更多AR应用的落地成为可能。

基于以上能力，慧眼2.0将为广大手机用户带来全新的拍照及视频体验，同时面向广大开发者开放这一能力，将华为HiAI移动计算架构完善的SDK、丰富的API接口、业界领先的算子支持以及华为开放完整的Camera DDK、AR DDK以及HiAI Foundation完整的开放架构，全部提供给开发者作为工具，让他们能够创造出更多丰富的应用体验。

目前，基于麒麟芯片的AR能力，麒麟970及麒麟710已经实现了乐趣AR、保时捷AR应用等功能，效果十分酷炫。慧眼2.0技术应该也会在AR领域发力，让开发者能够创造出更多趣味十足的AR游戏，让麒麟980将在未来实现更多"黑科技"体验。

麒麟980融合能力开放架构：华为的开放之道

在推出慧眼2.0之后，华为也同步推出麒麟980的融合能力开放架构。无论是这个开放架构，还是华为一直积极推进的HiAI生态，都在传递出华为合作开放的AI发展理念。

通过下面这张架构图可以看到，麒麟980支持Caffe、Tensorflow、Tensorflow Lite等主流框架，具有强大的深度学习框架兼容性，达到业界领先水平；提供了离线编译、在线编译、8bit量化等一系列完整工具链，既可以大大降低端侧模型部署的工程难度，还可以利用NPU差异化优势发挥出最强算力；支持CPU、GPU、NPU、DSP等的异构计算，方便深度学习算法在麒麟980的自动灵活调度执行。这对于广大开发者而言，无疑是一个重磅利好。毕竟想要开发出强大、酷炫的AI应用，离不开环境和架构的支持。

此外，华为还宣布开放Camera DDK、AR DDK及HiAI Foundation接口，能够让广大开发者深层次的调用华为在端侧AI的算法和能力。其中，Camera DDK，能够将前端更好的暗光、高动态和分辨率能力开放给广大开发者，让第三方APP能够直接调用手机本身的ISP算法，对APP的成像效果进行优化。AR DDK能够带给AI应用更多有趣的方向，如更加丰富的AR特效，以及基于AR技术的游戏等，让开发者能够尽情施展关于AR应用的想象。同时，基于麒麟980的业界最强端侧AI算力，HiAI Foundation能够支持147个算子，并开放33个API接口及1000+abilities，对于开发者来说能够支持更多AI功能，在图像识别时也能支持更丰富的场景，真正成为开发者的实用工具。

综合来看，麒麟980的慧眼2.0技术主要对手机的视觉应用领域进行优化，将AI技术与手机的摄像头结合，让手机具有充满智慧的眼睛。同时，面向广大开发者提供性能更强、操作更简易的开发工具，相信会有更多新奇的应用体验落地。10月16日，首款搭载麒麟980的华为Mate 20即将发布，这款手机到底能在慧眼2.0的技术加持下为消费者带来哪些方面的体验升级呢？让我们共同期待。