关灯
请选择 进入手机版 | 继续访问电脑版
智为网 首页 新闻 查看内容
0

高通:骁龙勇闯机器学习

摘要: 机器学习是在VR/AR之后最被业界看好的技术,几乎所有的业界巨头都有涉足。在硬件领域,英特尔Xeon Phi家族与英伟达Tesla P/K系列,分别是X86和GPU阵营的机器学习芯片代表。软件领域的微软、Google、facebook等巨头也 ...
机器学习是在VR/AR之后最被业界看好的技术,几乎所有的业界巨头都有涉足。 
 
在硬件领域,英特尔Xeon Phi家族与英伟达Tesla P/K系列,分别是X86和GPU阵营的机器学习芯片代表。
 
软件领域的微软、Google、facebook等巨头也早就在自家产品中加入机器学习,当中的Google甚至也定制了神经网络专用的TPU(张量处理单元)和英伟达的硬拼。
 
 
虽然Google和facebook这种厂商很早就把机器学习的成功应用在自家的搜索、图片和视频相关业务上。但不可否认,此前的机器学习无论是技术还是设备门槛,对于普通用户,甚至很多软硬件开发者来说,依旧是非常高大上和陌生的高科技。
 
这一切,得等到高通在骁龙计算平台上加入机器学习相关的软硬件支持之后才开始有所转变。高通作为受众最广的移动领域上游厂商,其在消费级产品上加入机器学习支持,这个理念不但超前,而且还很可能是里程碑式的。
 
起起落落60载,机器学习为何物?
人工智能学科在20世纪40年代诞生,第一个游戏AI在1951年出现,但其实只是个可以下西洋棋的程序。1956年达特茅斯会议后的数年,是人工智能的大发现时代,那时候的计算机已经可以证明几何定理、学习和使用英语了。
 
 
60年间,人工智能的发展重点经过从“推理”到“知识”再到“学习”为主导的变迁,分别代表了程序、暴力穷尽和神经网络等不同时代的人中只能方案。而提到人工智能就必须要提到机器学习和深度学习。
 
与传统的有明确目标的程序不同,机器学习具备自行创建模型和算法的能力,其是通过大量数据让计算机从数据中自动分析和改善算法模型,从而对未知数据进行预测的过程。机器学习早已被广泛应用于数据挖掘、计算机视觉、自然语言处理、手写识别、生物特征识别、搜索引擎、DNA测序等领域。
 
实现计算机自动创建并修正模型和算法的方案有很多种,而深度学习则是近年来名声最大、应用最广的分支。深度学习通过模拟生物大脑神经元的神经网络架构,对数据进行进行高层抽象。
 
Siri/Google Assistant/微软小娜等语音助手、刚开始爆发的智能音箱、Prisma线上自动修图、手机云相册的人脸识别和筛选等,这些以前看起来很神奇的功能,都是深度学习的直接结果。
 
计算机慢慢地开始可以表现得像人类,甚至代替人类做简单的脑力工作了。换个浅显一点的角度看,机器学习正在把语音和图像,这些以前计算机无法理解和使用的数据转换为实用功能了。
 
高通初见成果的十年耕耘
和其他巨头一样,高通很早就进入了人工智能领域。10年前,真正的智能手机诞生之初,高通就开始了人工智能的基础研究,随后高通投资并和Brain Corp合作,专注于生物真实性的脉冲神经网络的研究。 
 
2013年,高通研究人工神经处理构架并通过深度学习进行人脸识别的研究。2014年,高通收购了Euvison并于次年的MWC上展示了照片分类和手写识别技术。
 
在深度学习大热的2016年,高通和Google两个巨头在机器学习上合作,骁龙平台对Google的TensorFlow机器学习语言做了适配和相互优化。同年,高通推出了NPE(Neural Processing Engine神经处理引擎)深度学习软件开发包SDK。 
 
2017年,高通宣布支持Facebook的 Caffe2开源深度学习框架,随后高通收购了从阿姆斯特丹大学(UvA)分拆的人工智能公司Scyfer。
 
 
此外,高通也是最早大规模应用深度学习成果的厂商。高通的最早落地的人工智能项目是2013年的Zeroth处理器和Zeroth认知计算平台,其核心正是深度学习。
 
在早期试验性质的骁龙Rover、骁龙Cargo等机器人上,高通通过深度卷积神经网络,实现了人脸识别和视觉避障等功能,在与Planet GmBH的合作中则实现了OCR手写识别。
 
最早从机器学习中受益的移动摄影领域,早在2015年就开始大规模应用机器学习的成果。当年安卓旗舰开始搭载的各种情景模式相机、OCR识别文本和笔迹的能力,用的正是就高通骁龙系列处理器的开放接口。
 
而更上一阶的Google,在自家手机系列上的HDR+技术,正是通过高通的Hexagon DSP,使用Halide语言提供的深度学习能力进行图形处理加速。
 
和以前的处理器构架、传感器、指纹、曲面屏等单一的技术突破不同,深度学习几乎可以强化所有和算法有关的部分。而高通今年的骁龙835,可以说是史上机器学习成果最集中的一代移动计算平台,经过了大量认知训练的机器学习算法和应用,被用于对续航、相机、安全、连接和VR/AR的优化上。
 
 
影像方面,机器学习优化了骁龙平台对场景模式的分类能力,在HDR、夜景等算法判断以及多帧合成的过程中,机器学习用于帮助手机识别场景和物体边缘,提供更好的锐化和降噪效果,这些都是传统算法和硬件都无法提供的可能性。
 
而在即将全面爆发的双摄领域,无论是黑白双摄的画面数据合成和优化,长短焦双摄的平滑变焦、大量的后期降噪和锐化算法、还是背景虚化所需的物体边缘识别和抠图算法,都少不了深度学习。
 
在更偏向后期的图像增强领域,骁龙835的机器学习可以根据现有的数据,以及从其他类似图像训练出来的算法进行推断,对图像进行重建或填充图像中缺失的部分,以此提升多帧合成的后期降噪和去鬼影效果。
 
配合Hexagon 682 DSP,骁龙835上追踪速度和精度更高的面部检测和人脸识别,可以用于改善自动对焦性能或进行人像美化,甚至是在视频拍摄过程中的使用人工智能完成追焦任务。
 
在Google和苹果刚加入战局的虚拟现实/增强现实领域,其重点是用户物理位置的感知定位和高速的画面渲染。机器学习在骁龙835上被用于整合摄像头和传感器数据,高通的视觉惯性测距(VIO)头部运动跟踪系统,在处理摄像头的30 FPS的画面外,还需要以高达800-1000Hz的频率处理加速度计和陀螺仪在6自由度(6-DOF)的数据。
 
 
在骁龙835的异构计算系统中,这个工作交给了Hexagon 682 DSP处理,以提供比CPU高4倍的性能和更低的耗电,而画面渲染则交给了性能提升高达 25% 的 Adreno 540 。机器学习甚至还会预测下一个画面,让GPU精确调整当前内容。
 
在视觉之外的自然语言处理上,大规模神经网咯训练出来的算法很早之前就能做到实时的语音转文字,而骁龙835上运用的深度神经网络,被用来学习如何更好地理解语音指令和问题,通过将其转化为合适的指令,而且DSP可以做到比以前更低的功耗、响应更快的全天候语音待命。
 
在骁龙835上,高通整合了SecureMSM的软硬件并引入了Haven安全平台,以提升生物识别与终端认证的安全性。让骁龙835成为首个支持全部生物识别方案的计算平台,在几年前就开始用机器学习的Sense ID 3D指纹识别和声纹信息的生物识别之外,骁龙835可以使用安全摄像头实现基于眼球、面部,甚至虹膜的识别。
 
机器学习的预测能力也被加入到大家已经习以为常的通话上,在骁龙835上除了环境声音检测和消除,还能对声音模式进行预测和判断。

鲜花

握手

雷人

路过

鸡蛋
本文作者
2017-9-13 13:45
  • 0
    粉丝
  • 222
    阅读
  • 0
    回复

关注迪恩网络

扫描关注,了解最新资讯

联系人:高经理
电话:15562103797
EMAIL:125422921@qq.com
地址:威海市创新创业大厦2702
热门评论
排行榜

关注我们:微信订阅号

官方微信

服务热线:

010-58414718

电子邮件:peter@aihey.cn

地址:北京

Copyright   ©2007-2018  智为网 Powered by©aihey.cn ( 京ICP备08005157号-5