现在的位置: 首页资讯>正文
支持创造性革新的背后,苹果团队面临了哪些挑战?
2017年11月21日 作者: 暂无评论 209+ 0

 iPhone苹果 Vision 框架的发布,意味着开发者可以在 App 中使用深度学习算法和许多其他的计算机视觉技术。那么,支持这一创造性革新的背后,苹果团队面临了哪些挑战?日前,苹果在其官网发文,首次揭露了这些信息。详情如下,爱板网编译整理:

苹果在 iOS 10 中开始使用深度学习技术。随着 Vision 框架的发布,开发者可以在 App 中使用深度学习技术和许多其他的计算机视觉算法。他们在开发 Vision 框架时,为了保护用户隐私,让算法能高效执行,面临着巨大的挑战。下面是对这些挑战的介绍。

苹果公司首先通过 CIDetector 类在 Core Image 框架中发布了人脸检测公共 API 。苹果内部应用程序也在使用这个 API ,例如 Photo 。CIDetector 最早版本使用的是一种基于 Viola-Jones 的检测算法,基于传统计算机视觉技术的进步,CIDetector 得到了持续改进。

随着深度学习的出现以及它在计算机视觉问题上的应用,这些顶尖技术在人脸检测的精准性上取得了前所未有的巨大进步。为了利用这些技术的所带来的转变,苹果彻底重新思考他们的方法。

与传统的计算机视觉相比,在深度学习中学到的模型需要更大的内存、更大的磁盘存储空间和更多的计算资源。

虽然手机发展到现在,已经具备各种各样的功能了,但传统的高端手机并不是一个适合训练深度学习视觉模型的平台。大多数行业通过云端的 API 提供深度学习解决方案来解决这个问题。在那种云端解决方案中,图像被发送到云端服务器,然后再利用深度学习来推理、检测人脸。

云端的服务通常使用性能强大的桌面级 GPU,具有大量可用内存。当碰到非常大的网络模型,或者可能要配置大型模型时,都可以在服务器端运行,这能保证客户端(可能是移动电话)可以在云端(在本地无法运行)运行大型的深度学习架构。

苹果 iCloud 照片库是一个基于云端的图片和视频存储解决方案。不过,由于苹果此前做出过承诺,绝不侵犯用户隐私,所以他们不能利用 iCloud 服务器来进行计算机视觉计算。所有发送到 iCloud 照片库的照片和视频在发送到云存储之前就在设备上进行了编码,而且只能通过注册过那个 iCloud 账户的设备进行解密。因此,为了带来深度学习的计算机视觉解决方案,必须直面在 iPhone 上运行深度学习算法的挑战。

除了这一点外,苹果还面临诸多挑战。

深度学习模型需要装配到操作系统中去,占用本来就很稀缺的 NAND 存储空间。

此外,它还需要加载到 RAM 中,使得 GPU/CPU 的计算时间大大延长。

与云端的服务不同,云上的资源可以分配,可以用来单独解决视觉问题,而想要在设备上进行计算,则需要在与其他正在运行的应用程序共享系统资源。

最后,计算必须足够高效,能够在相当短的时间内处理大型图片库,并且手机的电量不会消耗得过快,手机也不能产生明显发热。

原文地址:http://www.eeboard.com/news/iphone-141/

搜索爱板网加关注,每日最新的开发板、智能硬件、开源硬件、活动等信息可以让你一手全掌握。推荐关注!

【微信扫描下图可直接关注】   aibanwang

相关文章

质疑声不断,领投商汤科技6亿美元的阿里要亏大了?

前不久,阿里领投的一场6亿美元融资,把商汤科技推向科技新闻的头条,作为一家侧重计算机视觉和深度学习AI公司,仅用四年的时间从一家初创小公司登上AI独角兽的宝座。当然,商汤科技之所以能...

探讨哪些采用人工智能和计算机视觉的消费装置将会成为主流

每年我们都会在国际消费电子展(CES)上看到一些令人惊叹的技术,包括汽车、智能机器人、无人机、增强现实/虚拟现实(AR/VR)、智能家电领域的创新和许多其他技术。

树莓派+Movidius NCS神经计算棒=2018年最佳的AI学习平台?

有人说,树莓派 + Intel Movidius NCS神经计算棒的组合将是2018年最佳的AI学习平台,你怎么看?

MTK加入,千元AI入门机不再遥远

2017年联发科技在智能语音终端领域已经占到了七成份额,独占了亚马逊Echo、Essential Home智能语音助理的全部订单,其后又拿下了阿里巴巴的智能音箱订单。作为智能家庭的中枢控制器,联发科...

其实,入门AI没那么难——加速深度学习推理的Intel Movidius神经计算棒(NCS)评测

其实,入门AI没那么难——加速深度学习推理的Intel Movidius神经计算棒,全球首款基于USB接口、便携小巧、且能加速深度学习推理的学习、开发、调试验证工具——由Intel推出的Movidius神经计算棒。

给我留言

您必须 [ 登录 ] 才能发表留言!