科技行者
算力行者
提到芯片，我们的智能手机电脑、智能汽车、智能家居等等设备，无一离不开它，而芯片的产生有两个阶段：设计和制造，前者属于软件层面，后者属于硬件层面。相对应的，芯片公司也主要分为两大类，芯片设计公司和芯片代工公司。所谓“一流的公司做设计，二流的公司做品牌，三流的公司做生产。”这话放到芯片行业也不为过，从软件设计、调试、流片成功到批量生产，整个环节既复杂又烧钱，因此全球顶尖的芯片设计公司寥寥无几。
而在2021世界人工智能大会期间，苹果公司副总裁、大中华区董事总经理葛越就分享了关于《apple“芯”系创新》的主题演讲，短短20分钟的内容信息量不少，包括苹果的芯片优势、产品理念、隐私问题、开发者群体。其中她提到，其中她提到，苹果设计的芯片不是用来出售，而是专门为苹果量身定制。为了进一步改善用户体验，苹果还在芯片中搭载了“神经网络引擎（neural engine）”，即苹果在芯片中专门用于机器学习的硬件，可用于图像处理、人脸识别等。同时她还透露，苹果大中华区的开发者目前已超过440万人。
图片摄于上海世界人工智能大会·智能芯片定义产业未来专题论坛现场。
以下是苹果公司副总裁、大中华区董事总经理葛越7月8日在上海世界人工智能大会·智能芯片定义产业未来专题论坛的演讲实录：
各位领导，各位嘉宾，大家下午好！首先非常感谢主办方再次邀请我参加世界人工智能大会。很高兴和这么多的业界专家和同仁汇聚一堂，探讨如何让技术为社会的发展起到更加有效的影响，并肩负起企业应有的社会担当。
apple（苹果公司）强大的人工智能技术帮助客户、创意工作者、开发者取得成功。我们自豪地看到，无论在中国还是世界各地，apple 的人工智能和机器学习技术正在改变着人们的生活。
今天我将分享apple在人工智能和机器学习方面的做法，以及如何通过这些技术来帮助人们开创一个更美好、更健康、更繁荣、更加激动人心的未来。
apple端到端的产品设计，并嵌入机器学习，从而实现众多耳熟能详的功能，增强创造者和开发者的创新能力。在整个过程中，我们把用户隐私放在首位，同时提供卓越的用户体验。
一、谈「苹果芯片」：软硬件结合，自研芯片不会对外出售
首先，我想谈谈 apple 产品和技术开发的理念。
我们对于我们创造的技术是有选择性的。我们产品和技术的开发永远都是为了打造最好的产品，实现最好的体验，独一无二的软硬件紧密结合让我们能够做到这一点。
apple的端到端的产品设计，从芯片到硬件再到软件全栈式覆盖。这意味着我们设计的是完整的用户体验，包括从芯片到操作系统，以及从拍摄到分享、沟通、创造和学习等一系列的丰富功能。
让我们从apple的芯片说起。我们的芯片为我们自己的产品量身定制，并为机器学习进行了专门的优化。我们知道机器学习能够为用户提供更为独特的体验，因此很早就开始研发能在设备端有效运行复杂机器学习算法的芯片。
10多年前apple就开始了这一工作，今天，我们几乎所有产品都搭载了apple自己的芯片。
我们的硬件技术团队采用了可扩展的芯片架构，同样的模块可适用于多个系统级芯片（soc）。芯片设计过程中，我们的工程师拥有着独特的优势：他们设计的芯片不是用来出售给其他公司，而是专门为apple特定的产品，甚至是为了特定功能而专门设计的。这种优化贯穿于cpu、gpu、图像信号处理器及更多组件。也正是这种不断优化卓越用户体验的愿望，推动了我们开发出apple神经网络引擎。
我们于2017年发布的 a11 仿生芯片中搭载了神经网络引擎，这是soc中专门负责机器学习的单元。自那时起，我们不断增加神经网络引擎的核心和能力。iphone12搭载的a14仿生芯片中的神经网络引擎能够完成惊人的计算能力，即每秒11万亿次的运算。
去年，我们发布了搭载m1芯片的mac，今年我们又发布了搭载m1芯片的 ipad pro。这是我们有史以来最强大的一款芯片，性能和能效都大幅提升。m1是首款采用先进 5 纳米制程打造的个人电脑芯片，封装了高达160亿个晶体管，其数量为apple所有芯片之最。
这款低能耗芯片搭载了世界上最快的中央处理器核心，拥有最卓越的中央处理器性能功耗比，配备了世界上最快的个人电脑集成显卡，它的 apple 神经网络引擎更带来了突破性的机器学习性能。得益于此，m1 芯片完成了看似不可能完成的任务：它的性能显著提升，包括将机器学习速度提升最高 15 倍，与此同时电池续航时间最高提升 2 倍。
二、谈「产品功能」：最好的产品是为所有人设计的产品
在开发产品和功能时，我们最重要的目标就是通过更加简单易用、富有创意、并且充满个性的技术让用户的生活变得更轻松。
因此，我们广泛的将机器学习用于赋能用户的日常活动。利用机器学习可以支持 siri 语音识别，语言翻译，设备端听写，将照片进行分门别类。apple watch 上的洗手和睡眠等健康应用也得益于此。机器学习甚至可以根据用户的使用习惯，优化 apple 设备的续航和充电。
我们在每一次软件更新中，持续创新机器学习能力。例如，ios 15和 ipados 15 推出了一项我们称之为“实况文本”的新功能。该功能可以识别图片中的文字，因此用户可以像选择普通文本一样选择这些图片中的文字。用户可以拍一张指示牌的照片，通过机器学习就可以翻译、搜索更多信息或分享给朋友。
ios 15 和 ipados 15 中的另一项新功能叫做“视觉查找”。有了这个功能，大家可以选择图片中的一个对象，比如一款艺术品、一本书籍、一个动物或者一个地标，然后立即获取关于这个对象更多的相关信息。
我们相信，最好的产品是为所有人设计的产品。机器学习也驱动了 apple 围绕辅助功能开展的诸多创新。在我们产品自带的辅助功能中，强大的麦克风可以充当失聪人士的耳朵。当他们的设备“听到”火警、婴儿啼哭或家用电器鸣叫等声音时，会立即通知用户。
对视觉障碍用户来说，apple 产品的“旁白”功能使他们能够无障碍地使用应用程序。通过机器学习，旁白能识别出设备屏幕上的内容。它能帮助用户“看见”图像、文本或用户界面上的按钮等内容，并向用户解释看到了什么。
还有一个令我们倍感兴奋的例子。今年晚些时候，肢体残障人士将能够通过一项名为“辅助触控功能”的技术更加充分地使用 apple watch。用户佩戴手表时，该技术将 apple watch 强大的传感器与机器学习技术相结合，能够检测到肌肉运动与肌腱活动的细微变化。因此，用户只需通过手势，甚至无需触碰手表屏幕，就能移动屏幕上的指针，调用各种强大的功能。
通过这些方式，机器学习使得任何人都能轻松体验 apple 产品的魅力。我们相信，无论用户使用产品的目的是什么，单纯为了娱乐，或是想在世界上留下自己的印记，我们都应该为他们做出最好的产品，也就是适合每个人使用的产品。
三、谈「隐私问题」：苹果不收集用户信息、不存在服务器上、不出售
我们希望所有人使用我们的产品的时候能用得顺心，也用得放心。因此我们将隐私保护置于一切产品开发的核心。
我们知道，机器学习需要使用大量数据。但人工智能和机器学习的有效性并不需要以牺牲用户隐私为代价。对 apple 的所有员工而言，这是我们的首要关注点，也是基本的价值观。同样的隐私保护融入到我们全球产品设计的每个阶段之中。
无论是设计和训练机器学习模型，还是开发基于语音和文本的软件，在开发的每个阶段我们都会问自己同一个问题：“我们如何能用最少的数据和最大程度的数据安全，打造最智能化的功能？”
因此我们不收集大量的个人信息，不将用户数据存储在服务器上，也不出售给第三方。我们并不需要做这种牺牲。在 apple 所有的产品和服务中，我们仅使用必要的数据完成任务，并尽量在设备端进行数据处理。
当机器学习是在用户的设备端实时发生的时候，它不仅更安全，还更实用，更加个性化。
这里我想给大家举几个例子。apple pencil 能通过机器学习识别你的笔迹。面容 id 和触控 id 能通过机器学习检测你的面部或指纹。apple watch 也是通过机器学习检测异常心率，并识别罕见的心脏疾病。在这个过程中，你的任何个人信息都从未离开过你的设备。
在运行 ios 15 和 ipados 15 的设备上，apple 的神经网络引擎功能十分强大。用户向 siri 提问时，我们的目标是语音数据在设备端进行处理。这意味着 siri 不需要录音，也不用问题发送到云端就可以处理和回答语音请求。 当隐私被置于设计的核心时，机器学习的力量更为强大，也更有温度。
在照片应用中也可以看到我们对用户隐私的承诺。我们知道，照片中含有一些关于朋友、家人和日常生活的最私人的数据。因此当你在照片中搜索人物、宠物或地点时，搜索仅发生在你的 iphone 或 ipad 上。
我们所有的产品都以这种标准进行机器学习功能的开发。当隐私得到保护时，机器学习能够发挥更巨大的潜力，激发创新，提升创造力。我们坚持在设备端处理数据的努力，不仅更好地保护了隐私，还带来了开创性的新功能。我们认为鱼和熊掌皆可得。
四、谈「开发者」：教育是最重要的工具之一
正如大家所了解到的，apple 对机器学习的投入不仅限于自身创新，也延伸到我们遍布在世界各地、不断增长的庞大开发者社区。
世界各地的开发者都可以使用 apple 机器学习的框架 core ml，把机器学习模型融入到他们的应用中去。这使得开发者能够更轻松地开发精彩的新功能和新体验。core ml 大约在四年前推出，我们兴奋地看到，中国和世界各地数以百万的开发者都在使用这一框架。
比如上海的开发者 versa 用了core ml进行创新，他们最新的编辑应用「不咕剪辑」深受视频博主喜爱。利用 apple m1 芯片，「不咕剪辑」几乎可以对视频进行实时逐帧处理。因为开发者们利用我们的产品和技术推出了优秀的创新应用，普通创意人员都可以享受以往只有专业工作室才能实现的视频和图像处理效果。
通过 apple 的硬件设备，以及包括 metal 在内的技术，开发者们能最大程度地发挥 app 中的图形和计算潜能。metal 帮助拓展了手机游戏的视觉前沿。同样位于上海的开发者米哈游就基于此技术，开发的《原神》在全球受到追捧，还获了年度 iphone 游戏的殊荣，相信很多人的 iphone 上都有这款游戏。
类似这两家的优秀开发者在我们的平台上还有很多，而且他们的队伍还在不断壮大。大中华区的开发者人数现在已经超过了 440 万人，过去两年规模增长速度达到 76%。
apple 强大的9479威尼斯的技术支持正在惠及越来越多的人。通过 apple developer program，我们为众多开发者提供了最先进的技术，帮助他们开发出更多更好的应用。这其中包括成熟的大公司，也有小而美的新兴企业。apple 在 2020 年推出了 「app store 小型企业计划」，致力于为更多的小型开发者提供支持，帮助他们开发出深受全球喜爱的应用。
我们认为这些努力也才刚刚开始。apple 除了在所有设备中配有一颗强大的“芯”来保障技术赋能我们的生态和社区，更有一份为培育中国开发者社区全心投入的意愿和责任。我们在上海的「设计开发加速器」定期为中国的开发者举办线上和线下讲座、研讨会及社交活动。在全国各地不论是几千人的大企业，还是包括个人开发者在內的小企业，我们都会给予支持。
我们不仅支持现有的开发者，还通过“智惠计划”激励着未来一代。大家可能听说过 wwdc 奖学金计划和全国大学生移动应用创新赛，这些竞赛让数以万计的学生对编程产生浓厚的兴趣。他们能获得 apple 工程师和成功开发者的指导，并与世界各地志同道合的朋友见面。通过“智惠计划”，我们还与中国发展研究基金和中国扶贫基金会等伙伴合作， 为数十万从零到三岁的幼儿，农村地区的学龄儿童以及职业学校的年轻人们提供帮助。
当我们提供给人们出色的工具时，他们就能实现非凡的创造。毫无疑问，教育正是最重要的工具之一。
我们很高兴能将 apple 芯片的能力和机器学习技术交给优秀的年轻人、开发者、设计师和工程师，帮助他们实现梦想，我们更加期待用自己的教育之心承载我们的责任，赋能新一代。
我们深信深思者虑远，登高者望远，轻履者行远。我们愿和在座的各位领导和业界同仁上下求索，携手同行，为用户提供更卓越的技术、开拓更广阔的天地、开创更美好的未来。
谢谢大家！
好文章，需要你的鼓励