中国建设银行租赁网站,网站图标怎么下载,安徽省建设工程信息管理平台,三网合一网站建设百科来源#xff1a;TechTalks 网站作者#xff1a;Ben Dickson译者#xff1a;Sambodhi策划#xff1a;刘燕InfoQ 中文站曾经翻译并分享过《谷歌的深度学习在 AI 芯片中找到了一条关键路径》#xff0c;该文介绍了 ZDNet 与谷歌大脑总监 Jeff Dean 谈到谷歌如何使用人工智能来… 来源TechTalks 网站作者Ben Dickson译者Sambodhi策划刘燕InfoQ 中文站曾经翻译并分享过《谷歌的深度学习在 AI 芯片中找到了一条关键路径》该文介绍了 ZDNet 与谷歌大脑总监 Jeff Dean 谈到谷歌如何使用人工智能来推进定制芯片的内部开发从而加快软件开发。使用人工智能设计芯片来运行人工智能这本身是一件非常有意思的事。本文作者探讨了他对谷歌使用人工智能为人工智能设计芯片的思考。本文最初发表于 TechTalks 网站经原作者 Ben Dickson 授权InfoQ 中文站翻译并分享。本文是 TechTalks 对 人工智能研究论文的评论文章 之一这个系列主要探索人工智能领域的最新发现。上个星期在同行评审的科学杂志《自然》Nature上发表的一篇论文谷歌大脑的科学家提出了一项 深度强化学习技术可以用于布图规划floorplan即安排计算机芯片上不同元件的放置过程。译注布图规划是在集成电路设计特别是其中的物理设计步骤对于电路主要功能模块在试验性布局中的图形表示。它是物理设计后续过程即精确布线的前提。研究人员试图用强化学习技术来设计下一代的张量处理器也就是谷歌的人工智能处理器。使用软件进行芯片设计并非新鲜事。但据谷歌研究人员称这种新的强化学习模型“能自动生成芯片平面图这些图在所有关键指标上都优于或可匹敌由人类绘制的平面图包括功耗、性能和芯片面积。”并且它只花了人类所需时间的一小部分。人工智能在性能上优于人类的特性已经引起了广泛的关注。一家媒体将其描述为“能够比人类更快地设计计算机芯片的人工智能软件”并写道“一款需要人类花费数月来设计的芯片谷歌的一种新的人工智能在六个小时内就能实现。”另外一家媒体写道“人工智能为人工智能设计芯片的良性循环似乎刚刚起步。”但是读了这篇论文后让我吃惊的不是用于设计计算机芯片的人工智能系统的复杂性而是人类和人工智能之间的协同。类比、直觉和奖励这篇论文是这样描述这个问题的“芯片布图规划涉及到在芯片画布二维网格上放置网表以优化性能指标例如功耗、时序、面积和布线长度同时又要遵守布线密度和布通率的硬约束条件。”基本上你要做的就是以最优化的方式放置元件。但是和其他问题一样随着芯片中元件数量的增加寻找最佳设计变得越来越困难。现有的软件有助于加快发现芯片排列的过程但是如果目标芯片越来越复杂就会产生问题。研究人员决定从 强化学习 的方法中汲取经验以解决其他复杂的空间问题例如围棋。研究人员写道“芯片布图规划 类似 于一场游戏其中存在不同的棋子例如网表拓扑结构、宏计数、宏大小和长宽比、棋盘不同的画布尺寸和长宽比和胜负条件不同评估指标的相对重要性或不同的布线密度和布通率限制。在人类智慧中这是一个最重要也是最复杂的方面类比。我们人类能从自己解决的问题中提取出抽象的东西然后再把抽象运用到新问题上。尽管我们把这些技能视为理所当然但正是这些技能让我们在迁移学习方面做得很好。因此研究人员可以把芯片的布图规划问题重新设计成一种棋盘游戏而用其他科学家解决围棋游戏的方法来解决它。深度强化学习模型可以特别擅长于在很大的空间内进行搜索这在物理上是无法实现的因为人类大脑的计算能力决定了。然而科学家们面临的问题比围棋要复杂几个数量级。“将 1000 个节点集群放置在由 1000 个单元组成的网格中的状态空间是 1000 的数量级大于 10²⁵⁰⁰而围棋的状态空间为 10³⁶⁰。”研究人员写道。他们想要设计的芯片将由数百万个节点组成。他们使用 人工神经网络 来解决复杂的问题这种网络可以将芯片设计编码为向量表示从而使探索问题空间更容易。根据这篇论文“我们的直觉重点在于我的直觉表明一种能够完成芯片放置的常规工作的策略也应该能在推理过程中将与新的未知芯片有关的状态编码成有意义的信号。所以我们训练了一个神经网络架构它可以预测放置有奖励的新网表最终目标是把这个架构作为我们策略的编码层。”直觉intuition这个词常被随意使用。但直觉是一个很 复杂的鲜为人知的过程包括经验、潜意识知识、模式识别等等。我们的直觉来自于多年来在某一领域的研究但也可以从其他领域的经验中得到。幸运的是在高功率计算和 机器学习工具 的帮助下将这些直觉用于测试变得更加容易。此外值得注意的是强化学习系统要求有周密设计的奖励。实际上一些科学家认为只要有正确的奖励功能强化学习就足以使通用人工智能成为现实。但是如果没有正确的奖励强化学习智能体就会陷入无休止的循环之中做出一些愚蠢而无意义的事情。在下面的视频中一个玩《赛船冠军赛》Coast Runners电子游戏的强化学习智能体正在试图使其积分最大化而放弃了主要目标——赢得比赛。视频链接https://youtu.be/tlOIHko8ySg谷歌的科学家将布图规划系统的奖励设计为“代理布线长度、布通率和布线密度的负加权和”。在开发和训练强化学习模型时这些权重是他们必须调整的超参数。通过正确的奖励强化学习模型可以充分发挥它的计算能力找到各种方式设计平面图使奖励最大化。策划数据集该系统中使用的深度神经网络是使用 监督学习 开发的。监督机器学习需要标记数据以便在训练期间调整模型的参数。谷歌的科学家创建了“一个包含 10000 个芯片放置的数据集其中输入是与特定放置相关的状态标签是该放置的奖励”。为避免手动创建每个平面图研究人员结合了人类设计的平面图和计算机生成的数据。对于训练数据集中所包含的算法生成例子的评估需要多少人力论文中并没有给出太多信息。但是没有高质量的训练数据监督学习模型最终将做出糟糕的推断。在这个意义上该人工智能系统不同于其他强化学习程序例如 AlphaZero它开发的游戏策略无需人类参与。将来研究人员可能会开发一种强化学习智能体它可以设计自己的平面图而无需监督学习组件。但是我猜想由于问题的复杂性解决这类问题很有可能会继续要求整合人类直觉、机器学习和高性能计算。强化学习设计与人类设计在谷歌研究人员提出的工作中有趣的方面是芯片的布局。我们人类使用各种捷径来克服大脑的极限。我们无法在一个大块中解决复杂的问题。但我们可以设计模块化、分层次的系统来对复杂的问题进行划分和求解。在开发能够执行非常复杂任务的系统时我们考虑并设计自顶向下架构的能力起了重要作用。我举一个软件工程的例子这是我自己的专业领域。从理论上讲你可以在一个文件中用非常大的、连续的命令流来编写整个程序。但软件开发人员从来不会这么写他们的程序。我们所创建的软件都是小块的函数、类、模块它们可以通过明确定义的接口进行交互。接着我们将这些小块嵌套到较大的小块中逐渐地形成一个元件的层次结构。你不必阅读程序的每一行就能理解其功能。模块化使得多个程序员能够在同一个程序上工作也使得一些程序可以重复使用先前构建的组件。有时候仅仅是看看程序的类架构就足够了它可以为你指出正确的方向找出错误或者找到增加升级的正确位置。我们经常以速度换取模块化和更好的设计。从某种意义上说计算机芯片的设计也有类似的问题。人类设计的芯片往往在不同的模块之间有整齐的界线。而谷歌的强化学习智能体所设计的平面图无论布局看上去如何见下图都已找到最小阻力路径。左图为人类设计的芯片右图为人工智能设计的芯片这是否会成为一种可持续的设计模式还是需要在高度优化的机器学习产生的设计与人类工程师强加的自顶而下的顺序之间作出某种妥协我很好奇。人工智能 人类智能正如谷歌的强化学习驱动的芯片设计者所展示的人工智能硬件和软件的创新将继续需要抽象思维找到要解决的正确问题培养对解决方案的直觉以及选择正确的数据来验证解决方案。这些都是更好的人工智能芯片可以加强但不能取代的技能。总之我不认为这是一个“人工智能战胜人类”、“人工智能创造更智能的人工智能”或人工智能发展了“递归自我完善”能力的故事。相反人类可以利用人工智能作为工具来克服自身的认知极限并扩展自身能力的表现。假如存在良性循环那就是人工智能和人类找到更好的合作方式。 作者介绍Ben Dickson软件工程师也是 TechTalks 的创始人。撰写关于技术、商业和政治方面的文章。原文链接https://bdtechtalks.com/2021/06/14/google-reinforcement-learning-ai-chip-design/未来智能实验室的主要工作包括建立AI智能系统智商评测体系开展世界人工智能智商评测开展互联网城市云脑研究计划构建互联网城市云脑技术和企业图谱为提升企业行业与城市的智能水平服务。 如果您对实验室的研究感兴趣欢迎加入未来智能实验室线上平台。扫描以下二维码或点击本文左下角“阅读原文”
