广西壮族自治区教育厅官网,闵行区seo快速排名优化哪里好,WordPress情侣网站,淘宝网站建设的优点文 | 天于刀刀开篇小编想了解一下#xff0c;有多少小伙伴和我一样在看完《复联》后对钢铁侠托尼的智能管家贾维斯非常眼馋#xff0c;然后坚定了自己 all in 人工智能算法这条#xff08;不归#xff09;路的#xff1f;理想中#xff1a;你是个成熟的 AI 管家#xff…文 | 天于刀刀开篇小编想了解一下有多少小伙伴和我一样在看完《复联》后对钢铁侠托尼的智能管家贾维斯非常眼馋然后坚定了自己 all in 人工智能算法这条不归路的理想中你是个成熟的 AI 管家你应该自己学会在家洗衣做菜刷盘子出门取快递偶尔穿个机甲打打外星人到时候记得拍张照我朋友圈等着用。现实中“小爱同学关灯”“嘿Siri。打开网抑云。”目前业界成熟的落地方案中大多数都选择将所谓的“智能管家”也就是语音助手或称聊天机器人作为人类和虚拟空间的一个新的输入纽带。例如一些之前需要人类主动打字搜索的简单问题现在我们可以通过动动嘴唤醒助手来帮我在虚拟空间中进行检索。那么有没有什么能够进一步影响到我们的现实生活的机器助手呢谷歌最新的一项研究表明也许就在不远的将来我们可以真正做到动动嘴指挥机器人帮我们做事啦。[1][2][3]同样是使用语言模型处理输入产生输出随着应用场景从虚拟空间来到现实空间相对于目前已经有简单应用的虚拟管家来说机器人面临着更多挑战。首先是传统的自然语言理解NLU问题往往机器只能够识别短文本的明确命令对于较长的开放式问题可能就抓瞎了。撰文的时候小编现场做了一个小实验分别向 Siri 提出“打开网抑云播放《听妈妈的话》”以及“今天是我母亲生日你有什么推荐的音乐吗”。结果要么是“我没有找到相关应用”或者是“你需要先订阅 Apple Music”。从这个回答中可以看出Siri 完全没有理解我的语义表现不够智能。也许开通 Apple Music 会好一点笑死其次由于目前大模型生成结果的不确定性往往输出的结果不一定是合理的。引用原博客[2]的例子例如你输入“我不小心把水碰翻了你能帮帮我吗”GPT-3 的回复是“你可以试试真空吸尘器” [4]。这是一个正确的建议可是万一我家里没有吸尘器怎么办另外当问 FLAN [5] 同样的问题他会使用“对不起我不是故意的”来道歉这不是一个有用的回复。小结一下目前的难点在于只能接受短文本 (very short) 和明确命令 (hard-code command) 不接受长链命令 (long-horizon tasks)和虚拟目标 (abstract goals)LM 输出结果可行性较差且不可控。因此谷歌的研究团队想到能不能使用一种有效的方法来结合语言模型和机器人学习算法的优点去实现一个落地的“贾维斯”。那么有没有这样一个语言模型他既能够理解上下文语义也可以处理长文本如果能表现出一定的逻辑能力那就最好不过啦。还记得 PaLM [6] 吗能理解上下文语义通过 emoji 猜测电源名甚至可以解释笑话的 PaLM同时也在思维链提示任务中表现出彩。光是能让机器人能接受复杂命令还不够此外最重要的还是能让它选择一个最贴近现实的选择作为输出。这个性质在机器人问题中被称为可供性 (affordance)。根据维基百科的定义在物体的抓取和操纵中机器人需要学习环境中物体的可供性即从视觉感知和经验中学习物体是否可以被操纵学习如何抓取物体以及学习如何操纵物体以达到特定目标。例如原则上可以通过多种手部姿势和接近策略来抓住锤子但有效接触点的集合及其相关的最佳抓握力是有限的。研究团队使用可供性方程 (affordance function) 来控制机器人在一个特定环境中去选择一个可行的方案。最终将语言模型 (Say) 和可供性方程 (Can) 相结合就得到了一个新的解决方案PaLM-SayCan。使用 PaLM-SayCan机器人充当语言模型的“手和眼睛”而语言模型提供有关任务的高级语义知识。具体来说语言模型会根据人机对话的输入生成建议 (Say)而机器人本身也会根据现实情况产生一个行为 (Can)通过融合我们自然得到了一个最合理的行动计划。博客[2]中还通过 demo 视频[7]展示了 PaLM-SayCan 系统的可解释性。我们可以看到它根据语言分数蓝色、可供性分数红色和综合分数绿色来考虑最佳选项。这套方案极大地提升了模型的可解释性同时看起来也是一个非常通用的解决方案。能够想到除了实验中的“厨房”场景外我们可以轻易地将这套方案应用到客厅、卧室、卫生间甚至是办公室等其他封闭场景中。此外原实验中还有个和我们搞 AI互联网/软件/金融/等 不太一样的地方在于他的评价指标有两个计划成功率表示机器人是否选择了正确的指令执行成功率表示它是否成功执行了指令。结果表明使用 PaLM 的系统取得了 sota同时也证明了语言模型对机器人技术的改进效果。在未来谷歌团队也会继续探索如何更好地驾驭语言模型并且使其更加紧密地和其他领域联系在一起。不过我还是想吐槽一下目前放出的 demo 视频里机器人的表现非常呆板在进行一些精密操纵的时候例如拿起一个苹果往往速度非常慢视频里好多都是经过五倍速快进剪辑的效果。此外他的一些行为选择也有限制例如在视频中机器人正确地拿着海绵来到了不干净的台面。正当我以为他下一个动作就是帮你擦桌子的时候研究人员站起身接过了海绵轻轻地拍了拍机器人的头然后擦起了桌子。搞了半天最后机器人只是帮人类跑了一次腿罢了看来仿生人的出现还是遥遥无期啊。最后稍微扩展一下小编一直在思考如果是在闲聊任务中我们可不可以设计一个类似可供性分数的对话主线辅助模型生成更连贯更有逻辑的输出如果机器最终实现了有主题有逻辑的对话那么这个是否就算是智能的体现呢欢迎一同探讨若有相关论文也可推荐交流卖萌屋作者天于刀刀注重 WLB 的工业界反卷斗士未进化的 NLP 咸鱼一条。专注于研究在各个场景中算法模型的落地情况希望自己编写的算法有朝一日可以改变世界。目前的兴趣点在于假新闻检测、深度学习模型可解释性等。作品推荐1.腾讯薪酬改革来了晋升≠加薪员工到底为何工作2.从 Google AI 离职了这里让我爱不起来3.百万悬赏寻找“模型越大效果越差”的奇葩任务4.想通这点治好 AI 打工人的精神内耗后台回复关键词【入群】加入卖萌屋NLP、CV、搜广推与求职讨论群[1] Do As I Can, Not As I Say: Grounding Language in Robotic Affordances, https://arxiv.org/pdf/2204.01691.pdf[2] Towards Helpful Robots: Grounding Language in Robotic Affordanceshttps://ai.googleblog.com/2022/08/towards-helpful-robots-grounding.html[3] Grounding language in robotic affordances, https://www.youtube.com/watch?vE2R1D8RzOlM[4] Language Models are Few-Shot Learners, https://arxiv.org/abs/2005.14165[5] Introducing FLAN: More generalizable Language Models with Instruction Fine-Tuning, https://ai.googleblog.com/2021/10/introducing-flan-more-generalizable.html[6] Pathways Language Model (PaLM): Scaling to 540 Billion Parameters for Breakthrough Performance, https://ai.googleblog.com/2022/04/pathways-language-model-palm-scaling-to.html[7] PaLM-SayCan is also interpretable, https://github.com/say-can/say-can.github.io/blob/main/img/demo_sequence_compressed.mp4?rawtrue
