English
邮箱
联系我们
网站地图
邮箱
旧版回顾



凯时kb88.com:4月15日大咖齐聚首都,酒.

文章来源:凯时kb88.com    发布时间:2018年07月22日 03:46  【字号:      】

凯时kb88.com

成都支付宝C空间PK杭州支付宝Z空间,网友:差距真的好大!

以前网络上有一个段子,相信段子很多人都看过了,但是笔者今天还是想把它放出来。如果时光让你回到97年,你什么事情都不要干,你去到杭州找一个叫马云的人,请他喝酒,请他唱歌,请他吃饭,和他谈理想,跟他做个好朋友,你现在就发了、 但是时光不可能回到97年。说白了,如今的阿里巴巴如此伟大,很多网友都表示:后悔当年没有跟马云大叔混!

而最近,蚂蚁金服旗下的成都办公区,1700名员工有了新的办公室。新的办公大楼位于天府四街,叫做“蚂蚁C空间”。

大家要想到,蚂蚁金服旗下产品众多。而我们最为熟悉的就是支付宝、花呗、借呗等。而像蚂蚁金服这样的公司,也吸引了不少年轻人的目光,毕竟大家都想在这样的名企当中有一份工作经验的背景。

而我们上面看到的只是成都支付宝的新办公地点。如果我们看一下支付宝总部大楼的话,我相信成都的小伙伴们要失望了吧。

1-5月50城卖地收入超1.3万亿!46个城市过百亿,哪个城市卖地收入最高?

“我们现在倾向于通过产城融合,与地方政府合作的方式去获取项目。”招商蛇口内部人士向21世纪经济报道记者表示;阳光城执行副总裁吴建斌认为,产城开发能力将成为开发商的核心竞争力之一。

中国指数研究院指出,2018年随着工业用地供给方式的不断优化,参与工业用地弹性年期出让的城市也将越来越多。

“希望县城多建设一些公共免费停车场,解决县城道路车辆停放拥挤等问题。”陈芬娜笑着说,最好再多建几个街心小公园,“就像乐祥路上的几个小公园,旁边是居民区,大家有了休闲散步的去处。”

居民的期盼将成为现实,县城的湿地公园正在紧锣密鼓地施工中,将为市民打造一个沿江的休憩场所。

除了居民,商户们也有着自己的期待。“街道的排水做好了,乐祥路再也不会积水,也不会影响到店里的生意。”林珠萍在步行街拥有一家冷饮店,作为房东,她关注着店铺的经营情况,“修路期间,店铺的生意没有受到影响,每晚能摆50桌左右。现在路修好了,希望生意能够更好。”

本论文研究者认为解决该问题的关键在于通信,这可以增强策略间的协调。MARL 中有一些学习通信的方法,包括 DIAL [3]、CommNet [23]、BiCNet [18] 和 master-slave [7]。然而,现有方法所采用的智能体之间共享的信息或是预定义的通信架构是有问题的。当存在大量智能体时,智能体很难从全局共享的信息中区分出有助于协同决策的有价值的信息,因此通信几乎毫无帮助甚至可能危及协同学习。此外,在实际应用中,由于接收大量信息需要大量的带宽从而引起长时间的延迟和高计算复杂度,因此所有智能体之间彼此的通信是十分昂贵的。像 master-slave [7] 这样的预定义通信架构可能有所帮助,但是它们限定特定智能体之间的通信,因而限制了潜在的合作可能性。

学界|北京大学提出注意力通信模型ATOC,助力多智能体协作

为了解决这些困难,本论文提出了一种名为 ATOC 的注意力通信模型,使智能体在大型 MARL 的部分可观测分布式环境下学习高效的通信。受视觉注意力循环模型的启发,研究者设计了一种注意力单元,它可以接收编码局部观测结果和某个智能体的行动意图,并决定该智能体是否要与其他智能体进行通信并在可观测区域内合作。如果智能体选择合作,则称其为发起者,它会为了协调策略选择协作者来组成一个通信组。通信组进行动态变化,仅在必要时保持不变。研究者利用双向 LSTM 单元作为信道来连接通信组内的所有智能体。LSTM 单元将内部状态(即编码局部观测结果和行动意图)作为输入并返回指导智能体进行协调策略的指令。与 CommNet 和 BiCNet 分别计算内部状态的算术平均值和加权平均值不同,LSTM 单元有选择地输出用于协作决策的重要信息,这使得智能体能够在动态通信环境中学习协调策略。

研究者将 ATOC 实现为端到端训练的 actor-critic 模型的扩展。在测试阶段,所有智能体共享策略网络、注意力单元和信道,因此 ATOC 在大量智能体的情况下具备很好的扩展性。研究者在三个场景中通过实验展示了 ATOC 的成功,分别对应于局部奖励、共享全局奖励和竞争性奖励下的智能体协作。与现有的方法相比,ATOC 智能体被证明能够开发出更协调复杂的策略,并具备更好的可扩展性(即在测试阶段添加更多智能体)。据研究者所知,这是注意力通信首次成功地应用于 MARL。

图 1:ATOC 架构。

图 2:实验场景图示:协作导航(左)、协作推球(中)、捕食者-猎物(右)。

(吴岳文/文 袁琛/图)




(责任编辑:陈吉林)

附件:

专题推荐

相关新闻


© 1996 - 2017 中国科学院 版权所有 京ICP备05002857号  京公网安备110402500047号 

网站地图    地址:北京市三里河路52号 邮编:100864