English
邮箱
联系我们
网站地图
邮箱
旧版回顾



AG:车俊:坚决打赢污染防治攻坚战高质量推进美丽浙江建设

文章来源:AG    发布时间:2018年07月18日 10:39  【字号:      】

AG

明微道:“四叔误会了,侄女并不是不听,而是想说,我并没有胡闹。”

四老爷面色一沉:“你还要推墙?”

明微没有正面回答,而是掂起那包朱砂,看似随意地问:“四叔,朱砂灼魂,这阵法是谁教您的?”

“是……”明四老爷一顿,警惕地看向她。

明微并没有等他回答,继续说道:“这阵法过于粗陋,若是凶物没那么凶,倒是合用,可凶物太凶了,反而会激怒它。这么一来,适得其反。四叔,您这灼魂阵一摆,这只凶物恐怕会提前破困而出。”

文莹这一天过得极是惊险,好几回以为自己完了,谁知峰回路转,安然无恙。

她低声说了句:“谢谢。”

明微并不搭腔。她出手相救,不等于不在意文莹此前的行迳。

年纪轻轻的姑娘家,如此心狠手黑,她一点好感也没有。

文莹默默擦掉脸上的灰,换上衣裳,理好头发。

一瞬间,她有了主意。

眼前美人摘下幂篱,露出蒙了轻纱的脸庞。

姜湛先是一怔,只觉得这双眉眼精致极了,叫人想一看究竟。

等他凝神再看,大失所望,很快移开了视线,去看下一个美人了。

明微轻纱下的嘴角轻轻一提,笑容一闪而逝。

1997年,两名吸毒者正准备注射毒品

地狱在人间,镜头下俄罗斯吸毒、艾滋病群体的悲惨现状

1998年俄罗斯两名男子正在准备注射毒品

2001年的俄罗斯监狱中,艾滋病患被单独关押

1998年,俄罗斯监狱中多名艾滋病患居住在一起

2001年俄罗斯艾滋病犯人正在剃胡子

一瞬间,她有了主意。

眼前美人摘下幂篱,露出蒙了轻纱的脸庞。

姜湛先是一怔,只觉得这双眉眼精致极了,叫人想一看究竟。

等他凝神再看,大失所望,很快移开了视线,去看下一个美人了。

明微轻纱下的嘴角轻轻一提,笑容一闪而逝。

不多时,门被推开,二老爷走了进来。

“你倒是心诚,小七病都好了,还天天抄。”

明三夫人不言不语,直到抄完最后一节,搁笔收纸,才转过身来。

她语气带着嘲弄:“你忽然传信说有要事,到底什么了不得的事,在你眼中算得上要事?”

二老爷慢慢呷了口茶,才道:“小七的事,算不算要事?”

三声原创内容 转载请联系授权

他想了想:“可是,他的武功路数根本不一样啊!”

宁休面无表情:“先师惊才绝艳,无所不精。我们师兄弟恰恰学了不同的部分,我学琴,他修剑。”

“这样啊……”玄非想不出反驳的话,只得道,“既然是熟人,就没必要一争胜负了。”

宁休却道:“争也无妨。”

“……”玄非很想打人。他这么说,不就是因为自家师弟占上风吗?

本论文研究者认为解决该问题的关键在于通信,这可以增强策略间的协调。MARL 中有一些学习通信的方法,包括 DIAL [3]、CommNet [23]、BiCNet [18] 和 master-slave [7]。然而,现有方法所采用的智能体之间共享的信息或是预定义的通信架构是有问题的。当存在大量智能体时,智能体很难从全局共享的信息中区分出有助于协同决策的有价值的信息,因此通信几乎毫无帮助甚至可能危及协同学习。此外,在实际应用中,由于接收大量信息需要大量的带宽从而引起长时间的延迟和高计算复杂度,因此所有智能体之间彼此的通信是十分昂贵的。像 master-slave [7] 这样的预定义通信架构可能有所帮助,但是它们限定特定智能体之间的通信,因而限制了潜在的合作可能性。

学界|北京大学提出注意力通信模型ATOC,助力多智能体协作

为了解决这些困难,本论文提出了一种名为 ATOC 的注意力通信模型,使智能体在大型 MARL 的部分可观测分布式环境下学习高效的通信。受视觉注意力循环模型的启发,研究者设计了一种注意力单元,它可以接收编码局部观测结果和某个智能体的行动意图,并决定该智能体是否要与其他智能体进行通信并在可观测区域内合作。如果智能体选择合作,则称其为发起者,它会为了协调策略选择协作者来组成一个通信组。通信组进行动态变化,仅在必要时保持不变。研究者利用双向 LSTM 单元作为信道来连接通信组内的所有智能体。LSTM 单元将内部状态(即编码局部观测结果和行动意图)作为输入并返回指导智能体进行协调策略的指令。与 CommNet 和 BiCNet 分别计算内部状态的算术平均值和加权平均值不同,LSTM 单元有选择地输出用于协作决策的重要信息,这使得智能体能够在动态通信环境中学习协调策略。

研究者将 ATOC 实现为端到端训练的 actor-critic 模型的扩展。在测试阶段,所有智能体共享策略网络、注意力单元和信道,因此 ATOC 在大量智能体的情况下具备很好的扩展性。研究者在三个场景中通过实验展示了 ATOC 的成功,分别对应于局部奖励、共享全局奖励和竞争性奖励下的智能体协作。与现有的方法相比,ATOC 智能体被证明能够开发出更协调复杂的策略,并具备更好的可扩展性(即在测试阶段添加更多智能体)。据研究者所知,这是注意力通信首次成功地应用于 MARL。

图 1:ATOC 架构。

图 2:实验场景图示:协作导航(左)、协作推球(中)、捕食者-猎物(右)。

“明荣!”明三夫人一个激灵,厉声喊道。

都已经被小七撞见了,他居然还想把她哄骗回去,自己继续?这人怎么能无耻到这个地步!

明微先是笑:“原来六叔与我娘在玩啊!”接着话风一转,带着几分天真说道,“我也想玩呢,不如六叔陪我玩呀!”

这样一张美丽又无邪的脸庞,真是叫人拒绝不了。

六老爷原本没多想,毕竟是自己侄女,他从没起过这样的心思。




(责任编辑:钱赢君)

附件:

专题推荐

相关新闻


© 1996 - 2017 中国科学院 版权所有 京ICP备05002857号  京公网安备110402500047号 

网站地图    地址:北京市三里河路52号 邮编:100864