吴海军
- 作品数:12 被引量:55H指数:3
- 供职机构:南京大学计算机科学与技术系更多>>
- 发文基金:国家自然科学基金更多>>
- 相关领域:文化科学自动化与计算机技术一般工业技术更多>>
- 基于两阶段意图共享的多智能体强化学习方法被引量:1
- 2023年
- 近年来,强化学习技术在连续决策问题上展现出了强大的能力,成为机器学习领域的一个重要分支.通过强化学习技术在多智能体系统下的发展和研究,多智能体强化学习技术有望成为群体智能行为涌现的关键技术手段,但在现阶段仍有诸多科学问题亟待解决.在多智能体强化学习领域,如何提高智能体在协作场景下的合作能力一直是一个热门研究话题.通信被认为是实现多智能体高水平协作的重要元素,因此有不少研究尝试从通信的角度入手,让智能体通过交流来实现更好的协作.现有的大部分与通信有关的多智能体强化学习领域的工作关注于部分可观测问题,在这些工作中智能体通过通信信道共享了部分局部观测.最新的一些研究开始关注如何让智能体通过共享意图来实现更好的协作.然而,在不加限制的意图共享框架下,若智能体的最终行为与原先的意图不符,则可能会对其它智能体产生误导,此时引入通信反而产生了负作用.因此需要一个新的多智能体意图共享框架,在有效利用意图信息的同时避免出现智能体间的意图误导.针对上述问题,本文基于交流意图的思想,提出了一个新的多智能体强化学习意图通信框架2SIS.在2SIS框架下,智能体在决策前需要进行两次通信,第一次通信传播意图信息,第二次通信传播意图依赖关系.两次通信结束后每个智能体各自建立起意图依赖关系图,为了避免出现意图误导,对于意图依赖关系图上被依赖的智能体,2SIS禁止其基于其它智能体的意图进行重新决策,其最终决策即为其初始意图,仅有不被依赖的智能体被允许基于意图信息重新决策.2SIS可以与任意基于值函数的强化学习算法结合实现训练.在2SIS框架下训练的智能体能够学会如何正确地建立意图依赖关系从而实现单向的意图传播,并且不存在意图误导问题.我们选用较具代表�
- 吴俊锋王文汪亮陶先平胡昊吴海军
- 关键词:多智能体系统
- 计算机系统导论课程教学思路及课程资源建设被引量:1
- 2023年
- 分析“101计划”中计算机系统导论课程内容在整个计算机系统中的位置,提出课程总体建设思路;根据对hello程序执行过程的分析,阐述该课程与前导及后续相关系统类课程之间的关联关系和内容衔接,并说明相关系统类课程教学总体安排;最后介绍计算机系统导论课程主教材及其实践教学案例与教辅教材的基本内容和教学实施方案。
- 袁春风余子濠朱光辉吴海军陈璐
- 关键词:课程资源建设教学实施方案
- 基于深度学习的无人机虚实结合强化学习环境增强方法
- 本发明公开一种基于深度学习的无人机虚实结合强化学习环境增强方法,包括:预训练模型导出强化学习的决策单元。虚实结合时空环境增强,使用预训练的决策单元进行若干轮真机飞行的验证;通过平均时延曲线导出用作无人机虚拟环境中单步决策...
- 魏建安汪亮陶先平胡昊吴海军
- Linux环境下基于Moodle的课程管理系统的构建
- 2011年
- 随着e-Learning的发展,其核心业务平台——课程管理系统CMS(Course Management System)的发展相当迅速。而随着开放源码运动的不断深入,基于开放源码的课程管理系统由于其开放性、共享性、可根据用户需求修改组合等优点,为e-Learning项目的实施提供了低成本的平台解决方案。
- 陈健吴海军
- 关键词:课程管理系统MOODLELINUXE-LEARNING开放源码
- 计算机网络协议分析与开发实验的一种新教学方法被引量:9
- 2011年
- 提出一种基于逆向工程与重叠网络开展计算机网络协议分析与开发实验教学的方法。通过协议逆向工程实验,提高学生的协议分析能力,并可以让学生利用协议分析结果进行协议开发。利用重叠网络,学生可以在完全不触及操作系统底层网络协议栈的情况下,自行设计一个完整的网络协议栈。它可以模拟TCP/IP协议栈的基本功能和特性,如路由协议、滑动窗口协议、信号协议等。这种实验教学方法不仅可以培养学生的协议分析与设计能力,而且可以极大的提高学生的协议开发能力。
- 陈健吴海军徐煊
- 关键词:网络实验教学方法逆向工程重叠网络
- “计算机组成与体系结构”课程群建设实践被引量:20
- 2010年
- 本文分析了目前计算机相关课程教学面临的挑战和机遇;在对国内外教学情况进行分析比较的基础上,提出了"计算机组成与体系结构"课程群建设目标和思路;详细介绍了南京大学的改革实践情况和取得的成效;最后给出了课程群建设的工作设想。
- 袁春风黄宜华武港山俞建新吴海军
- 关键词:计算机组成计算机系统结构课程群建设教学改革
- 一种污染事故环境应急数字化预案模型方法
- 发明提供一种污染事故环境应急数字化预案模型方法。利用计算机技术和网络技术,根据突发事件的处置流程,在事态发展实时信息的基础上,帮助指挥人员形成全面、具体、针对性强的直观高效的行动方案,使方案的制定和执行达到规范化、可视化...
- 毕军吴海军马宗伟武港山刘苗苗钱瑜
- 文献传递
- 一个网络教学系统的方案设计被引量:24
- 2001年
- 通过对现代教育技术和方法、多媒体技术、交互式主页设计和远程数据库访问等技术进行分析 ,讨论了进行多媒体教学的理论依据和可靠方法 ,利用Java技术建立基于互联网的多媒体远程教学和考试系统 .重点讨论和设计了包括多媒体课件、协作交流、网上作业和在线考试等 4个部分的教学软件 .
- 吴海军张福炎
- 关键词:远程教学课件设计在线考试网络教学系统多媒体技术JAVA技术
- 多媒体远程教学考试系统设计与实现
- 该文通过对多媒体技术、交互式主页设计和远程数据库访问等技术进行分析,讨论了进行多媒体教学的理论依据和可靠方法,利用Java技术建立基于互联网的多媒体远程教学、考试系统.该文重点讨论了多媒体信息的表现、动画设计、网络通信、...
- 吴海军
- 关键词:多媒体技术远程数据库访问课件设计在线考试多媒体
- 文献传递
- 《爆破质量综合评价仪》的研制和开发
- 1996年
- 提出了通过8098单片机采集电铲推压电压的信号变化情况,进行快速傅里叶变换,再对结果进行分析处理,得出反映爆破质量的优劣的指标。利用该原理研制成功一种能在矿山现场直接反映爆破质量优劣的仪器──《爆破质量综合评价仪》。根据该仪器的反映的结果,来调整下一次爆破参数,实现爆破优化,降低采矿成本。该仪器在马鞍山姑山铁矿使用后,效益显著。于一九九四年一月通过安徽省冶金厅的鉴定。并获得一九九四年安徽省科技进步成果奖。
- 张泽生吴海军
- 关键词:爆破质量单片机快速傅里叶变换