CN109529352A虚拟环境中调度策略的评估方法、装置及设备.pdf

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 109529352 A (43)申请公布日 2019.03.29 (21)申请号 201811429123.1 (22)申请日 2018.11.27 (71)申请人 腾讯科技（深圳）有限公司 地址 518057 广东省深圳市南山区高新区 科技中一路腾讯大厦35层 (72)发明人 邱福浩　吴斌　李晓倩　屈鹏　 梁静　 (74)专利代理机构 北京三高永信知识产权代理 有限责任公司 11138 代理人 张所明 (51)Int.Cl. A63F 13/67(2014.01) 权利要求书3页 说明书16页 附图8页 (54)发明名称 虚拟环境中调度策略的评估方法、装置及设 备 (57)摘要 本申请公开了一种虚拟环境中调度策略的 评估方法、装置及设备，属于计算机技术领域。所 述方法包括：获取虚拟环境的应用程序在运行时 产生的帧数据，提取帧数据中与目标虚拟对象对 应的目标帧数据；对目标帧数据进行特征提取， 得到目标虚拟对象在当前局面状态下的状态特 征；调用价值网络预测模型对状态特征进行处 理，得到目标虚拟对象在当前局面状态中执行N 种调度策略的预期回报收益。本申请通过获取目 标虚拟对象对应的目标帧数据，提取得到目标帧 数据的状态特征，调用价值网络预测模型对状态 A 特征进行处理，得到目标虚拟对象执行每个调度 2 策略的预期回报收益，实现了虚拟环境中价值网 5 3 9 络模型的构建，进而提高了AI控制虚拟对象执行 2 5 9 调度策略的准确度。 0 1 N C CN 109529352 A 权　利　要　求　书 1/3页 1.一种虚拟环境中调度策略的评估方法，其特征在于，所述虚拟环境中包括至少两个 虚拟对象以及供所述虚拟对象使用的虚拟资源，所述方法包括： 获取所述虚拟环境的应用程序在运行时产生的帧数据； 提取所述帧数据中与目标虚拟对象对应的目标帧数据，所述目标帧数据是用于生成所 述目标虚拟对象对应的目标用户界面的数据； 对所述目标帧数据进行特征提取，得到所述目标虚拟对象在当前局面状态下的状态特 征，所述状态特征包括关联虚拟对象和所述虚拟资源的状态，所述关联虚拟对象包括所述 目标虚拟对象以及与所述目标虚拟对象具有利益关系的虚拟对象； 调用价值网络预测模型对所述状态特征进行处理，得到所述目标虚拟对象在所述当前 局面状态中执行N种调度策略的预期回报收益，所述预期回报收益用于表征所述调度策略 对在所述虚拟环境中对战的胜利条件的贡献，N为正整数，N≥2。 2.根据权利要求1所述的方法，其特征在于，所述状态特征包括全局地图分布特征、所 述目标虚拟对象的行为特征和所述关联虚拟对象的参数特征中的至少一种； 所述全局地图分布特征用于表征所述关联虚拟对象的所在位置，或所述关联虚拟对象 和所述虚拟资源的所在位置； 所述目标虚拟对象的行为特征用于表征所述目标虚拟对象的行为； 所述关联虚拟对象的参数特征用于表征所述关联虚拟对象的状态。 3.根据权利要求2所述的方法，其特征在于，所述目标用户界面中还显示有所述虚拟环 境的全局缩略地图； 所述对所述目标帧数据进行特征提取，得到所述目标虚拟对象在当前局面状态下的状 态特征，包括： 读取所述目标帧数据中所述全局缩略地图的数据，提取得到所述全局地图分布特征。 4.根据权利要求2所述的方法，其特征在于，所述对所述目标帧数据进行特征提取得到 所述目标虚拟对象在当前局面状态下的状态特征，