T/JSIA 0003-2024 基于多智能体强化学习的博弈决策系统标准

主要技术内容:4 一般要求4.1 系统组成系统由数据存储模块、信息配置模块、交互展示模块、策略生成模块组成。4.1.1 数据存储模块使用数据库系统或文件系统实现感知数据和算法模型的持久化存储。4.1.1.1 数据存储模块基本技术要求a) 使用数据库系统或文件系统实现数据的持久化存储；b) 选择合适的数据结构和存储方式，以支持高效的数据查询和检索。4.1.1.2 数据存储模块功能要求a) 提供数据写入和读取接口，允许决策系统将关键数据存储到数据库或文件中，以及从中检索数据，存储系统的中心存储可支持存储容量的动态的、持续的扩充；b) 支持数据的批量存储和查询，以便于训练和分析大规模数据，且具备冗余备份的功能。4.1.1.3 数据存储模块性能要求a) 并发存储性能：数据存储应能够满足并发写入的要求；b) 系统不应该因为存储系统响应不及时而导致程序异常现象，数据库查询的效率应足够高，能够在短时间内返回查询结果；c) 存储设备宜对缓存进行优化设计，采用记录性能优先策略，保证对数据实时记录。支持数据的持久化存储，以确保数据不会在系统关闭后丢失。4.1.2 信息配置模块对于强化学习算法应用的场景信息能够自定义配置：如智能体数量、环境基本配置信息等。实现用户界面技术，如图形用户界面（GUI）或命令行界面（CLI），使用用户界面库或框架，以便创建友好的配置界面。4.1.2.1 信息配置模块基本技术要求a) 设计界面，允许用户配置决策系统的参数、算法、模型等信息，系统的信息配置功能可支持环境基本属性信息的动态设置；b) 系统内部模块间高内聚、低耦合等特点，系统数据内容安全性高，且更加稳定。4.1.2.2 信息配置模块功能要求用户与系统进行交互配置系统环境信息，初始化对战环境，为强化学习算法提供多样的、可靠的运行环境，用户界面的响应时间应迅速，用户在界面上操作时不应感到明显的延迟。4.1.2.3 信息配置模块性能要求规模扩展性能：硬件环境能够支持交互环境规模的动态扩展，系统不应该因为环境复杂而导致可视化界面卡顿等异常情况。4.1.3 交互展示模块环境可视化：显示当前的环境状态，可能是一个图像、地图或其他可视化界面，以便用户可以观察系统的状态。这可以帮助用户了解环境的情况，监控决策系统的执行。策略展示：在环境可视化中展示各方（代理、智能体等）当前执行的策略，以便用户可以实时观察它们的决策行