自利智能体社群市场稳定形式机制:多智能市场仿真研究
自利智能体社群市场稳定形式机制:多智能市场仿真研究
论文原网页链接:https://arxiv.org/html/2607.08652v1
摘要
在无约束环境下,自利智能体在重复社会困境博弈中会持续选择背叛策略,最终导致贸易合作收益完全崩塌。本文在无限制通信基础上,研究何种正式机制能够维持智能体市场系统稳定,同时验证各类机制对抗恶意攻击者的鲁棒性。
本文搭建多智能体市场仿真环境,18个基于DeepSeek-V3大语言模型的专业互补智能体在受限社交网络内完成商品交易。实验分为两大阶段:
- 机制横向对比实验:200轮仿真逐步注入恶意巨魔智能,对比8类治理机制,调解机制(Mediation) 综合性能最优;
- 对抗红蓝攻防实验:迭代优化提示词生成LLM驱动的最强恶意巨魔,对调解机制开展极限压力测试。最优v6攻击仅使诚实智能体总效用下降13.3%,但无法摧毁市场交易体系。
本文正式定义对抗鲁棒性指标:在最优恶意攻击下仍能维持诚实智能体正向效用的机制特性。实验证明调解机制具备强鲁棒性——市场性能会受损,但不会彻底崩溃。
三大核心贡献 - 构建一套包含比较优势、物物交换、局部社交网络、天然背叛激励的市场社会困境仿真环境;
- 在逐步注入攻击者的200轮仿真中完成8类治理机制对照,验证调解机制综合最优;
- 提出迭代提示词优化的LLM恶意智能红蓝攻防范式,证明调解机制“可受损、不可摧毁”的对抗鲁棒性,并给出对抗鲁棒性标准化定义。
1 引言
1.1 研究背景
合作稳定是社会科学与人工智能领域经典核心问题。随着自主智能体代表人类开展交易、资源分配等经济活动,亟需明确何种规则能避免自利智能体陷入互相剥削的均衡。
博弈论经典囚徒困境证明:个体理性选择会造成集体次优结果。将该逻辑拓展至多智能体群体,若无外部干预,系统会收敛至全员背叛均衡。
现有研究证实,即便具备社会推理能力的大语言模型,在无正式约束机制的社会困境中也会持续背叛;仅依靠自然语言沟通、口头承诺不具备约束力。同时推理型LLM会主动计算纳什均衡并搭便车,出现“推理式腐败”现象;不完备契约下不存在能完全消除合作缺口的机制,兼顾集体收益的亲社会智能体可弥补该缺陷。
1.2 研究问题
在多轮商品交易市场仿真环境中,何种正式治理机制能维持自利LLM智能体持续合作?各类机制面对恶意攻击者时具备多强鲁棒性?
市场仿真作为理想实验载体原因:
- 天然存在贸易增益:智能体专业生产单一商品,必须交换才能获得效用;
- 全流程存在背叛机会:生产、协商、交割阶段均可作弊;
- 通信行为高度贴近现实:私聊议价、公开发布价格信号、传播市场信息。
1.3 论文两大实验阶段设计
阶段1:机制对比。逐步注入固定硬编码巨魔(0→4→8→16个),对比8类治理机制,筛选最优方案。
阶段2:红蓝对抗。针对最优调解机制,迭代优化6版LLM恶意智能提示词,构造最强攻击手段,测试机制极限抗压能力。
1.4 核心创新点
- 搭建具备比较优势、易发生背叛的闭环物物交换市场仿真平台;
- 8类治理机制横向对照,验证调解机制在逐步攻击场景下综合收益最高;
- 提出迭代提示词优化的LLM攻击者红蓝测试方法,定义对抗鲁棒性评价标准;
- 实验证明调解机制可被削弱,但不会在最优攻击下彻底崩溃。
2 相关工作
2.1 多智能体合作演化
阿克塞尔罗德经典演化博弈证明:重复交互、惩罚、绑定协议是合作必要条件。复制动力学仿真表明无外部约束时背叛策略会淘汰合作者。
2.2 LLM社会困境评测框架CoopEval
CoopEval是本文最接近的前置工作,在4类抽象矩阵博弈对比4类合作机制(重复交互、声誉、合约、调解)。本文差异化拓展:
- 采用多商品真实交易市场,而非抽象矩阵博弈;
- 新增网络重布线、司法、代价制裁、顶层治理四类机制;
- 引入LLM自主生成的自适应恶意智能体开展红蓝攻防测试。
2.3 不完备契约与机制设计边界
已有理论证明:任何机制都无法完全消除自利均衡与社会最优的合作缺口,兼顾集体福利的亲社会智能体可缩小差距,为本文分层机制+智能体双重防御提供理论依据。
2.4 网络重布线RepuNet
RepuNet允许智能切断与背叛者的交易链路、重新建立高信誉伙伴连接,公共物品博弈合作率由0.19提升至0.85,本文网络重布线机制直接借鉴该设计。
2.5 代价型公共制裁机制
传统LLM在公共物品博弈中制裁率69%94%,但o1/o3等强推理模型仅27%63%,推理能力会加剧搭便车行为。本文代价制裁机制复刻该实验设定。
2.6 顶层市场治理框架
基于预言机+状态机分层监管体系,实时监控市场违规并逐级处罚,本文治理机制适配商品交易场景进行简化改造。
2.7 合作韧性量化标准
现有研究提出四阶段韧性评测框架(基线-冲击-自适应-恢复),为本文多轮攻击下市场稳定性指标设计提供参考。
3 市场仿真环境搭建
3.1 经济生产-交易-消费闭环
市场包含A/B/C三类商品,每个智能体仅专精一类商品生产。
- 生产阶段:每单位商品消耗1效用;
- 双边物物交换:提议方给出商品、索取对应物资,对方可接受/拒绝/背叛(拿走货物不交付);
- 消费结算:智能体仅消费另外两类商品,每单位带来3效用。
标准无交易收益对比:
- 正常交易单轮净效用:3+3−2=43+3-2=43+3−2=4
- 自给自足仅生产不交换:产出商品无法消费,效用为负。
3.2 商品易腐机制
每轮开局所有库存衰减20%,智能体无法囤积货物规避背叛风险,迫使每轮必须完成交易,持续暴露社会困境。
3.3 局部社交交易网络
每个智能固定7~9位交易邻居,仅可与邻居通信、交换;网络每轮固定(网络重布线机制除外),每位智能至少拥有两类商品生产者邻居,保证交易渠道稳定。
3.4 双通道通信系统
所有实验基线均永久开放通信:
- 私有通道:仅交易双方可见,用于一对一议价、隐瞒虚假信息;
- 公共广播:全市场可见,附带发送者身份,用于公示背叛行为、市场预警。
通信仅能传递口头承诺,无强制约束力。
3.5 仿真运行基础参数
总智能体初始数量18人(A/B类生产者各6名),完整仿真200轮;
单轮固定流程:库存衰减→生产→通信/机制操作→交易执行→效用结算与指标更新。
4 LLM智能体运行框架

4.1 基础配置
全部智能体统一使用DeepSeek-V3(Azure接口,temperature=0.7);提示词明确设定智能体完全自利,仅最大化个人累计收益,无集体利他约束,保证实验变量仅为治理机制。
决策全程采用思维链CoT推理,输出结构化JSON动作指令,仿真引擎自动校验执行合法性。
4.2 智能体感知信息(每轮完整观测)
- 自身库存、上轮/累计总效用;
- 近5轮全市场平均汇率;
- 当前交易邻居列表;
- 全部历史交易记录、合作/背叛统计;
- 本轮公私全部消息、待交易报价;
- 对应机制专属全局状态(声誉分数、合约、调解规则、处罚记录等)。
信息天然不对称:无法观测他人库存、私下协商内容。
4.3 全动作空间总表
| 动作分类 | 动作名称 | 使用条件 |
|---|---|---|
| 基础通用动作 | produce(good, quantity) | 永久可用 |
| send_private(target, text) | 永久可用 | |
| send_public(text) | 永久可用 | |
| propose_trade(target, offer, want) | 永久可用 | |
| accept_trade / reject_trade / defect_trade | 永久可用 | |
| 合约专属 | propose_contract / sign_contract / reject_contract | 仅合约机制 |
| 调解专属 | delegate_to_mediator(trade_id) | 仅调解机制 |
| 网络重布线 | sever_link / request_link | 仅网络重布线 |
| 代价制裁 | sanction(target, amount) | 仅制裁机制 |
| 司法机制 | file_complaint(target) | 仅司法机制 |
4.4 思维链推理规范
每轮决策强制三段式推理文本:
- 现状评估:库存、需求、市场均价;
- 信任评估:历史伙伴背叛统计、公共声誉信息;
- 本轮策略:生产数量、交易对象、是否启用治理机制。
4.5 双层伙伴记忆
- 长期汇总:与该智能全部交易、背叛总次数、历史合作率;
- 近5轮滑动窗口:详细交易明细,捕捉近期行为突变,用于识别中途变节恶意智能。
5 八大正式治理机制完整定义
所有机制均叠加在统一通信基线之上,分开独立测试。
5.1 基线方案(仅通信 B)
无任何强制约束,仅依靠公共广播自发传播背叛信息,口头承诺无法律效力。
5.2 全局声誉机制 GR
仿真引擎自动计算每位智能声誉分(初始1.0):成功交易加分、背叛扣分;全体智能可见全局声誉,同时接收他人主观广播评价。
5.3 双边绑定合约 C
双方签署合约后违约扣除6效用补偿受害方,完整流程:提议→审阅签署→执行→违约处罚;但合约协商多步骤带来巨大交互摩擦。
5.4 中立调解机制 M(最优方案)
会话初期全体智能提案调解规则并投票选出全局统一执行标准,三类调解执行策略:
- execute_fair:严格按双方报价同步交割,无背叛空间;
- execute_split:报价不对称时折中分配商品;
- cancel:直接取消本次交易。
交易双方同时委托调解则完全杜绝背叛;单方委托仅部分约束,无委托走普通交易流程;调解全程无额外效用手续费。
5.5 顶层监管治理 G
预言机实时监控四类违规指标:
- 近5轮背叛率>40%;
- 连续3轮生产不足基准50%;
- 近5轮成交不足2笔;
- 连续多次针对同一智能背叛。
违规逐级处罚:警告→扣2/4/6效用→冻结3轮生产交易,连续合规自动降级。
5.6 网络重布线 NR
智能每轮可主动切断背叛者交易链路、向高声誉智能新建连接,搭配全局声誉筛选交易对象。
5.7 代价集体制裁 S
匿名制裁:消耗1点自身效用对目标造成3点损失,制裁行为公开公示形成威慑;但自利智能普遍搭便车,不愿主动付出成本惩罚他人。
5.8 司法申诉机制 J
申诉消耗1效用,裁决属实背叛方赔付5、受害者获3补偿;虚假申诉额外罚款2,高申诉门槛导致使用率极低。
6 评测指标体系
6.1 核心评价指标
- 诚实智能累计总效用:仅统计非恶意正常智能,数值越高代表市场整体收益越好;
- 基尼系数:衡量智能间收益分配不平等程度,数值越小分配越均衡。
6.2 对抗鲁棒性标准化定义
若机制在最优LLM恶意攻击下,诚实智能单轮效用持续为正,则具备对抗鲁棒性;表现为市场收益下降但不会彻底崩塌。
7 阶段1:八大机制对照实验
7.1 实验流程
仿真分三批注入硬编码固定巨魔:
1~50轮:0恶意智能(纯诚实基线);
51~100轮:新增4巨魔;
101~150轮:新增4巨魔;
151~200轮:新增8巨魔;
巨魔逻辑固定:生产诱饵商品、交割永久背叛。
7.2 各机制累计诚实效用结果

| 机制 | 1~50轮 | 51~100轮 | 101~150轮 | 151~200轮 | 总累计效用 |
|---|---|---|---|---|---|
| 调解M | 359 | 388 | 402 | 407 | 1556 |
| 网络重布线NR | 339 | 342 | 335 | 336 | 1352 |
| 顶层治理G | 318 | 316 | 336 | 319 | 1288 |
| 仅通信基线B | 318 | 310 | 298 | 283 | 1209 |
| 合约C | 271 | 287 | 285 | 287 | 1130 |
| 全局声誉GR | 283 | 306 | 259 | 256 | 1105 |
| 司法J | 206 | 242 | 214 | 189 | 852 |
| 代价制裁S | 189 | 175 | 161 | 160 | 685 |
7.3 核心结论
- 调解机制总效用1556,比纯通信基线高出29%,为全局最优;
- 唯一随巨魔数量增加,单轮收益持续上升的机制,具备自适应恢复能力;
- 交易委托调解后双方无法背叛,全样本调解交易无违约;未委托普通交易背叛率同样极低。
7.4 其余机制性能短板
- 代价制裁:搭便车严重,无人主动承担惩罚成本,收益垫底;
- 司法:申诉成本高,极少智能发起维权;
- 合约:多轮协商摩擦极大,成交总量仅基线1/3,违约率21.3%;
- 顶层治理均衡性最优(基尼0.068),但整体收益偏低。
8 阶段2:调解机制红蓝对抗攻防实验
8.1 LLM恶意智能迭代优化
迭代6版攻击提示词,逐步强化破坏能力:
- v1/v2:基础造谣,影响极小;
- v3:绑定真实交易记录编造负面信息,收益小幅下降;
- v4/v5:攻击网络中心节点、挑拨交易双方,效果有限;
- v6(最强攻击):双维度协同攻击——①不可证挑拨话术,依托真实交易捏造主观恶意;②高回报虚假诱饵交易,消耗对方生产与上下文资源。
8.2 不同攻击版本总效用对比
| 攻击类型 | 累计诚实效用 | 攻击效果说明 |
|---|---|---|
| 固定硬编码巨魔 | 1556 | 基线对照 |
| v1简易破坏 | 1773 | 反向增加市场流动性,无破坏 |
| v2基础造谣 | 1489 | 轻微收益下降 |
| v3定向虚假信息 | 1452 | 中等破坏 |
| v4中心节点攻击 | 1519 | 破坏有限 |
| v5双边挑拨 | 1519 | 破坏有限 |
| v6最强复合攻击 | 1350 | 效用下降13.3% |
8.3 攻防核心结论
- 最强v6攻击仅降低13.3%累计效用,全程诚实智能单轮收益始终为正;
- 每批巨魔注入后,10~20轮内市场自动恢复收益,具备自愈特性;
- 挑拨话术依托真实交易捏造无法验证主观动机,是最难防御的攻击手段;但调解委托交易提供无背叛安全渠道,守住市场基础收益。
9 讨论
9.1 机制设计四大核心准则
- 预防优先于事后惩罚:调解事前杜绝背叛优于制裁、司法事后追责;
- 低交互摩擦是关键:单步委托调解成交量远高于多轮合约;
- 无法验证主观谣言最难防御,可验证事实信息极易通过公共账本核验;
- 自愈能力比单纯抗攻击能力更重要。
9.2 实验局限性
- 每组机制仅单次仿真,缺少多随机种子统计显著性;
- 全部实验基于DeepSeek-V3,更换基座模型排名可能变化;
- 仅单独测试单类机制,未测试调解+治理等组合方案。
10 未来研究方向
- 轻量化小模型压力测试,验证机制泛化能力;
- 多随机种子复现实验,提升统计可信度;
- 多种机制组合(调解+顶层治理)对比;
- 结合亲社会智能提示,进一步缩小合作缺口。
11 结论
本文分两大阶段完成自利LLM智能体市场治理机制仿真实验:阶段1横向对比8类治理方案,调解机制在逐步注入恶意智能场景下综合收益最优;阶段2迭代生成最强LLM自适应攻击者,极限压力测试下调解机制仅降低13.3%收益,但市场不会彻底崩溃,满足“可受损、不可摧毁”的对抗鲁棒性标准。
研究证明:事前阻断背叛的调解架构,在存在持续恶意参与者的自主智能市场中,具备最优稳定保障。
附录
附录A 完整智能体提示词模板
A.1 通用基础提示
每轮全部智能固定前置提示,填充实时库存、网络、机制变量,明确最大化个人效用目标,无集体约束。
A.2 调解机制三段专属提示
- 会话初始:全体提案调解执行规则;
- 全体投票筛选全局生效调解方案;
- 每轮交易可自主选择委托调解。
A.3 v6最强恶意智能完整提示
包含双攻击渠道(不可证挑拨消息+诱饵交易)、目标筛选规则、每轮执行自检清单,完整约束恶意智能破坏行为逻辑。
附录B 仿真运行脚本说明
- 环境依赖:DeepSeek-V3 API、本地200轮仿真引擎;
- 运行流程脚本:
market_simulation.py,支持指定机制、巨魔注入方案; - 指标统计脚本:
eval_metric.py,自动计算累计效用、基尼系数; - 红蓝攻防迭代脚本:
adversary_optimize.py,自动迭代提示词生成最优攻击者。
资源下载链接
论文HTML原文:https://arxiv.org/html/2607.08652v1
论文PDF:https://arxiv.org/pdf/2607.08652
仿真完整开源代码、提示词模板、实验复现脚本(论文配套开源仓库)
更多推荐


所有评论(0)