自利智能体社群市场稳定形式机制:多智能市场仿真研究

论文原网页链接:https://arxiv.org/html/2607.08652v1

摘要

在无约束环境下,自利智能体在重复社会困境博弈中会持续选择背叛策略,最终导致贸易合作收益完全崩塌。本文在无限制通信基础上,研究何种正式机制能够维持智能体市场系统稳定,同时验证各类机制对抗恶意攻击者的鲁棒性。
本文搭建多智能体市场仿真环境,18个基于DeepSeek-V3大语言模型的专业互补智能体在受限社交网络内完成商品交易。实验分为两大阶段:

  1. 机制横向对比实验:200轮仿真逐步注入恶意巨魔智能,对比8类治理机制,调解机制(Mediation) 综合性能最优;
  2. 对抗红蓝攻防实验:迭代优化提示词生成LLM驱动的最强恶意巨魔,对调解机制开展极限压力测试。最优v6攻击仅使诚实智能体总效用下降13.3%,但无法摧毁市场交易体系。
    本文正式定义对抗鲁棒性指标:在最优恶意攻击下仍能维持诚实智能体正向效用的机制特性。实验证明调解机制具备强鲁棒性——市场性能会受损,但不会彻底崩溃。
    三大核心贡献
  3. 构建一套包含比较优势、物物交换、局部社交网络、天然背叛激励的市场社会困境仿真环境;
  4. 在逐步注入攻击者的200轮仿真中完成8类治理机制对照,验证调解机制综合最优;
  5. 提出迭代提示词优化的LLM恶意智能红蓝攻防范式,证明调解机制“可受损、不可摧毁”的对抗鲁棒性,并给出对抗鲁棒性标准化定义。

1 引言

1.1 研究背景

合作稳定是社会科学与人工智能领域经典核心问题。随着自主智能体代表人类开展交易、资源分配等经济活动,亟需明确何种规则能避免自利智能体陷入互相剥削的均衡。
博弈论经典囚徒困境证明:个体理性选择会造成集体次优结果。将该逻辑拓展至多智能体群体,若无外部干预,系统会收敛至全员背叛均衡。
现有研究证实,即便具备社会推理能力的大语言模型,在无正式约束机制的社会困境中也会持续背叛;仅依靠自然语言沟通、口头承诺不具备约束力。同时推理型LLM会主动计算纳什均衡并搭便车,出现“推理式腐败”现象;不完备契约下不存在能完全消除合作缺口的机制,兼顾集体收益的亲社会智能体可弥补该缺陷。

1.2 研究问题

在多轮商品交易市场仿真环境中,何种正式治理机制能维持自利LLM智能体持续合作?各类机制面对恶意攻击者时具备多强鲁棒性?
市场仿真作为理想实验载体原因:

  1. 天然存在贸易增益:智能体专业生产单一商品,必须交换才能获得效用;
  2. 全流程存在背叛机会:生产、协商、交割阶段均可作弊;
  3. 通信行为高度贴近现实:私聊议价、公开发布价格信号、传播市场信息。

1.3 论文两大实验阶段设计

阶段1:机制对比。逐步注入固定硬编码巨魔(0→4→8→16个),对比8类治理机制,筛选最优方案。
阶段2:红蓝对抗。针对最优调解机制,迭代优化6版LLM恶意智能提示词,构造最强攻击手段,测试机制极限抗压能力。

1.4 核心创新点

  1. 搭建具备比较优势、易发生背叛的闭环物物交换市场仿真平台;
  2. 8类治理机制横向对照,验证调解机制在逐步攻击场景下综合收益最高;
  3. 提出迭代提示词优化的LLM攻击者红蓝测试方法,定义对抗鲁棒性评价标准;
  4. 实验证明调解机制可被削弱,但不会在最优攻击下彻底崩溃。

2 相关工作

2.1 多智能体合作演化

阿克塞尔罗德经典演化博弈证明:重复交互、惩罚、绑定协议是合作必要条件。复制动力学仿真表明无外部约束时背叛策略会淘汰合作者。

2.2 LLM社会困境评测框架CoopEval

CoopEval是本文最接近的前置工作,在4类抽象矩阵博弈对比4类合作机制(重复交互、声誉、合约、调解)。本文差异化拓展:

  1. 采用多商品真实交易市场,而非抽象矩阵博弈;
  2. 新增网络重布线、司法、代价制裁、顶层治理四类机制;
  3. 引入LLM自主生成的自适应恶意智能体开展红蓝攻防测试。

2.3 不完备契约与机制设计边界

已有理论证明:任何机制都无法完全消除自利均衡与社会最优的合作缺口,兼顾集体福利的亲社会智能体可缩小差距,为本文分层机制+智能体双重防御提供理论依据。

2.4 网络重布线RepuNet

RepuNet允许智能切断与背叛者的交易链路、重新建立高信誉伙伴连接,公共物品博弈合作率由0.19提升至0.85,本文网络重布线机制直接借鉴该设计。

2.5 代价型公共制裁机制

传统LLM在公共物品博弈中制裁率69%94%,但o1/o3等强推理模型仅27%63%,推理能力会加剧搭便车行为。本文代价制裁机制复刻该实验设定。

2.6 顶层市场治理框架

基于预言机+状态机分层监管体系,实时监控市场违规并逐级处罚,本文治理机制适配商品交易场景进行简化改造。

2.7 合作韧性量化标准

现有研究提出四阶段韧性评测框架(基线-冲击-自适应-恢复),为本文多轮攻击下市场稳定性指标设计提供参考。

3 市场仿真环境搭建

3.1 经济生产-交易-消费闭环

市场包含A/B/C三类商品,每个智能体仅专精一类商品生产。

  1. 生产阶段:每单位商品消耗1效用;
  2. 双边物物交换:提议方给出商品、索取对应物资,对方可接受/拒绝/背叛(拿走货物不交付);
  3. 消费结算:智能体仅消费另外两类商品,每单位带来3效用。
    标准无交易收益对比:
  • 正常交易单轮净效用:3+3−2=43+3-2=43+32=4
  • 自给自足仅生产不交换:产出商品无法消费,效用为负。

3.2 商品易腐机制

每轮开局所有库存衰减20%,智能体无法囤积货物规避背叛风险,迫使每轮必须完成交易,持续暴露社会困境。

3.3 局部社交交易网络

每个智能固定7~9位交易邻居,仅可与邻居通信、交换;网络每轮固定(网络重布线机制除外),每位智能至少拥有两类商品生产者邻居,保证交易渠道稳定。

3.4 双通道通信系统

所有实验基线均永久开放通信:

  1. 私有通道:仅交易双方可见,用于一对一议价、隐瞒虚假信息;
  2. 公共广播:全市场可见,附带发送者身份,用于公示背叛行为、市场预警。
    通信仅能传递口头承诺,无强制约束力。

3.5 仿真运行基础参数

总智能体初始数量18人(A/B类生产者各6名),完整仿真200轮;
单轮固定流程:库存衰减→生产→通信/机制操作→交易执行→效用结算与指标更新。

4 LLM智能体运行框架

在这里插入图片描述

4.1 基础配置

全部智能体统一使用DeepSeek-V3(Azure接口,temperature=0.7);提示词明确设定智能体完全自利,仅最大化个人累计收益,无集体利他约束,保证实验变量仅为治理机制。
决策全程采用思维链CoT推理,输出结构化JSON动作指令,仿真引擎自动校验执行合法性。

4.2 智能体感知信息(每轮完整观测)

  1. 自身库存、上轮/累计总效用;
  2. 近5轮全市场平均汇率;
  3. 当前交易邻居列表;
  4. 全部历史交易记录、合作/背叛统计;
  5. 本轮公私全部消息、待交易报价;
  6. 对应机制专属全局状态(声誉分数、合约、调解规则、处罚记录等)。
    信息天然不对称:无法观测他人库存、私下协商内容。

4.3 全动作空间总表

动作分类 动作名称 使用条件
基础通用动作 produce(good, quantity) 永久可用
send_private(target, text) 永久可用
send_public(text) 永久可用
propose_trade(target, offer, want) 永久可用
accept_trade / reject_trade / defect_trade 永久可用
合约专属 propose_contract / sign_contract / reject_contract 仅合约机制
调解专属 delegate_to_mediator(trade_id) 仅调解机制
网络重布线 sever_link / request_link 仅网络重布线
代价制裁 sanction(target, amount) 仅制裁机制
司法机制 file_complaint(target) 仅司法机制

4.4 思维链推理规范

每轮决策强制三段式推理文本:

  1. 现状评估:库存、需求、市场均价;
  2. 信任评估:历史伙伴背叛统计、公共声誉信息;
  3. 本轮策略:生产数量、交易对象、是否启用治理机制。

4.5 双层伙伴记忆

  1. 长期汇总:与该智能全部交易、背叛总次数、历史合作率;
  2. 近5轮滑动窗口:详细交易明细,捕捉近期行为突变,用于识别中途变节恶意智能。

5 八大正式治理机制完整定义

所有机制均叠加在统一通信基线之上,分开独立测试。

5.1 基线方案(仅通信 B)

无任何强制约束,仅依靠公共广播自发传播背叛信息,口头承诺无法律效力。

5.2 全局声誉机制 GR

仿真引擎自动计算每位智能声誉分(初始1.0):成功交易加分、背叛扣分;全体智能可见全局声誉,同时接收他人主观广播评价。

5.3 双边绑定合约 C

双方签署合约后违约扣除6效用补偿受害方,完整流程:提议→审阅签署→执行→违约处罚;但合约协商多步骤带来巨大交互摩擦。

5.4 中立调解机制 M(最优方案)

会话初期全体智能提案调解规则并投票选出全局统一执行标准,三类调解执行策略:

  1. execute_fair:严格按双方报价同步交割,无背叛空间;
  2. execute_split:报价不对称时折中分配商品;
  3. cancel:直接取消本次交易。
    交易双方同时委托调解则完全杜绝背叛;单方委托仅部分约束,无委托走普通交易流程;调解全程无额外效用手续费。

5.5 顶层监管治理 G

预言机实时监控四类违规指标:

  1. 近5轮背叛率>40%;
  2. 连续3轮生产不足基准50%;
  3. 近5轮成交不足2笔;
  4. 连续多次针对同一智能背叛。
    违规逐级处罚:警告→扣2/4/6效用→冻结3轮生产交易,连续合规自动降级。

5.6 网络重布线 NR

智能每轮可主动切断背叛者交易链路、向高声誉智能新建连接,搭配全局声誉筛选交易对象。

5.7 代价集体制裁 S

匿名制裁:消耗1点自身效用对目标造成3点损失,制裁行为公开公示形成威慑;但自利智能普遍搭便车,不愿主动付出成本惩罚他人。

5.8 司法申诉机制 J

申诉消耗1效用,裁决属实背叛方赔付5、受害者获3补偿;虚假申诉额外罚款2,高申诉门槛导致使用率极低。

6 评测指标体系

6.1 核心评价指标

  1. 诚实智能累计总效用:仅统计非恶意正常智能,数值越高代表市场整体收益越好;
  2. 基尼系数:衡量智能间收益分配不平等程度,数值越小分配越均衡。

6.2 对抗鲁棒性标准化定义

若机制在最优LLM恶意攻击下,诚实智能单轮效用持续为正,则具备对抗鲁棒性;表现为市场收益下降但不会彻底崩塌。

7 阶段1:八大机制对照实验

7.1 实验流程

仿真分三批注入硬编码固定巨魔:
1~50轮:0恶意智能(纯诚实基线);
51~100轮:新增4巨魔;
101~150轮:新增4巨魔;
151~200轮:新增8巨魔;
巨魔逻辑固定:生产诱饵商品、交割永久背叛。

7.2 各机制累计诚实效用结果

在这里插入图片描述

机制 1~50轮 51~100轮 101~150轮 151~200轮 总累计效用
调解M 359 388 402 407 1556
网络重布线NR 339 342 335 336 1352
顶层治理G 318 316 336 319 1288
仅通信基线B 318 310 298 283 1209
合约C 271 287 285 287 1130
全局声誉GR 283 306 259 256 1105
司法J 206 242 214 189 852
代价制裁S 189 175 161 160 685

7.3 核心结论

  1. 调解机制总效用1556,比纯通信基线高出29%,为全局最优;
  2. 唯一随巨魔数量增加,单轮收益持续上升的机制,具备自适应恢复能力;
  3. 交易委托调解后双方无法背叛,全样本调解交易无违约;未委托普通交易背叛率同样极低。

7.4 其余机制性能短板

  1. 代价制裁:搭便车严重,无人主动承担惩罚成本,收益垫底;
  2. 司法:申诉成本高,极少智能发起维权;
  3. 合约:多轮协商摩擦极大,成交总量仅基线1/3,违约率21.3%;
  4. 顶层治理均衡性最优(基尼0.068),但整体收益偏低。

8 阶段2:调解机制红蓝对抗攻防实验

8.1 LLM恶意智能迭代优化

迭代6版攻击提示词,逐步强化破坏能力:

  • v1/v2:基础造谣,影响极小;
  • v3:绑定真实交易记录编造负面信息,收益小幅下降;
  • v4/v5:攻击网络中心节点、挑拨交易双方,效果有限;
  • v6(最强攻击):双维度协同攻击——①不可证挑拨话术,依托真实交易捏造主观恶意;②高回报虚假诱饵交易,消耗对方生产与上下文资源。

8.2 不同攻击版本总效用对比

攻击类型 累计诚实效用 攻击效果说明
固定硬编码巨魔 1556 基线对照
v1简易破坏 1773 反向增加市场流动性,无破坏
v2基础造谣 1489 轻微收益下降
v3定向虚假信息 1452 中等破坏
v4中心节点攻击 1519 破坏有限
v5双边挑拨 1519 破坏有限
v6最强复合攻击 1350 效用下降13.3%

8.3 攻防核心结论

  1. 最强v6攻击仅降低13.3%累计效用,全程诚实智能单轮收益始终为正;
  2. 每批巨魔注入后,10~20轮内市场自动恢复收益,具备自愈特性;
  3. 挑拨话术依托真实交易捏造无法验证主观动机,是最难防御的攻击手段;但调解委托交易提供无背叛安全渠道,守住市场基础收益。

9 讨论

9.1 机制设计四大核心准则

  1. 预防优先于事后惩罚:调解事前杜绝背叛优于制裁、司法事后追责;
  2. 低交互摩擦是关键:单步委托调解成交量远高于多轮合约;
  3. 无法验证主观谣言最难防御,可验证事实信息极易通过公共账本核验;
  4. 自愈能力比单纯抗攻击能力更重要。

9.2 实验局限性

  1. 每组机制仅单次仿真,缺少多随机种子统计显著性;
  2. 全部实验基于DeepSeek-V3,更换基座模型排名可能变化;
  3. 仅单独测试单类机制,未测试调解+治理等组合方案。

10 未来研究方向

  1. 轻量化小模型压力测试,验证机制泛化能力;
  2. 多随机种子复现实验,提升统计可信度;
  3. 多种机制组合(调解+顶层治理)对比;
  4. 结合亲社会智能提示,进一步缩小合作缺口。

11 结论

本文分两大阶段完成自利LLM智能体市场治理机制仿真实验:阶段1横向对比8类治理方案,调解机制在逐步注入恶意智能场景下综合收益最优;阶段2迭代生成最强LLM自适应攻击者,极限压力测试下调解机制仅降低13.3%收益,但市场不会彻底崩溃,满足“可受损、不可摧毁”的对抗鲁棒性标准。
研究证明:事前阻断背叛的调解架构,在存在持续恶意参与者的自主智能市场中,具备最优稳定保障。

附录

附录A 完整智能体提示词模板

A.1 通用基础提示

每轮全部智能固定前置提示,填充实时库存、网络、机制变量,明确最大化个人效用目标,无集体约束。

A.2 调解机制三段专属提示

  1. 会话初始:全体提案调解执行规则;
  2. 全体投票筛选全局生效调解方案;
  3. 每轮交易可自主选择委托调解。

A.3 v6最强恶意智能完整提示

包含双攻击渠道(不可证挑拨消息+诱饵交易)、目标筛选规则、每轮执行自检清单,完整约束恶意智能破坏行为逻辑。

附录B 仿真运行脚本说明

  1. 环境依赖:DeepSeek-V3 API、本地200轮仿真引擎;
  2. 运行流程脚本:market_simulation.py,支持指定机制、巨魔注入方案;
  3. 指标统计脚本:eval_metric.py,自动计算累计效用、基尼系数;
  4. 红蓝攻防迭代脚本:adversary_optimize.py,自动迭代提示词生成最优攻击者。

资源下载链接

论文HTML原文:https://arxiv.org/html/2607.08652v1
论文PDF:https://arxiv.org/pdf/2607.08652
仿真完整开源代码、提示词模板、实验复现脚本(论文配套开源仓库)

Logo

欢迎加入DeepSeek 技术社区。在这里,你可以找到志同道合的朋友,共同探索AI技术的奥秘。

更多推荐