GroupGPT: A Token-efficient and Privacy-preserving Agentic Framework for Multi-User Chat Assistant

1. GroupGPT通过小-大模型协作架构，有效降低了多用户群聊助手的代币消耗（高达3倍）和隐私泄露风险，其核心在于解耦了干预时机判断和响应生成。
2. GroupGPT在多用户群聊场景中能生成准确且适时的响应，在LLM评估中平均得分4.72/5.0，并获得用户普遍好评，这得益于其轻量级干预判断模型在MUIR数据集上的优异表现。
3. 论文构建并发布了MUIR数据集，这是首个针对多用户群聊干预推理的基准数据集，包含2500个带有人工标注理由的群聊片段，填补了该领域高质量公开数据集的空白。
4. GroupGPT具备多模态理解能力，能将图像、视频、语音等非文本内容转换为结构化文本表示，从而支持更复杂的群聊交互。

论文在自建的MUIR数据集（包含2500个真人群聊片段，由30名志愿者从约50个群聊中收集并标注）上进行了模型评估。GroupGPT框架中，干预判断器使用Qwen-3-4B，隐私转录器使用Llama-3.2-Instruct-3B，多模态处理使用Qwen-2.5-32B和Qwen3-ASR-Flash，最终响应生成器使用GPT-4o。模型训练采用LoRA技术，在2块A6000 GPU上进行。对比基线包括随机猜测、人类评估者、多种大型LLM（如GPT-4o、Gemini-2.5-Pro）的Prompt工程表现、以及多种嵌入模型（如Gte-large-en-v1.5）和多种小型语言模型（如Qwen-2.5-Instruct 3B/7B, Llama-3.2-Instruct 3B/8B）的微调表现。此外，还进行了包含30名参与者的用户研究，涵盖6个主题，累计生成数千条消息，并使用GPT-4对300个响应样本进行了质量评估。系统部署在两块3080Ti GPU上进行延迟和内存分析。