研究大语言模型的输出内容合规检查方法,以确保大模型生成的内容符合伦理、法律、社会
规范和正确的价值观。具体内容包括构建合规检测框架,对检测方法进行有效性验证,确保其在
实际应用中的可靠性与准确性;通过多领域、多层次的专家模型对检测框架及其结果进行评估并
反馈,不断优化性能。对大模型的“越狱”攻击进行针对性构建防御框架,抵御攻击导致大模型
输出不合规内容。

最近的研究方向

准备集中看看sci二区以上论文

Logo

魔乐社区(Modelers.cn) 是一个中立、公益的人工智能社区,提供人工智能工具、模型、数据的托管、展示与应用协同服务,为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作,由全产业链共同建设、共同运营、共同享有,推动国产AI生态繁荣发展。

更多推荐