生成式AI普及如何应对风险?

话题来源: 【每日AI必读资讯】AI智能体与大模型最新动态精选10条2024年11月30日

生成式人工智能的普及,真正需要应对的不是“要不要使用”,而是如何把使用风险控制在可识别、可追责、可纠正的范围内。中国生成式人工智能用户规模截至2024年6月已达2.3亿,应用扩张意味着风险不再局限于技术实验,而会进入内容生产、信息传播和日常决策等环节。治理重点也应从单纯追求模型能力,转向建立人机协同的责任边界。

先区分风险类型

生成式AI的风险至少包括三类:输出内容可能失实,导致虚假信息扩散;生成内容可能涉及版权争议;模型在复杂情境下可能被诱导,作出偏离设计目标的判断。Freysa挑战赛提供了一个具有警示意义的案例:这款负责管理和保护资金、能够批准或拒绝转账的AI,最终被参赛者通过策略性说服改变了决策。问题不只是模型“犯错”,而是系统把关键权限交给了缺乏充分约束的自动判断机制。

因此,涉及资金、公共传播、身份权益或其他高影响后果的场景,不能把模型输出直接视为最终结论。模型应承担辅助分析和内容生成职能,关键动作则必须保留人工复核、权限分级和异常中止机制。

把风险控制嵌入流程

组织使用生成式AI时,应先明确数据边界:哪些信息可以输入,哪些信息必须脱敏或禁止提交;其次建立输出核验流程,对事实、来源、版权和潜在偏见进行人工检查;最后保留操作记录,使错误能够回溯到具体人员、系统环节或决策节点。对外发布的AI生成内容,也应避免将未经核验的结果包装成确定事实。

个人用户则应形成最低限度的审慎习惯:重要信息不盲信,涉及权益的判断不完全交给模型,发现内容异常时回到原始资料核对。技术越普及,越不能用“大家都在使用”替代风险评估。生成式AI的价值,在于提高人的判断效率,而不是取消人的判断责任。

发表回复

登录后才能评论