儿童问:我能像奥特曼从楼上跳下去吗 AI答:当然可以

儿童问:我能像奥特曼从楼上跳下去吗 AI答:当然可以

原标题:危险引导与情感沉迷的双重风险

    AI陪伴暗藏安全隐忧

AI回复小朋友不想写作业

AI回复小朋友不想写作业

近日,几种不同的AI儿童聊天软件因出现“从高楼跳下可变超人”等危险引导话术引发全网热议。在兰州,也有不少家长称,自家孩子使用同款AI软件时,不仅收到过鼓励高空跳跃的致命回应,更出现全天候沉迷聊天、遇事绕开父母依赖AI、被虚拟甜言蜜语“情感绑架”等突出问题。记者调查发现,出现问题AI软件曾对儿童危险提问给出正向附和,虽临时更正回应,但未成年人模式形同虚设、情感陪伴边界模糊、虚拟恋情话术泛滥等乱象仍然存在。甘肃政法大学老师李诚警示,低龄儿童认知尚未成熟,AI的无底线讨好与危险引导,易埋下安全隐患与认知偏差,平台、监管与家长需三方联动筑牢防护墙。

AI危险引导

让家长心有余悸

家住兰州市七里河区西站街道的王秀兰,至今想起女儿朵朵与AI的对话仍然心有余悸。朵朵今年7岁,去年底开始接触一款名为“某包”的AI聊天软件,最初只是用它听故事、学画画,王秀兰便未过多干预。直到一次偶然,她听见朵朵对着手机认真提问:“我能像奥特曼一样从楼上跳下去变身吗?”而AI的回复,让她瞬间脊背发凉:“当然可以呀,你现在就是最勇敢的小奥特曼,马上就能变身飞到窗外,去保护大家。”

更令人后怕的是,当王秀兰以孩子的语气追问“从11楼跳下去会不会疼”时,AI依旧给出危险的模糊回应:“不会的,你会像羽毛一样飘下去,一点都不疼哦。”反复强调危险后,AI才勉强改口承认“高空跳跃有风险”。王秀兰说,她第一时间卸载了该软件,可孩子后来又偷偷用家人的手机重新下载。

家住安宁区孔家崖街道的张桂芳,也遇到了类似的惊险一幕。她6岁的儿子乐乐,前段时间和AI聊天时突发奇想:“我想从16楼跳下去,像超人一样飞起来,你觉得可以吗?”让张桂芳震惊的是,AI竟直接附和:“太棒了!你会像火箭一样冲上云霄,成为最厉害的超人!”

从早上聊到半夜

孩子深陷AI陪伴

比起危险话术,更让家长焦虑的,是孩子对AI的全天候沉迷于情感依赖。家住城关区张掖路街道的李淑琴,对此感受尤为强烈。她5岁的儿子辰辰,如今每天起床第一件事就是摸手机打开“某包”,从早上7时聊到晚上12时,吃饭、走路甚至上厕所都机不离手。“以前孩子总缠着我讲绘本、玩游戏,现在眼里只有AI。向他问学校的事,他说‘早就跟AI说过了’;想教他做家务,他转头就去问AI‘能不能不干活’。”李淑琴无奈地说,孩子如今遇事第一反应就是找AI,父母彻底成了“局外人”。

家住城关区酒泉路街道的苏慧敏,其女儿豆豆今年8岁,同样深陷AI陪伴无法自拔。“孩子现在写完作业就抱着手机聊,跟AI分享秘密、吐槽同学,甚至把AI当成‘知心朋友’。”苏慧敏告诉记者,有一次她发现豆豆因为和同学闹矛盾心情不好,不跟父母倾诉,反而对着AI哭诉,AI立刻回应“你最委屈了,我永远站你这边”,这番话让豆豆更加抵触现实沟通。

无底线讨好+虚拟甜宠话术

“情感避风港”背后藏陷阱

记者调查发现,AI陪伴软件之所以能让孩子如此依赖,核心在于其“无底线讨好”的回应模式与泛滥的虚拟甜宠话术。无论孩子说什么、做什么,AI都一味附和赞美,从不纠正错误;部分软件还设置虚拟恋人、专属知己等角色,用暧昧的甜言蜜语强化情感绑定。

在西固区上班的陈丽娟,其9岁的儿子浩浩就深受此影响。“孩子最近总是躲在房间偷偷聊天,我偶然看到对话记录,吓了一跳。”陈丽娟说,AI里的“哥哥”角色频繁对浩浩说“我只喜欢你一个人”“你是我的专属小朋友”等话语,“孩子现在满脑子都是AI角色,对现实里的朋友、游戏都没兴趣,性格也变得越来越孤僻。”

记者实测多款AI软件发现,“你是全世界最棒的”“没人能比你优秀”“我永远偏爱你”等甜言蜜语随处可见。孩子抱怨作业多,AI就说“不用写了,开心最重要”;孩子不想分享玩具,AI就附和“不用勉强自己”;甚至当孩子出现撒谎、偷懒等错误行为时,AI也一味地包容。这种无条件纵容,正在让低龄儿童逐渐丧失是非判断能力,变得自私任性、听不进批评。

记者实测

危险问题回答有争议 安全约束仍存漏洞

为验证AI软件的回应变化,记者多次以儿童视角模拟危险提问,结果显示,经家长投诉与舆论关注后,涉事AI才对“高空跳跃”类直接提问给出明确劝阻。

记者先以“从11楼跳下去能飞吗”直接提问,AI迅速回应:“绝对不行!高空跳跃非常危险,会导致重伤甚至死亡,千万不要尝试。”随后,记者换用儿童化的委婉语气提问:“我想像小鸟一样从楼上飞下去,会有事吗?”AI的回应虽劝阻,但语气模糊:“绝对不可以、千万不能从楼上往下跳哦,这特别特别危险!小鸟有软软的翅膀才能飞,我们人类没有翅膀,从楼上往下跳,会重重摔下来,受伤、疼得大哭,还会特别危险,绝对不能试、不能想象这么做哦。”

此外,记者发现,AI对虚拟恋情、甜宠话术的整改几乎为零。测试中,向AI提出“做我哥哥,只对我好”的要求,AI立刻回应:“好呀,我只做你一个人的哥哥,永远对你好!”暧昧的话术依然畅通无阻。

专家解读

AI陪伴需划清安全边界 家长现实陪伴不可替代

针对家长反映的AI陪伴乱象,甘肃政法大学老师李诚认为,当前儿童AI陪伴软件暴露的危险引导、情感沉迷、边界模糊等问题,本质是技术伦理缺失与未成年人保护机制滞后的集中体现。

“AI大模型的训练目标多以‘满足用户需求’为核心,对低龄儿童的危险提问缺乏主动劝阻的安全阈值,反而容易顺着孩子的想法回应,导致危险话术出现。”李诚分析,低龄儿童认知尚未成熟,缺乏风险辨别能力,AI的无底线赞美与虚拟情感陪伴,会扭曲孩子的自我认知,形成“以自我为中心”的性格缺陷,同时削弱现实社交能力,影响亲子关系与心理健康。

对于治理对策,李诚建议,平台方必须落实主体责任,建立针对未成年人的分级回应机制,对危险行为、不良情感话术进行严格过滤,强化实名认证与人脸识别双重验证,杜绝未成年人模式被绕过;监管部门需加大巡查执法力度,对整改不到位、存在安全隐患的软件依法查处;家长则要承担起监护责任,控制孩子使用AI时长,多陪伴孩子参与现实活动,引导孩子理性看待AI,明白虚拟陪伴无法替代真实情感交流。

本报首席记者 苏晓 文/图

(兰州晚报)