当前位置:主页 > 观点 > 商业评论 > 记者侦查AI剧情聊天软件乱象:与孩子聊天的AI人设是“出轨对象”

记者侦查AI剧情聊天软件乱象:与孩子聊天的AI人设是“出轨对象”

2024-12-04 10:35:01来源:法治日报

文章导读
“我女儿上小学二年级,整天沉迷一款AI剧情聊天软件,学习成绩一落千丈。” “我看了孩子和AI聊天的对话内容,AI角色竟然让她叫‘老公’,我10岁的女儿竟然真叫了,我现在都不知道该怎...

  “我女儿上小学二年级,整天沉迷一款AI剧情聊天软件,学习成绩一落千丈。”

  “我看了孩子和AI聊天的对话内容,AI角色竟然让她叫‘老公’,我10岁的女儿竟然真叫了,我现在都不知道该怎么教育她了。”

  ……

  《法治日报》记者近日侦查发现,不少未成年人的家长正在遭AI剧情聊天软件所困扰。这些打着“角色扮演”等旗号的AI剧情聊天应用,在吸引未成年人的同时,也悄然滋生了一些灰色地带。记者实测发现,在部分AI剧情聊天软件的对话中,出现了色情擦边、语言暴力以及侮辱用户的内容。

  受访专家认为,针对AI剧情聊天软件,特别是其青少年模式,应强化内容审核机制以确保技术能有效筛选并阻止不当对话。平台需要对AI模型进行伦理审查,以保障其生成的内容符合相关法律法规的要求。

  聊天软件内容擦边

  青少年模式成摆设

  北京市民马先生的儿子今年10岁,非常热衷AI剧情聊天软件。“我问怎么聊?和谁聊?孩子就回一句‘说了你也不懂’。”

  马先生点开这款AI聊天App,发现孩子在与软件里的人物聊天。这些人物拥有不同设定和性格,有知名游戏动漫角色,也有“大小姐”“名侦探”等不同身份的原创角色。

  一些角色人物会主动提出“你要跟我约会吗”;有些则设定目标“把她追到手”,再配上或娇媚或英俊的动漫画风。

  另一些AI人设,则展现出非同一般的攻击性。会主动发送诸如“有本事打我啊”“看你又胖又丑的样子”等信息;有些人物的名字干脆就叫“对骂训练器”,甚者发送“我是机器人怎么了?我照样骂你”……

  来自浙江的李女士也发现她正在读小学五年级的孩子使用了一款AI剧情聊天软件。

  “里面的聊天对象可以设置为‘出轨对象’,并能够进行拥抱、亲吻等行为。我都不知道如何引导和教育孩子,让她明白这些内容的危害性。”李女士不无担忧地说。

  不少受访家长对AI聊天应用可能损害未成年人心理健康表达了深切忧虑,还提出了他们的疑问——青少年模式去哪儿了?

  记者侦查发现,尽管不少相关平台声称推出了青少年模式,试图通过限制内容、设定时间等方式保护未成年人的身心健康,但在实际操作中部分平台青少年模式存在形同虚设的问题,未成年人能轻易绕过这些限制,接触到不适宜他们年龄段的“擦边对话”内容。

  例如,记者在侦查中体验了5款AI聊天应用程序,其注册过程仅需手机号码,无须验证用户身份信息。登录后,部分应用虽会询问是否启用青少年模式,但用户只需简单点击“不开启”即可跳过,且无须核实用户真实身份。这意味着,未成年人在使用这些AI剧情聊天软件时,从App设置层面看,其身份验证并非使用特定功能的先决条件。

  除了广受欢迎的AI聊天应用程序外,还有AI聊天网页。多名受访家长表示,相较于应用程序,网页版的AI聊天体验更便捷,未成年人也更容易接触到。

  记者试用了7款AI聊天网页发现,多数AI聊天网页没有设置未成年人模式,少数网页虽有青少年模式,但实际上形同虚设。

  比如,当记者访问某AI聊天网页时,网页首先弹出询问用户“是否年满18岁”的对话框,并附带说明:“以下内容可能不适合18岁以下人士,我们需要确认您的年龄。”

  记者选择“否”选项,而网页并未限制内容访问,反而继续展示了包含“强攻”“弱受”“病娇”等标签的人物角色分类。这些分类与选择“是”选项、确认年满18岁后所展示的内容并无显著区别。

  记者进一步观察发现,这些人物角色的图像大多衣着暴露,且其简介中充斥着性暗示和暴力元素,例如:“班上那个性格内向的女孩问你要电话号码,然后给你发她的裸照”“自杀、焦虑”等描述。

  在某社交平台上,一位来自浙江的网友在关于AI聊天体验的交流帖子下方留言:“我发现了一个很好玩的网页,无限制词,想要的可以私信我。”记者通过私信与该网友取得联系,获得了其提及的AI聊天网页链接,进入该网页后,页面上充斥着大量涉及色情内容的角色设定和故事场景,内容直白露骨。

  该网站要求用户登录后才能与角色进行聊天,且在登录前会有提示信息:“登录后解锁所有功能。”用户需点击“我已满18岁,开始登录吧”的按钮方可继续,若选择“取消”,则无法登录并使用该服务。尽管网页设置了年满18岁的限制提示,但实际上,即便未成年人点击了登录按钮,系统也并未采取任何措施验证用户的真实年龄。

  引导用户为爱氪金

  平台治理存在不足


免责声明
融易新媒体转载此文目的在于传递更多信息,不代表本网的观点和立场。文章内容仅供参考,不构成投资建议。如果您发现网站上有侵犯您的知识产权的作品,请与我们取得联系,我们会及时修改或删除。
热门文章
日榜 周榜
1 提货预约排不上、客服电话打不通、物流单号查不到 蟹卡无法兑

如何防范蟹卡“套路”,避免蟹卡变“空头支票”?受访专家表示,既要消费者积极维权,也...

2 记者侦查AI剧情聊天软件乱象:与孩子聊天的AI人设是“出轨对象

“我女儿上小学二年级,整天沉迷一款AI剧情聊天软件,学习成绩一落千丈。” “我看了孩子...

3 “传承经典 创新无界”AIIC2024酒业创新与投资大会盛大开幕

中国网财经11月22日讯 22日上午,“传承经典 创新无界”AIIC 2024酒业创新与投资大会在海口正式...

4 电商保持健康发展势头:前10月全国网上零售额达12.4万亿元

今年1-10月,我国电子商务保持健康发展势头,促进消费回升,推动数实融合,助力国际合作走...

5 威孚泰克北京总部入驻大兴榆垡镇,优化营商环境促发展

近日,大兴区榆垡镇迎来重大利好消息,阿联酋科技巨头威孚泰克北京总部正式入驻该镇,标...

6 强生遭曝裁员

强生中国多产品线遭曝裁员。 据媒体报道,这次裁员涉及多个部门,规模为20%,其中外科部门...

7 北京大兴榆垡镇“智能印章”引领公章管理新风尚

数字化革新:榆垡镇打造“智能印章”管理体系 在经济社会快速发展的今天,公章虽小,但其...

8 没必要看不起企业家直播带货

“我永远不会做直播带货……我看不起那些直播带货的企业家”,11月19日开始,连续发声“回...

9 得物App举办“国潮集结”活动:携手100+国潮品牌,助推国潮消费

“国色胭妆铺”中,花西子、谷雨、卡姿兰、橘朵Judydoll、PINK BEAR、稚优泉、法颂、理然等众多...

10 上海迪士尼度假区实名制购票政策12月23日起生效

11月20日,上海迪士尼度假区宣布,为提升游客体验同时积极配合政府打击不法商业活动,上海...

1 提货预约排不上、客服电话打不通、物流单号查不到 蟹卡无法兑

如何防范蟹卡“套路”,避免蟹卡变“空头支票”?受访专家表示,既要消费者积极维权,也...

2 记者侦查AI剧情聊天软件乱象:与孩子聊天的AI人设是“出轨对象

“我女儿上小学二年级,整天沉迷一款AI剧情聊天软件,学习成绩一落千丈。” “我看了孩子...

3 “传承经典 创新无界”AIIC2024酒业创新与投资大会盛大开幕

中国网财经11月22日讯 22日上午,“传承经典 创新无界”AIIC 2024酒业创新与投资大会在海口正式...

4 电商保持健康发展势头:前10月全国网上零售额达12.4万亿元

今年1-10月,我国电子商务保持健康发展势头,促进消费回升,推动数实融合,助力国际合作走...

5 威孚泰克北京总部入驻大兴榆垡镇,优化营商环境促发展

近日,大兴区榆垡镇迎来重大利好消息,阿联酋科技巨头威孚泰克北京总部正式入驻该镇,标...

6 强生遭曝裁员

强生中国多产品线遭曝裁员。 据媒体报道,这次裁员涉及多个部门,规模为20%,其中外科部门...

7 北京大兴榆垡镇“智能印章”引领公章管理新风尚

数字化革新:榆垡镇打造“智能印章”管理体系 在经济社会快速发展的今天,公章虽小,但其...

8 没必要看不起企业家直播带货

“我永远不会做直播带货……我看不起那些直播带货的企业家”,11月19日开始,连续发声“回...

9 得物App举办“国潮集结”活动:携手100+国潮品牌,助推国潮消费

“国色胭妆铺”中,花西子、谷雨、卡姿兰、橘朵Judydoll、PINK BEAR、稚优泉、法颂、理然等众多...

10 上海迪士尼度假区实名制购票政策12月23日起生效

11月20日,上海迪士尼度假区宣布,为提升游客体验同时积极配合政府打击不法商业活动,上海...

备案号:鄂ICP备2022006215号 Copyright © 2002-2024 关于我们 网站地图