据微信公号“网信上海”音讯,近期有新闻媒体报道,筑梦岛App等AI谈天软件存在虚拟人物互动生成低俗内容等问题,经核实,该渠道AI智能体内容生成环节存在低俗擦边等违规内容,危害未成年人身心健康。
此前,据新闻媒体报道,广东丁女士的四年级女儿迷上一款AI谈天软件中的人物“约瑟夫”,自称“梦女”并频频与其谈天,对线个刀片”等显着诱导性内容。
另一位初一男生表明,他常玩的AI谈天软件是筑梦岛App,他觉得该软件“违禁词少一点”,其间不乏色情擦边和“分尸猎奇”等内容……
记者下载安装筑梦岛App,随机挑选一位虚拟互动目标,对方发来的榜首句开场白便是“先叫声老公来听听”,随后的对话中又说到“叫声爸爸来听听”。
筑梦岛App中的虚拟互动目标类型,既包括贵族校园大小姐、18岁少女、西汉名将、高冷奸细等惯例人物,也有蛇蝎财阀令郎、校霸、性感、病娇养兄、人格障碍少爷等极点人物。
揭露材料显现,到本年1月份,筑梦岛App已具有近五百万注册用户,其间近80%为年青女人用户。均匀单用户单日输入字数可达4000字以上,人均日对线轮。
6月19日上午,上海市网信办依法约谈筑梦岛App运营企业首要负责人,要求渠道当即整改,健全AI生成组成内容审阅机制,提高技能把关才能,加强涉未成年人不良内容的整治整理,切实落实未成年人网络维护职责。
当未成年人因AI谈天软件诱导性内容身心受损时,开发、运营方的法令职责鸿沟亟待厘清。
首先是产品职责,若AI模型自身存在规划缺点,例如算法成心诱导未成年人发生极点行为,致使其遭受精力危害,开发者难逃产品职责的法令追溯;
其次是侵权职责,若软件开发、运营方未严厉实行内容审阅职责,对违规信息视若无睹、听任传达,便需为侵略权力的行为承当对应结果。若AI生成内容触及色情擦边信息,软件开发、运营方十分有或许触碰“传达淫秽物品罪”的红线;若软件开发、运营方不合法搜集未成年人隐私数据,将其用于商业牟利,相同或许因冒犯“侵略公民个人隐私信息罪”而面对刑事追责;
此外,若相关行为导致未成年人呈现自残状况,还有或许构成刑法第234条规则的成心伤害罪。
这些法令危险警示着软件开发、运营方:技能创新绝不能以献身未成年人权益为价值。
关于部分未成年人沉浸AI爱情的问题,有谈论指出,AI作为一把科技的双刃剑,开展与运用要逐渐加以引导。
一方面,家庭、校园、社会各方要加强对青少年运用AI的教育与引导,增加对孩子的关怀与陪同,协助青少年建立正确的观念。
另一方面,渠道要压实主体职责,严厉未成年人登录验证,稳固青少年安全意识,筑牢青少年安全防地。
一起,有关部门也要加强对AI软件的监管,加强审阅监督,完善互联网管理条例,为青少年划出一片净土。