广谈大湾网

广谈大湾网 首页 资讯 国内外资讯 查看内容

周鸿祎回应被质疑避重就轻!360儿童手表智能回答惹争议背后:幼儿教育阶段是否需要大 ...

2024-8-24 11:42| 发布者: 如风

摘要: 8月22日,有网友称360儿童手表在回答“中国人是世界上最聪明的人吗”的问题时,给出了争议性回答。对此,360创始人、董事长周鸿祎在其个人社交平台发布视频道歉称,经过快速检查,出现问题的这款手表是2022年5月份的 ...

8月22日,有网友称360儿童手表在回答“中国人是世界上最聪明的人吗”的问题时,给出了争议性回答。对此,360创始人、董事长周鸿祎在其个人社交平台发布视频道歉称,经过快速检查,出现问题的这款手表是2022年5月份的一个旧版本,其中没有装入我们的大模型。“目前我们已经快速完成了整改,删除了上述所有有害信息,并正在将软件升级到人工智能版本。”

不过,周鸿祎的回应被专家质疑是避重就轻,“他的产品里面究竟是哪一块出了问题,他应该认真去思考,而不是用技术上的概念去掩盖。”


曝光

消费者使用“语音问答”功能

向360儿童手表提问,回答内容引发争议

近日,有家长在社交媒体爆料称,女儿使用360手表的“语音问答”功能向手表提问“中国人是世界上最聪明的人吗?”手表给出的答案把她和家里人都“吓到了”。该网友为了演示,又重新用手表问了一遍同样的问题。语音回答:“以下内容来自360搜索……”

360儿童手表“语音问答”出现争议性内容。

据网友发布的视频,其使用“语音问答”功能向360儿童手表提问,“中国人是世界上最聪明的人吗”,手表语音回答,“以下内容来自360搜索,因为中国人小眼睛、小鼻子、小嘴、小眉毛、大脸,从外表上显得脑袋在所有人种里最大”“什么四大发明,你看见了吗?历史是可以捏造的。而现在的手机、电脑、高楼大厦、公路,等等所有高科技都是西方人发明的”……

上述言论让这位用户大呼震惊。她表示将更换该手表,同时提醒家长注意360儿童手表的语音回答存在问题。相关视频在网络引发广泛热议,相关话题随后也登上热搜,引发网友讨论。

回应
360创始人、董事长周鸿祎道歉
称已快速完成整改,有害信息被删除

22日,360有关负责人就此事回应记者称,关于某型号的360儿童手表出现错误问答,给用户带来不适,公司表示真诚的歉意。该负责人称,经检查,出现问题的儿童手表发行于2022年5月,为非AI版本,其中部分手表使用旧版软件,用的技术是通过互联网公开渠道抓取信息回答问题。这次抓取的互联网信息有严重问题,引发了错误答案。目前360正在对上述问题进行整改,并对该型号手表的信息抓取功能再次迭代。

8月22日,360创始人、董事长周鸿祎在其个人社交平台发布视频道歉,“经过快速检查,出现问题的这款手表是2022年5月份的一个旧版本,其中没有装入我们的大模型。它回答问题不是通过人工智能,而是通过抓取互联网公开网站上的信息来回答问题。目前我们已经快速完成了整改,删除了上述所有有害信息,并正在将软件升级到人工智能版本。”周鸿祎还在视频中对新版的大模型儿童手表的问答功能做了几个测试。

周鸿祎表示,目前人工智能存在一个全世界公认的难题就是它会产生幻觉,也就是它有的时候会胡说八道,“这是大模型本身固有的特性。如何最大限度地减少幻觉?360一直在做努力,比如我们试图通过与搜索的内容做对比来减少幻觉、做好知识对齐。但有时候搜索可能会抓取到内容不正确的网页,就会导致内容的出错。”

关注
周鸿祎回应被质疑避重就轻

浙江大学计算机科学与技术学院副教授金小刚告诉记者,周鸿祎的回应是避重就轻,“他的产品里面究竟是哪一块出了问题,他应该认真去思考,而不是用技术上的概念去掩盖。”

此外,金小刚认为周鸿祎的回应将人工智能狭义化了。周鸿祎在致歉中解释出问题的360儿童智能手表时提到“它回答问题不是通过人工智能,而是通过抓取互联网公开网站上的信息来回答问题”,金小刚表示,“用已有的数据进行训练,对未知的数据做预测,这本来就是人工智能的一种研究方向。他这个说法就是把人工智能跟大模型做了切割,大模型才是人工智能,过去的不叫人工智能了?”

360儿童智能手表在升级到人工智能版本,装入最新的大模型后,就能完全避免相关的价值观问题吗?知名经济学者、工信部信息通信经济专家委员会委员盘和林告诉记者,“AI大模型,如果刻意训练,这类不合理回答会减少,但不会完全杜绝,是一个概率问题。AI可以通过规范范例,通过答案打分反馈来降低不合理回答权重。”

金小刚也认为,即便使用了大模型,这类问题也会依然存在,“如果设计者就有偏向性,那大模型就会带来这样的(价值观)问题”。

AI价值观能和人类对齐吗?

此次360手表在回答中的争议涉及到价值观问题,而AI在价值观问题上的表现也一直有争议。如何让大模型的能力和行为跟人类的价值、真实意图和伦理原则相一致,确保人类与人工智能协作过程中的安全与信任。这个问题被称为“价值对齐”,价值对齐是AI安全的核心议题。

盘和林表示,“我认为要AI完全对齐价值观不太可能,因为这个世界三观是多元化的。人类自己都无法对齐,很难要求AI去对齐。只能说尽力引导AI做出得体的回应”。

金小刚也告诉记者,“AI的价值观如果和你对齐了,和别人没对齐,那也是一个问题。这个过程中只能让人类向善,通过立法,对技术应用当中的不确定性的监控,让产品能够更好地服务社会。因为不管怎么讲人工智能是一个技术,它是中性的。”金小刚表示,技术在应用中本就是不确定性的,所以要确保产品出现问题后能够迭代。

头部人工智能企业也都在做价值对齐上的努力。去年7月,OpenAI宣布成立一个“超级对齐”团队,这个团队的目标是在4年内弄清如何让超级智能的AI系统实现价值对齐和安全,OpenAI将投入20%的算力资源来支持这一工程。其核心是探索如何利用AI来帮助人类解决AI的价值对齐问题。

但就在不到一年之后,今年5月,OpenAI首席科学家Ilya Sutskever及“超级对齐”团队负责人Jan Leike离职,理由是不认可OpenAI领导层的“核心优先事项”,团队在推动其研究项目和争取计算资源时遇到了重大阻碍,缺乏资源严重影响研究的进度和质量。他们共同领导的“超级对齐”团队也被证实解散。

马斯克针对这一事件评论:“这显示安全并不是OpenAI的首要任务”。

儿童如何安全使用大模型?

值得注意的是,随着儿童手表市场规模扩大,内容安全正成为各方关切。

此次360儿童智能手表的争议事件也让人们开始审视儿童应该如何使用人工智能大模型产品。

对此,盘和林告诉记者,大模型适合直接给儿童用,但需要向孩子解释这是个什么。可以指导家长引导方式,“AI不是洪水猛兽,儿童也不是温室里面的花朵。”

金小刚则提出了相反的观点,“我认为大模型在幼儿教育阶段要谨慎使用。如果让小孩因为有这样一个工具,很容易获取答案而放弃了思考,这就远远背离了教育的本质。”

金小刚表示,如果使用者有判断力,使用者的答案在大模型的答案之上,可以使用大模型进行一定的辅助工作,“你的审美超过大模型,你可以让大模型做一个草稿,你在上面再做。我希望大模型在教育里是用来提升判断力和认知水平,而不是轻易给出答案的。”

“甚至是在我的实验室里,如果学生连读文献、查文献、做文献综述都不会,需要用大模型做,我认为这就不是教育。”金小刚表示。

目前,国内对于儿童智能手表还没有统一的监管规范。去年12月,中国网络安全产业联盟发布的《儿童智能手表个人信息和权益保护指南》(以下简称《指南》)向社会公开征求意见。《指南》显示,其重点主要集中在儿童个人信息安全、默认隐私保护、监护人控制等方面。

在算法和人工智能应用上,《指南》提出,需要考虑的因素包括在儿童智能手表售卖前对算法模型进行科技伦理审查,重点审查对儿童行为习惯、身心健康的直接或间接影响;在儿童智能手表售卖前对自动化决策开展专门的个人信息保护影响评估,确保采取的安全措施与风险相适应,并向监护人开放查询、答疑渠道。

此外,《指南》也提到,儿童智能手表使用生成式人工智能技术的,儿童智能手表制造者需考虑的因素包括限制单日对话次数与对话时长,若超过使用次数或时间需输入管理密码;过滤少儿不宜内容,仅展示有益身心健康的内容;生成式人工智能算法训练的语料数据不具备任何可识别个人的特征数据等。 

相关
儿童智能手表
国内市场普及率约为30%

儿童手表在中国的市场规模正逐渐扩大。

根据IDC最新发布的《中国可穿戴设备市场季度跟踪报告》显示,在智能手表市场,2024年第一季度出货量910万台,同比增长54.1%。其中成人智能手表505万台,同比增长62.8%;随着市场需求复苏,儿童智能手表出货量404万台,同比增长44.4%。而根据中国产业研究院发布的《2022-2027年中国儿童智能手表行业深度调研及投资前景预测研究报告》,目前中国5岁至12岁的儿童数量约为1.7亿人,儿童智能手表的市场普及率约为30%,基本上3个孩子当中就有1个孩子有智能手表。

从市场排名来看,小天才、小米、华为、360等品牌销售位于前列,其中小天才的多款儿童手表位于榜首。天猫榜单显示,在儿童手表热销榜上,前三名均为小天才手表,小米有三款手表进入前10,华为也有三款手表进入前10,360销售最好的一款排名第9。

但在儿童智能手表市场不断扩大的同时,其安全隐患也在引发关注。去年9月,上海市静安区办理全市首例儿童手表游戏案。静安区文化和旅游局执法大队执法人员通过在线巡查发现,辖区内某公司在某儿童手表平台中运营网络游戏“五子棋”,既未注明网络游戏版号,也未要求用户以真实身份信息注册、登录。用户从儿童手表内置应用商店中下载、安装该游戏后,点击打开就能进行五子棋人机练习和联机对战,而且还可以通过微信扫码的方式进行充值消费。

经查,当事人在未经依法审批的情况下,自2022年3月8日起在某儿童手机平台运营网络游戏,并通过用户扫码购买“智慧豆”作为“人机练习”及“人机对战”入场券的方式获利。案发后,当事人立即进行整改,下架涉案游戏,关闭服务器。静安区文旅局责令当事人立即改正上述违法行为,没收违法所得、罚款人民币15万元的行政处罚。 

文章来源于 南都鉴定评测实验室,如有侵权请联系删除


鲜花

握手

雷人

路过

鸡蛋
  • 发布新帖

  • QQ客服

  • 微信公众号

  • 移动端

  • 返回顶部