【法治护我心】划定深度合成服务“底线”“红线”******
【法治护我心——《互联网信息服务深度合成管理规定》系列解读】
光明网记者 陈畅、李政葳
“雾里看花,水中望月,你能分辨这变幻莫测的世界……”如果把上个世纪九十年代这首“315”晚会歌曲,用来描述当下互联网时代的“云”上生活,在技术发展与风险伴生之下,“虚”“实”之间让人颇有迷幻之感。
“再也不敢相信自己的眼睛和耳朵。”当换脸换声、三维重建、智能对话等逐渐应用开来,人们时常发出这样的感叹。这类深度合成服务催生了美颜美妆、智能客服、虚拟主播等一系列应用形态,但其被恶意利用制作虚假信息内容,进而带来了政策干扰、谣言泛滥、低俗内容等。因此,我们也在呼吁——“借我一双慧眼,把这纷扰看个清清楚楚明明白白……”
纵观互联网发展历程,技术治理本身就是一场攻防对抗博弈,也是技术从创新应用到规范发展的必经之路。近日,这项深度合成技术被套上了“紧箍咒”——国家互联网信息办公室、工业和信息化部、公安部联合发布《互联网信息服务深度合成管理规定》(以下简称《规定》),自2023年1月10日起施行。
法立于上则俗成于下。《规定》出台划定了深度合成服务的“底线”和“红线”, 迈出我国新技术新应用立法的重要一步,也将有效维护网络空间良好生态。
明确义务要求,强化主体责任
事实上,深度合成技术由来已久。随着深度学习技术、特别是对抗式生成网络技术的发展,深度合成技术门槛大幅降低。2017年11月,Reddit网站的用户“deepfakes”发布伪造视频,曾一度将这项技术推至风口浪尖,其“以假乱真”的信息内容严重威胁国家安全、干扰社会秩序。
何为“深度合成技术”?《规定》中给出了明确表述——指利用深度学习、虚拟现实等生成合成类算法制作文本、图像、音频、视频、虚拟场景等网络信息的技术。
具体包括:篇章生成、文本风格转换、问答对话等生成或者编辑文本内容的技术,文本转语音、语音转换、语音属性编辑等生成或者编辑语音内容的技术,音乐生成、场景声编辑等生成或者编辑非语音内容的技术,人脸生成、人脸替换、人物属性编辑、人脸操控、姿态操控等生成或者编辑图像、视频内容中生物特征的技术,图像生成、图像增强、图像修复等生成或者编辑图像、视频内容中非生物特征的技术,三维重建、数字仿真等生成或者编辑数字人物、虚拟场景的技术等。
诚然,从技术进步的角度看,深度合成技术应用的初衷是让生成合成内容更逼真,但技术在愈趋“智能”的同时,也不可避免地带来更多风险。对此,中国科学院信息工程研究所所长孟丹介绍,除深度伪造风险外,还包括生成合成信息内容带来的个人信息泄漏、侵犯人格权和知识产权等他人合法权益等风险。
深度合成服务提供者和技术支持者既是新技术、新应用的创造者、受益者,也应该是控制技术风险、引导技术向善的责任践行者。记者梳理发现,《规定》明确了深度合成技术定义和服务范围,提出了服务提供者落实信息安全主体责任,指出了服务提供者和技术支持者备案义务,并对服务提供者履行安全评估和配合监督检查义务提出具体要求。
中国科学院自动化研究所所长徐波这样评价:《规定》分析梳理了深度合成活动边界,对深度合成服务提供者、技术支持者和使用者以及应用程序分发平台等主体应履行的责任义务作出规定。比如,服务提供者应履行建立健全管理制度、对使用者真实身份信息认证、加强深度合成信息内容管理等义务,服务提供者和技术支持者应履行加强训练数据管理、加强深度合成技术管理等义务。
健全技术支撑体系,促进科技向上向善
从此起彼伏的社会案件中可以看出,深度合成信息内容制作和传播数量正在高速增长,尤其伴随“元宇宙”等新模式、新场景不断落地,深度合成技术将为智能化、视觉化、场景化、虚拟化的互联网信息服务发展提供更多技术方案。孟丹认为,《规定》的出台是网络内容治理由结果管理迈向行为管理的重要一步,标志着我国网络空间治理能力进一步优化提升。
时间倒回到两年前。在2021年12月,国家互联网信息办公室发布《互联网信息服务算法推荐管理规定》,对包括生成合成类在内的五类算法推荐服务进行规范。本次出台的新规在之前算法规定的基础上,加强对深度合成服务全过程管理,也深化了备案与评估标本兼治。
然而,从技术发展阶段看,深度合成技术与应用管理仍处于起步阶段,在技术支撑和能力建设方面还有待进一步加强。“加快推进深度合成治理技术支撑体系建设,是切实保障深度合成服务治理工作有力有序推进的关键。”孟丹说。
《规定》的字里行间,凸显了“以技术管技术”的逻辑,也必将促进深度合成服务的规范治理。“其确立了我国对深度合成服务的治理框架,提出了明确的数据和技术管理规范,为促进深度合成技术向上向善,引导相关产业健康发展,确保互联网信息内容安全提供了有力的制度保障。”中国政法大学副校长时建中说。
“《规定》以促进技术在规范中发展为价值取向,在明确‘红线’的同时,为技术发展留足空间。”中国信息通信研究院副院长王志勤这样认为。比如,《规定》要求深度合成服务提供者应当建立算法机制机理审核、科技伦理审查等管理制度。
孟丹也建议,从深度合成信息内容源头上,解决其衍生的内容安全风险,利用技术创新、技术对抗等方式持续提升和迭代检测技术的能力,不仅着眼于管理好、使用好、发展好深度合成技术及相关服务,也致力于深度合成技术的合法合理合规使用,促进深度合成技术及相关服务健康有序的发展。
引导多方参与,推动治理走深向实
随着数字化、智能化进程不断加快,互联网信息服务综合治理不断细化,规范深度合成活动对营造健康安全的网络空间有着重要意义。国家互联网信息办公室有关负责人表示,深度合成服务治理需要政府、企业、社会、网民等多方主体参与,推动深度合成技术的依法、合理、有效使用,积极防范化解深度合成技术带来的风险,促进互联网信息服务健康发展。
《规定》明确提到,国家和地方网信部门统筹协调深度合成服务的治理和相关监督管理职责,国务院电信主管部门、公安部门以及地方相关部门的监督管理职责。
王志勤认为,《规定》构建了统筹协调、多方参与的监管体制;《规定》鼓励相关行业加强行业自律,搭建齐抓共管、协同共治的治理机制;《规定》通过系统化的制度安排,进一步构建完善了我国网络综合治理法治体系。
孟丹也提到,《规定》在生成合成类算法服务范围、深度合成技术具体范围、深度合成服务业务分类、显式标识条件与标识方式、隐式标识方法与识别等诸多具体方面,仍亟需行业内部进一步细化相关配套标准规范。在实际落地过程中,建议业内推进产业联盟建立,以产业自治、多方共治的方式,不断推进深度合成技术应用高质量发展。
为推动深度合成治理走深向实,徐波建议,强化智能监管平台支撑。比如,深入研究深度合成类算法内生安全机理和深度合成鉴别等关键技术,推动深度合成管理技术能力建设;加强人机混合的智能监管技术,研究深度合成服务提供者的安全可控技术保障方案,把监管规范转化为评估标准,建设面向网络全域监管的监测管理平台;研发深度合成与鉴别对抗机制,鼓励新兴科技企业与研究机构开展技术演练,共同推动深度合成服务健康发展。
“野冰场”暗藏杀机:冰层厚度未知 无人管理和救援******
冰层厚度未知 无人管理和救援 短视频博主推荐
人如织的“野冰场”暗藏杀机
□ 本报记者 赵 丽
□ 本报实习生 王禹钦
近日,吉林省通化市一名5岁男童和家人在河流上的“野冰场”玩耍时,不慎坠入冰窟窿溺亡,引起社会广泛关注。
《法治日报》记者根据公开信息梳理发现,近一个月内,全国多地发生因滑“野冰”导致的伤亡事件。对此,消防部门提醒,禁止滑“野冰”等危险行为,市民应前往正规冰场游玩。
受访专家认为,对于无人管理的河道形成的“野冰场”,即使有小贩在“野冰场”出租冰车等,也不是“野冰场”的管理方,不是经营主体,不承担警告危险和劝离义务,一旦人们在这种场所发生事故,将自担责任。群众要有风险意识,远离“野冰场”。
冰面下隐藏着危险
多人坠冰导致身亡
1月7日,在北京展览馆后湖的“野冰场”,多名游玩者因冰面突然破裂落入水中。
“现在想想还很后怕。”参与北京展览馆后湖“野冰场”救人的一名大学生描述当天情景时说。
据悉,落水者都是大学生,寒假开始后选择在那里相聚玩耍,然后就发生了意外。
“我的一个好朋友不会游泳,他挣扎着时不时地把头冒出冰面喘口气,不知道喝了多少口冰水。”这名大学生说。对于当时的危险程度,他“现在想想还心惊肉跳”,冰面又薄又滑,他死命拽着救人的绳子,要是力气再小点,估计会被水里的同学拉下去。
事发当日的现场视频显示,冰面破裂后,至少4名穿深黑色棉服的游玩者落入水中,周围多名救助者快速组成一道道“人墙”,找来绳索等工具,通过手拉手的方式慢慢向落水者靠近,等落水者抓住绳索后,再合力将其从水中拉回冰面。
记者注意到,在破裂冰面附近的围观者中,还有多名儿童。
1月9日,记者在北京展览馆后湖的“野冰场”附近看到,仍有市民在冰面上“滑野冰”,其中不少是家长带着孩子玩乐,冰面上还有租赁滑冰车的人。
冰上的嬉戏欢笑和湖岸上新挂的红色警示横幅形成了鲜明对比。横幅上写着“湖面危险,请勿滑冰”和“岛内施工尚未结束,为了您的安全请勿进入”。
记者查阅资料发现,北京展览馆后湖并不在今年北京水务系统开放的天然河湖冰场之列,因此,在此滑冰实属危险的滑“野冰”行为。
危险的滑“野冰”行为不仅在北京展览馆后湖出现。1月8日,在北京市朝阳区奥林匹克公园龙形水系的一处冰面上,也发生了市民坠冰事故。
据当时在场的一名短视频博主回忆:有人玩耍时不小心掉进了冰窟窿,有两人前去施救时也一同掉了下去,最终几人均被救出,并无大碍。周围群众对待这起事故的态度令人担忧。
“就在事发地的旁边,落水的人刚爬上来,就有个两三岁的孩子往冰面上走,旁边的家长也没有迅速带孩子离开这片区域。”该博主告诉记者。
根据该博主拍摄的视频,记者看到,在落水者离开后,还有人在附近用冰锥试探。“这片‘野冰场’上,破裂的冰洞不止一个,但这样的场景也未能劝阻在冰面上滑行的人,不少大人、小孩仍继续在冰面上玩耍”。
而在岸边,每隔一段就有提示游客的牌子,上面写着“为了您的生命安全,请勿在冰面上玩耍”,在一处围栏上还挂着一只大喇叭,不断重复播放着“冰面太薄,请不要滑冰”的警告。
随后两天,记者探访了北京多处“野冰场”发现,尽管许多“野冰场”边上设有“冰面危险,请勿滑冰”的警示标语,有些地点甚至还有工作人员拿着喇叭进行巡逻劝阻,但仍有滑冰的拥趸套上冰鞋,拿上冰球杆,推上滑冰车,三五成群走上冰面,遇上带着孩子的游玩者,不少租赁滑冰车和冰鞋的商贩还会上前招揽生意。
不少游玩者告诉记者,尽管他们注意到了相关提示语,但觉得“这么多人在这里玩,不会出事的”。
多名业内人士说,冰面光滑、易碎,冰水寒冷,一旦不小心落入冰窟窿中,施救难度非常大。冰面的承重能力,用眼睛是无法观察到的。同时,在流动河道上结冰的冰面,由于河水水位会随着水量的大小发生变化,冰面下会形成两三厘米的“真空”,隐藏着危险。
有关部门发布的数据显示:近期,仅北京市119指挥中心就接到多起冰面救援警情,其中多人命丧冰水之中。去年12月23日,北京市密云区一名男性老者被冻在厚厚的冰层中,被救出时已无生命体征;今年1月2日凌晨,北京市通州区漷县镇,两名男子发生坠冰事故,被救出时均已无生命体征。
网络博主包装推广
危险河湖成打卡地
值得注意的是,有些北京郊区的“野冰场”经网络博主“种草”后,变成网红踏冰地,其安全隐患更是令人担忧。
京郊“小洱海”,北京“天空之镜”……近日,一些京郊地区在网上火“出圈”,但这些踏冰场所大多位置偏远,有的野外河道宽达百米,地形复杂,冰层厚度肉眼难以测量。
而在一些社交平台和短视频平台上,不少网络博主将这些暗藏危险的冰面用“绝美”“免费”“出片”等诱人的词汇进行包装,吸引一拨拨爱好者慕名前往,有关“野冰场”的话题甚至超过千万播放量。在这些视频中,除了个别警示滑“野冰”危险外,更多的是展示在“野冰场”上滑行、跳跃的内容。
虽然也有博主提及部分冰面不结实,打卡要注意安全,但更多博主则对这些“野冰场”的安全性闭口不提,甚至直言“这里已经冻结实了”“可以随意玩耍”“在这里打卡拍照太划算了”。
在诸多网络热帖下留言的网友,多数被网络博主分享的“震撼大片”所吸引,纷纷向博主求具体地址。还有网友将自己落水的危险经历当成趣事分享。仅有少数网友留言提到这些河道地形复杂,有些地方冰面薄暗藏风险。
据记者调查发现,上述推荐的“野冰场”包括河流、水库等,在一些拍摄者的视频中,可以明显看到冰面下有河水流动,在一些冰面上有凸起的“冰棱”,这样的冰面并不结实,危险重重。
在社交平台上,除了分享“野冰场”的位置,网友还晒出自制的简易滑冰车,其安全性着实让人担忧—— 一把普通的靠背椅、两根铁棍、几根铁丝就能滑。
中国政法大学知识产权研究中心特约研究员赵占领分析,推荐的“野冰场”发生事故,无论是发帖博主,还是网络平台,从法律角度来讲,都很难要求其承担法律责任,因为无法证明这种推荐和受到意外伤害之间有因果关系。
前往正规冰场游玩
专人巡视保障安全
用大石头砸一下,冰碴儿飞溅,但冰面并没有出现裂痕甚至窟窿,似乎就是“可以上冰”的信号;或者直接先踩上去一只脚探探“虚实”……记者在调查中看到,很多人用这种方式“检测”冰面厚度,以此来判断“野冰场”是否安全。
殊不知,这样的“试探”在专业救援人员看来,实际上“就已经是在拿自己的生命开玩笑”。
据了解,在北京,正规冰场都安排有专门人员留意气温变化,监控冰层厚度。按照北京市相关规定,冰层平均厚度至少要达到15厘米,才能允许游客上冰;当气温升高,冰层厚度不足、承载力有限时,冰场会暂停营业。
据什刹海公园冰场负责人杨谦介绍,冰场工作人员一般会用钢钎在冰面上砸出一个小洞,将铁钩伸进去,钩住冰层底部。取出铁钩后,再用卷尺直接量铁钩在冰面以下的距离。每次测量需选向阳面、背阴面等五六个测试点,以确保安全。
什刹海公园冰场设专职人员全天候巡视,严格执行“冰面平均每10平方米承载1人”的规定;坚持每天早、中、晚对冰层厚度进行测量,随时关注天气预报信息,适时增加冰层测量次数。同时设置应急救援队,有诸如摔伤、踩踏以及冰面裂缝等突发情况,救援队会第一时间到达现场,采取措施避免出现人员伤亡。
对于“野冰场”,有关部门还发布了安全风险提示。去年12月30日,北京市应急管理局提醒市民前往正规冰场游玩,禁止滑“野冰”等危险行为。
赵占领说,对于无人管理的河道形成的“野冰场”,即使有小贩在“野冰场”出租滑冰车等,也不是“野冰场”的管理方,不是经营主体,不承担警告危险和劝离义务,一旦人们在这种场所发生事故,仍是自担责任。因此,为避免这样的事故发生,还是要加强安全教育、安全宣传,让老百姓意识到安全的重要性,不要去“野冰场”。
他提醒说,对于公园、景区内的河道形成的“野冰场”,公园或景区的经营主体具有安全管理和提醒的义务。如果管理区域不能滑冰,要设置警示牌、配备巡逻人员,发现滑冰者要及时制止。如果因为管理不到位导致游客“滑野冰”发生事故,管理方需要承担相应责任,但也只是次要责任,主要责任仍是由行为人自己承担。
(文图:赵筱尘 巫邓炎)