防范与深度合成技术应用相伴生的各种社会风险

南方财经全媒体记者 李润泽子 21世纪经济报道记者 郭美婷 实习生 曹萩儿 广州报道


【资料图】

当真假交融难辨,眼见不再为实,如何规范化身双刃剑的深度合成技术应用便成为了关键。

日前,国家互联网信息办公室、工业和信息化部、公安部联合发布了《互联网信息服务深度合成管理规定》(以下简称《规定》)。《规定》明确了深度合成服务的一般规定、数据和技术管理规范以及监督检查与法律责任等内容。

国家互联网信息办公室有关负责人指出,深度合成服务治理需要政府、企业、社会、网民等多方主体共同参与,推动深度合成技术的依法、合理、有效使用,积极防范化解深度合成技术带来的风险,促进互联网信息服务健康发展,维护网络空间良好生态。

受访专家告诉南方财经全媒体记者,从目前我国正处于推动数字化转型,倡导文化产业数字化发展的大背景下,规范深度合成技术,并且出台有关人工智能治理的相关法规正是应有之义,不仅能够有利于我国数字经济发展,而且能够维护网络空间良好生态,为之后的进一步发展打下坚实的基础。

划定深度合成服务的“底线”和“红线”

AI聊天机器人、AI绘画、AI换脸、虚拟数字人、修复影像、合成语音……近年来深度合成技术应用场景正不断丰富。

据介绍,深度合成技术是指利用深度学习、虚拟现实等生成合成类算法制作文本、图像、音频、视频、虚拟场景等网络信息的技术。

中国互联网协会研究中心副主任、北京师范大学博士生导师吴沈括告诉南方财经全媒体记者,深度合成技术在影视制作、社交娱乐、新闻宣传、教育和电子商务等方面应用较多。商业上有丰富用户体验,增强用户粘性,拓展应用场景和增强业务生态等多重价值。

《深度合成十大趋势报告(2022)》显示,在国内外主流音视频网站、社交媒体平台上,2021年新发布的深度合成视频的数量较2017年已增长超过10倍。此外,深度合成内容关注度也呈指数级增长,通过对互动数据进行统计,2021年新发布的深度合成视频的点赞数已超过3亿。

然而,在深度合成技术向社会生活的各个领域渗透之时,其所带来的负面风险也日渐显现且逐步产生实质危害。

近两年,浙江、江苏、河南等多地就出现了不少利用深度合成技术实施犯罪的“变脸”诈骗案。这些案件的作案流程颇为雷同:不法分子非法获取他人照片或有偿收购他人声音等“物料”,仅需少量音视频样本数据,便可合成媲美真人的伪造音视频,用来实施精准诈骗,侵害他人人身和财产安全。

国家网信办在答记者问时指出,深度合成服务在满足用户需求、改进用户体验的同时,也被一些不法人员用于制作、复制、发布、传播违法信息,诋毁、贬损他人名誉、荣誉,仿冒他人身份实施诈骗等违法行为,影响传播秩序和社会秩序,损害人民群众合法权益,危害国家安全和社会稳定。出台《规定》,能够划定深度合成服务的“底线”和“红线”,维护网络空间良好生态。

事实上,在《法治社会建设实施纲要(2020—2025年)》中就曾明确提出制定完善对算法推荐、深度伪造等新技术应用的规范管理办法。其中,《互联网信息服务算法推荐管理规定》第一个正式出台的规制算法推荐运用的部门规章,已于今年3月施行。《规定》则是第二部专门针对算法的规范。

显著标识避免公众混淆

早在今年初,国家网信办就已针对深度合成管理征求意见。直至年末,《规定》正式稿才最终出台。

相比起此前的征求意见稿,上海汇业律师事务所律师史宇航认为,《规定》最大的区别在于引入了更多的监管部门,将电信主管部门与公安部门也引入到深度合成技术的监管之中。 电信主管部门可能会从电信牌照与备案、网络安全漏洞等角度进行监管,公安部门则更关注公安联网备案、网络安全等级保护的问题。

在吴沈括看来,《规定》的亮点在于就深度合成服务明确设立了涉及算法、机理、科学伦理以及信息发布等多个方面的多项审查审核机制;同时,强调了包括加强技术管理、定期审核、评估验证,以及有关模板、模型、工具的安全评估等的平台主体责任内容;并且,强调实名认证,确保发布者的真实身份,否则不予提供相应的信息服务,并且在身份验证中提供了多种可选方式,包括电话号码、身份证以及网络身份认证机制等。

而《规定》中另一颇受关注的条款是对“深度合成标识 ”的要求。《规定》提出,深度合成服务提供者对使用其服务生成或者编辑的信息内容,应当采取技术措施添加不影响用户使用的标识,并依法依规保存日志信息。提供智能对话、合成人声、人脸生成、沉浸式拟真场景等具有生成或者显著改变信息内容功能服务的,应当在生成或者编辑的信息内容的合理位置、区域进行显著标识,向公众提示信息内容的合成情况,避免公众混淆或者误认;提供非上述深度合成服务的,应当提供显著标识功能,并提示使用者可以进行显著标识。任何组织和个人不得采用技术手段删除、篡改、隐匿相关标识。

此项要求可能会推动深度合成技术与区块链技术更为紧密的融合,借助区块链上信息无法篡改的特点来履行该项义务 。 ”史宇航说。

此外,《规定》与《互联网信息服务算法推荐管理规定》一脉相承,同样注重新闻信息安全。《规定》指出,具有舆论属性和社会动员能力的深度合成服务提供者仍要履行算法推荐服务的备案手续,深度合成服务提供者开发上线具有舆论属性或者社会动员能力的新产品、新应用、新功能也要按规定开展安全评估。

吴沈括指出,该规定是为实现深度合成服务的事前治理,以最大程度降低该技术伴生的社会风险。

同时,数据安全也是《规定》重点强调的规范之一。《规定》要求,深度合成服务提供者和技术支持者应加强训练数据管理,采取必要措施保障训练数据安全;训练数据包含个人信息的,应当遵守个人信息保护的有关规定;提供人脸、人声等生物识别信息显著编辑功能的,应当提示使用者依法告知被编辑的个人,并取得其单独同意。

促进深度合成服务规范发展

促进深度合成服务规范发展是此次《规定》出台的重要目的。 据国家网信办介绍,制定《规定》,是落实《网络安全法》《数据安全法》《个人信息保护法》《互联网信息服务管理办法》等法律、行政法规,对应用深度合成技术提供互联网信息服务制定系统性、专门性规定,能够明确各类主体的信息安全义务,为促进深度合成服务规范发展提供有力法治保障。

在北京大成律师事务所高级合伙人肖飒看来,《规定》的发布一方面会使得目前行业内良莠不齐的情况得以整治,淘汰不规范的企业,促进行业健康发展,另一方面也会使得同深度合成技术相关的新兴技术行业有相似的法律依据提供参考,提前做好准备,合法合规运行。

总的来说,对行业有着极大的促进作用,也能促使更多企业依照规范加入深度合成服务提供者的行列。 ”她表示。

史宇航也持有相同看法,他认为《规定》的制定有助于对新技术风险的监管,更好地发挥新技术的价值。

然而,《规定》作为规范前沿技术的具体规定,在落地时仍面临不少难点。肖飒指出,《规定》的落地难点主要在于深度合成技术本身的复杂性和易变性,实践中认定、取证和举证的难度可能会较高 ,影响《规定》的实施效果。同时,由于目前已经有许多企业已经在进行深度合成技术的应用,因此如何处置和使得这部分企业在《规定》实施后转为合规合法进行深度合成服务的提供也是落地的难点之一。以上这些问题,都需要司法和执法部门在不断地更新自己的能力,与时俱进。

因此,在未来进一步推动深度合成技术规范化发展的过程中,吴沈括建议,一方面要认可深度合成技术的积极意义,同时也要重点实现对于深度合成技术和服务的有序规范和引导,对于深度合成技术所形成的生态中的各方主体,要根据技术演进的实际情况,不断完善权利义务配置。同时,丰富监管工具手段,引入新监管机制,最大程度防范与深度合成技术应用相伴生的各种社会风险,划定必要的行为红线,及时惩处各类违法违规行为,构建安全可持续的发展环境。

“希望执法能够跟上,只有切实对违法行为进行查处、处罚,让执法更加公开透明,才有可能推动深度合成技术的规范化发展,否则一定会出现劣币驱逐良币的现象,导致违法活动难以遏制。”史宇航期待。

此外,值得注意的是,南方财经全媒体记者也观察到,除《规范》外,近期与人工智能治理相关的法规正密集出台。

对此,肖飒认为,一方面意味着人工智能这一项技术已经在各个方面各个领域发挥出越来越重要的作用。面对这样的一种新型领域,自然会引申出许多固有的法律法规无法回应或妥善处理的难题,因而需要新的法律法规予以正面回应。另一方面也意味着我国对于人工智能这样一项新兴技术并未采取置之不理或者听之任之的态度,而是在积极接纳的基础上通过新的法律法规进行规范,以适应社会的不断发展之势。

推荐内容

  • 【环球时快讯】ChatGPT、AI换脸背后的关键技术迎来新规:应显著标识,提供真实身份信息
    【环球时快讯】ChatGPT、AI换脸背后的关键技术迎来新规:应显著标识,提供真实身份信息

  • 环球热点!11月M2同比增长12.4% 企业对未来经济预期稳步回暖
    环球热点!11月M2同比增长12.4% 企业对未来经济预期稳步回暖

  • 【全球快播报】银泰黄金拟被溢价收购 股价竟然不涨反跌
    【全球快播报】银泰黄金拟被溢价收购 股价竟然不涨反跌

  • 天天观点:上海电气涉“专网通信”骗局收百万罚单 这些投资者可参加索赔
    天天观点:上海电气涉“专网通信”骗局收百万罚单 这些投资者可参加索赔

  • 全球热推荐:助力大湾区高质量发展 中证南财粤港澳大湾区指数系列将在南财国际论坛盛大发布
    全球热推荐:助力大湾区高质量发展 中证南财粤港澳大湾区指数系列将在南财国际论坛盛大发布

  • 世界快讯:A股反弹行情不会一蹴而就 交易热点逐步扩散
    世界快讯:A股反弹行情不会一蹴而就 交易热点逐步扩散

  • 【聚看点】美的集团与大族集团签署战略合作框架协议
    【聚看点】美的集团与大族集团签署战略合作框架协议

  • 爆火出圈的ChatGPT 和它背后的万亿商业化狂想
    爆火出圈的ChatGPT 和它背后的万亿商业化狂想

  • 环球今头条!非标审计意见现端倪 ST华英被立案调查 公司重整成功利好股民维权
    环球今头条!非标审计意见现端倪 ST华英被立案调查 公司重整成功利好股民维权

  • 天天时讯:数字化工厂转型当务之急是什么? 普华永道调研报告:提高生产灵活性和交付韧性
    天天时讯:数字化工厂转型当务之急是什么? 普华永道调研报告:提高生产灵活性和交付韧性

  • 安道麦A(000553) 大力拓展海外布局
    安道麦A(000553) 大力拓展海外布局

  • 看热讯:*ST紫晶涉嫌欺诈发行、财务造假 中介机构瑟瑟发抖 投资者索赔依据明确
    看热讯:*ST紫晶涉嫌欺诈发行、财务造假 中介机构瑟瑟发抖 投资者索赔依据明确

  • 当前滚动:华发股份(600325) 积极推进股权融资 控股股东鼎力支持
    当前滚动:华发股份(600325) 积极推进股权融资 控股股东鼎力支持

  • 里程碑意义!内地市场首只中新ETF互挂产品——亚太低碳ETF(159687)12月9日起正  式发售
    里程碑意义!内地市场首只中新ETF互挂产品——亚太低碳ETF(159687)12月9日起正 式发售

  • 焦点滚动:科技支撑,智慧引领——南方基金APP荣获2021年度深圳市金融创新奖三等奖
    焦点滚动:科技支撑,智慧引领——南方基金APP荣获2021年度深圳市金融创新奖三等奖

  • 历久弥坚长跑致胜工银瑞信信息产业混合蝉联“金基金奖”
    历久弥坚长跑致胜工银瑞信信息产业混合蝉联“金基金奖”

  • 快看:“超额”的个人养老金资金账户:银行称系统已完善
    快看:“超额”的个人养老金资金账户:银行称系统已完善

  • 估值暴跌6成也要IPO 辣条“一哥”卫龙陷业绩增长瓶颈 基石投资人“信心不足”
    估值暴跌6成也要IPO 辣条“一哥”卫龙陷业绩增长瓶颈 基石投资人“信心不足”

  • 世界观察:ST国安重整最新进展! 千亿债务或被解决,股民索赔有望
    世界观察:ST国安重整最新进展! 千亿债务或被解决,股民索赔有望

  • 2022年A股IPO领跑全球 融资额有望再创新纪录
    2022年A股IPO领跑全球 融资额有望再创新纪录

  • 热点评!阳光保险近四年约被罚4145万元
    热点评!阳光保险近四年约被罚4145万元

  • 环球快看:西北多地弃光率下降 区域储能项目落地迎来高峰期
    环球快看:西北多地弃光率下降 区域储能项目落地迎来高峰期

  • 环球观焦点:澳大利亚央行连续三个月加息25个基点 “鸽派”转向背后还有哪些隐忧?
    环球观焦点:澳大利亚央行连续三个月加息25个基点 “鸽派”转向背后还有哪些隐忧?

  • 天天热议:千亿光伏龙头遭抛售:阳光电源澄清下调出货 海外储能业务掀起波澜
    天天热议:千亿光伏龙头遭抛售:阳光电源澄清下调出货 海外储能业务掀起波澜

  • 当前速递!全国快递日均业务量复苏提速 重回3亿件以上
    当前速递!全国快递日均业务量复苏提速 重回3亿件以上

  • 【时快讯】凯乐科技拟收千万罚单 受损股民索赔已启动
    【时快讯】凯乐科技拟收千万罚单 受损股民索赔已启动

  • 环球热讯:央行等部门发文完善境外机构境内发行债券资金管理
    环球热讯:央行等部门发文完善境外机构境内发行债券资金管理

  • 天天精选!你的养老多了3种选择,该怎么选?
    天天精选!你的养老多了3种选择,该怎么选?

  • 钠离子电池市场群雄并起:上市公司争相研发布局
    钠离子电池市场群雄并起:上市公司争相研发布局

  • 中概股指数创单月最大涨幅:华尔街资本踊跃抄底 看涨中国经济
    中概股指数创单月最大涨幅:华尔街资本踊跃抄底 看涨中国经济

  • 有股民索赔终审胜诉了! 金正大财务造假祸及审计机构
    有股民索赔终审胜诉了! 金正大财务造假祸及审计机构

  • 药品网售新规正式施行:8成用户希望获得药物使用指导,超9成用户关注药盒展示问题
    药品网售新规正式施行:8成用户希望获得药物使用指导,超9成用户关注药盒展示问题

  • 【环球时快讯】财智对决  燃动青春 “寻找未来基金经理”高校模拟投资联赛,热身赛12月1日开始
    【环球时快讯】财智对决 燃动青春 “寻找未来基金经理”高校模拟投资联赛,热身赛12月1日开始

  • 教育数字化战略:三大智慧教育平台累计访问量超474亿次
    教育数字化战略:三大智慧教育平台累计访问量超474亿次

  • 依靠收购资产上市创业板 中仑新材单一产品经营闯关IPO
    依靠收购资产上市创业板 中仑新材单一产品经营闯关IPO

  • 天天播报:“广州套路贷第一案”落幕 广州丰盛科苑工业园立起法锤雕塑
    天天播报:“广州套路贷第一案”落幕 广州丰盛科苑工业园立起法锤雕塑

  • 【全球热闻】合众思壮预收证监会罚单 专网通信骗局“惊天”面纱正被揭开
    【全球热闻】合众思壮预收证监会罚单 专网通信骗局“惊天”面纱正被揭开

  • 今日快看!“求锤得锤” 惠程科技自爆信披违规被立案 这些投资者维权成功率高
    今日快看!“求锤得锤” 惠程科技自爆信披违规被立案 这些投资者维权成功率高

  • 世界观天下!把握北交所布局良机  汇添富北证50成份指数基金今日起发售
    世界观天下!把握北交所布局良机 汇添富北证50成份指数基金今日起发售

  • 天天即时:首批个人养老金投资基金产品开卖
    天天即时:首批个人养老金投资基金产品开卖

  • 世界百事通!买房门槛降至历史低位 入市迎来“窗口期”
    世界百事通!买房门槛降至历史低位 入市迎来“窗口期”

  • 环球热讯:南财深耕“国民金融素养提升计划”,“寻找未来基金经理”高校模拟联赛启动
    环球热讯:南财深耕“国民金融素养提升计划”,“寻找未来基金经理”高校模拟联赛启动

  • 【全球播资讯】个人养老金落地“开闸”:先行城市有哪些?如何购买?能减多少税?
    【全球播资讯】个人养老金落地“开闸”:先行城市有哪些?如何购买?能减多少税?

  • 环球热推荐:佛高区科技金融创新发展大会成功举办 广东股交助力高新区科技金融发展
    环球热推荐:佛高区科技金融创新发展大会成功举办 广东股交助力高新区科技金融发展

  • 全球看热讯:ST三盛现内忧外患:跨界收购风险暗藏,控制权转让一波三折
    全球看热讯:ST三盛现内忧外患:跨界收购风险暗藏,控制权转让一波三折

  • 焦点速看:鞍重股份遭监管警示 这些投资者可索赔
    焦点速看:鞍重股份遭监管警示 这些投资者可索赔

  • 世界观热点:公司保壳成功,这些股民可加入维权
    世界观热点:公司保壳成功,这些股民可加入维权

  • 热点评!公司实控人被立案调查 通策医疗受损投资者可索赔
    热点评!公司实控人被立案调查 通策医疗受损投资者可索赔

  • 证监会压实券商“看门人”责任 国瑞科技、巴安水务、st广珠、广州浪奇索赔进行中
    证监会压实券商“看门人”责任 国瑞科技、巴安水务、st广珠、广州浪奇索赔进行中

  • 涉嫌虚增收入近16亿,合众思壮拟领罚千万元 符合这些买卖条件可索赔挽损
    涉嫌虚增收入近16亿,合众思壮拟领罚千万元 符合这些买卖条件可索赔挽损