Workflow
AI造假
icon
搜索文档
当AI无限拉低造假门槛,普通人能做什么?
新浪财经· 2025-12-19 08:11
11月,毛绒玩偶商家于瑾第一次遭遇AI假图仅退款。到货一周后,买家发来一张图申请仅退款,在店铺客服以人为损坏为由驳回后,买家申请平台介入并 成功拿回了50元。 但那张申请仅退款的图有一个不合常理的地方——玩偶柔软的裙边上,有类似陶瓷制品的坚硬裂痕。于瑾认定这是AI假图,发到社交平台吐槽。后来,在 媒体的介入下,平台自掏腰包,把这50元返还给了于瑾,用AI假图申请仅退款的买家却销声匿迹。 文 | 镜相工作室 黄依婷 编辑 | 卢枕 在很多人的印象里,造假是少数人的事。它需要专业的技术和硬件设备,需要行业人脉积累,造假者往往隐匿在灰黑产缝隙,是神秘的、恐怖的、没有道德 底线的,与大众保持着既远又近的距离。 但今年开始,一群人感受到了明显的变化。 于瑾意识到,AI的普及让"羊毛党"的恶意退款成本更低了。一台手机、一句提示词就能生成一张以假乱真的图片,薅走一个价值一百多元的玩偶,放在二手 平台倒卖。"不用付出什么,也不会得到什么惩罚。" 今年更早时候,公关齐云也经历过类似的冲击。他服务的一家上市公司被AI生成的黑稿攻击,文中细节让他直言"离谱得很"。但受制于内容平台规则,他和 同事们不得不花整整两天时间,对文中细节一 ...
假图骗取电商退款,洗脑驯化大模型,南都报告揭秘AI灰产
南方都市报· 2025-12-18 10:35
在一个"有图有真相""有视频有真相"的时代,当AI越来越聪明,你还能分得出真假吗?近来AI成为已经 成为"羊毛党"新工具——随着图片造假产业化,AI诈骗开始入侵电商领域。 技术热潮之下,生成式AI正在挑战并重建新秩序,但其被滥用的风险也在随之提升。从深度伪造引发 的内容失真,再到AI情感陪伴所触发的伦理困境,一系列典型案例不断进入公众视野,揭示了技术滥 用的现实隐患。 2025年12月18日下午,由南方都市报社、南都数字经济治理研究中心主办的第八届啄木鸟数据治理论坛 在北京举行。会上,南都发布了一份四万字的重磅报告《生成式AI落地应用:透明度测评与案例分析 报告(2025)》。 报告回顾了近些年118起生成式AI风险案例,聚焦生成式AI带来的社会信任挑战以及人机交互伦理争议 和治理痛点,并尝试提出切实可行的政策建议。 AI造假冲击个人权利、行业秩序和社会信任机制 司法场景中,海内外均出现律师利用AI生成虚假判例的情形。2025年10月北京通州法院披露,一名律 师在代理意见中引用了不存在的"(2022)沪01民终12345号"判决。法官因案号规律异常而识破,确认 该判例系AI凭空生成。该律师因未尽核实义务,被审 ...
AI造假“死螃蟹”诈骗商家195元退款,“顾客”被行拘8日,细节曝光
每日经济新闻· 2025-12-06 05:45
AI技术滥用与电商欺诈 - AI技术被用于制作虚假图片和视频,对网店商家进行索赔诈骗,成为“羊毛党”占便宜的新工具 [1][15] - 江苏苏州一大闸蟹经销商遭遇买家利用AI合成“死螃蟹”视频及图片,索赔195元人民币,警方查实后对诈骗者处以行政拘留8日并追缴违法所得 [2][13] - 一服装店电商客服遇到顾客用AI生成图片声称连衣裙领口脱线以申请仅退款,图片光影与边缘存在明显AI生成痕迹 [15] - 西安一陶瓷工艺品店铺主收到买家以AI生成图片声称杯身有裂纹申请仅退款,经AI检测工具分析该图片有92%概率为AI生成 [19] 诈骗手法与识别特征 - 诈骗者签收货物后迅速(本例中为10多分钟)反馈问题并索赔 [2] - 提供的虚假图片和视频存在明显疑点:如运镜奇怪、生物特征异常(螃蟹出现5只小腿)、视频比例被裁切以去除水印 [8] - 不同证据间存在矛盾:前后提供的图片与视频中死蟹的公母数量明显不符 [10] - 当商家提出进一步验证要求(如用手指拨动物品拍摄视频)或发现重大疑点时,诈骗者常选择已读不回或放弃索赔 [11][19] 商家应对与行业挑战 - 受骗商家期待线上平台加强监管,能够自动识别并拦截由AI软件制作的虚假视频,以保护商家利益 [14] - 商家面临AI造假索赔成本低、识别难的困境,需要自行收集证据并报警维权,过程耗时耗力 [11][14] - 法律专家指出,消费者使用AI图像造假以产品质量问题申请退款的行为已涉嫌诈骗,可能面临治安处罚或刑事追责 [19]
AI造假“死螃蟹”诈骗商家195元退款,“顾客”被行拘8日,案件细节曝光:死蟹公母数明显不对,甚至出现5只小腿的蟹
每日经济新闻· 2025-12-06 04:51
AI技术滥用与电商欺诈事件 - AI技术被不法分子用于制作虚假图片和视频,向网店商家进行恶意索赔,成为“羊毛党”占便宜的新工具[1][16] - 江苏苏州一大闸蟹经销商遭遇买家利用AI合成“死螃蟹”虚假视频,索赔195元,最终买家被公安机关查获并处以行政拘留8日及追缴违法所得[2][14] - 服装店电商客服遭遇顾客使用有明显AI生成痕迹的图片,声称连衣裙领口脱线并要求仅退款[16] - 西安一陶瓷工艺品店铺收到买家附有“杯身裂纹”图片的售后申请,经AI检测工具分析,该图片有92%概率为AI生成[20] 欺诈手法与识别特征 - 欺诈者提供的AI生成图片和视频存在明显矛盾与不合逻辑之处,例如螃蟹脚数量异常、视频运镜奇怪、图片比例被裁切以去除水印[8] - 在商家要求进一步验证时,欺诈者行为异常,如拒绝视频验证或不再回应商家质疑[11][20] - AI生成图片存在技术破绽,例如光影角度不符、边缘存在典型AI生成痕迹、裂纹处像素分布与周围真实材质存在明显差异[16][20] 商家应对与行业影响 - 受欺诈商家面临直接经济损失(如195元赔付款)及后续骚扰(如视频下架、人身威胁),最终选择整理证据并报警[12][14] - 商家期待线上电商平台加强监管,引入技术手段自动识别AI生成的虚假视频与图片,以保护商家利益[15] - 法律专家指出,消费者利用AI技术造假索赔的行为已涉嫌诈骗,根据情节轻重可能面临治安处罚或刑事追责,绝非简单的“钻漏洞”[20]
网购退货又现“AI造假+调包”?记者实测:瑕疵图、对应视频AI一键生成,真伪难辨
扬子晚报网· 2025-12-04 15:14
行业核心观点 - 电商行业出现新型消费欺诈模式,部分消费者利用低门槛AI技术伪造商品瑕疵图片及视频,以虚构商品破损为由恶意申请“仅退款”,甚至结合实物调包,对商家经营构成严重困扰[1] - 法律专家指出,此类以非法占有为目的、虚构事实骗取货款的行为涉嫌行政违法乃至刑事犯罪,商家需主动固定证据维权,平台应履行审核义务[12][14] 具体欺诈案例 - 商家陈先生遭遇典型“AI造假+实物调包”案例:消费者购买约500元行李箱后,发送疑似AI生成的破损图片要求仅退款,被要求退货后寄回劣质调包商品,平台在商家未签收退货的情况下直接将货款退还消费者[2][3] - 商家两次向平台申诉均失败,目前已向警方报案[5] AI技术滥用现状与手法 - AI造假已蔓延至电商各大类目,包括服装鞋袜、美妆护肤、生鲜果蔬等,几乎无所不包[7] - 主流AI应用操作门槛极低,用户输入“商品瑕疵+具体场景”的文字指令,几秒钟即可生成以假乱真的瑕疵图片,例如在豆包平台输入“在快递箱上生成污渍、破损、挤压痕迹”可快速生成对应图片[7] - AI造假能力从静态图片延伸至动态视频,可根据瑕疵图快速生成对应视频,造假流程便捷且成品逼真度高[9] 鉴别AI造假内容的方法 - 观察媒体比例:为规避AI水印而裁剪的视频,其比例可能明显偏离常规[11] - 观察画面稳定性:AI生成视频稳定度高、抖动痕迹不明显,而手机实拍通常存在自然抖动[11] - 利用生成限制辅助判断:部分AI平台对视频生成有额度限制(如豆包每日仅10个额度),造假者难以提供多机位、多角度素材,可要求补充不同角度画面进行判断[11] - 查看细节:AI生成的瑕疵(如霉斑、裂纹)边缘可能模糊,光影与商品本身不匹配[11] 法律定性及商家应对建议 - 利用AI伪造证据申请仅退款,若以非法占有为目的,可能违反《治安管理处罚法》第49条,面临5-15日拘留及1000元以下罚款[12] - 若诈骗数额较大(如单起超3000元或多次实施),可能触犯《刑法》第266条诈骗罪,面临有期徒刑、拘役等刑罚[12] - 商家维权应首先固定证据链:保留原始商品照片/视频、快递物流记录、聊天记录、AI假图与真实商品的对比证据等[13] - 其次向平台申诉提交完整证据,要求核查并撤销不当退款;若申诉失败,可携带证据报警,警方一般会在1周内反馈[13]
AI带货视频“批量化”生产 “AI李鬼”游走在灰色地带
中国青年报· 2025-11-24 23:55
AI技术在电商营销中的应用现状 - 商家利用AI技术批量生成带货视频的现象日益增多,在电商运营中相当普遍,网络上甚至出现系统化教程 [1][2] - AI视频生成模型具备较强的语言理解和图像生成能力,能够根据文本描述生成逼真画面,但处理复杂物理规律时仍存在局限性,导致出现“穿模”等典型漏洞 [2] - 有教学博主传授利用AI工具对原视频人物进行“深度改造”的进阶操作,包括更换面部特征、调整体型与性别,一条演示视频的网络播放量破千万 [2] AI虚假营销的违法违规案例 - 出现仿冒专家学者、奥运冠军、影视明星为产品站台的案例,中国工程院院士张伯礼在公开场合展示冒用其形象与声音合成的AI伪造视频并进行打假 [1][4] - 有公司通过拥有数十万粉丝的视频账号,利用AI技术伪造中央广播电视总台主持人李梓萌的形象,宣传其销售的普通糖果类食品具有治疗功效,最终受到行政处罚 [5] - 天津中医药大学发布声明,指出多家机构冒用张伯礼院士之名通过社交媒体宣传产品、培训或评审活动,这些机构均与院士无任何关联 [5] 行业治理与技术应对措施 - 监管层面针对AI换脸、虚假广告等问题敢于“亮剑”,强调需要跨领域协同推进AI治理,包括监管加码、平台强化责任和网民参与 [6] - 部分广告企业构建全流程管理机制,某营销服务平台第三季度前置拦截涉AI违规素材84万余个,聚焦精准识别和从严处置 [6] - 对AI虚假广告的治理正从依赖人工审核向人机协同、智能识别方向演进,通过应用多模态大模型提升识别效率,系统可快速解析视频素材并定位违规内容 [7]
生成式AI不能沦为造假工具
经济日报· 2025-11-20 22:16
AI技术滥用乱象 - 某演员遭遇“AI盗播”,其AI分身在同一时间现身多个直播间带货,演员本人提出质疑后被拉黑[1] - 生成式AI技术大幅降低视频制作门槛,但被滥用于伪造“买家秀”骗取退款、制造虚假明星合影、伪造音视频针对老年人进行诈骗等[1] - AI技术有从创意工具沦为造假工具的危险趋势[1] AI内容治理政策与现状 - 《人工智能生成合成内容标识办法》于9月起施行,要求AI生成内容需添加显式标识(文字、声音等)和隐式标识(技术措施嵌入文件数据)[1] - 显式标识帮助用户辨别误导性信息,隐式标识有助于追溯伪造内容来源和维护被侵权人权益[1] - 政策施行后各大平台纷纷出台细则响应,但仍有部分AI内容未添加标识,对观众形成误导[2] 构建多层次AI治理体系 - 需强化法律保障,明确AI造假处罚标准,厘清服务提供者、平台、用户三方责任,覆盖多种造假情形[2] - 需加强监管力度,开展专项治理,建立多部门协同监管体系以形成打击合力[2] - 需升级技术手段,提升高精度检测能力以精准识别造假内容[2] - 治理需与技术发展同步,通过规则、监管、技术同步更新来减少AI造假和公众受骗风险[2]
【西街观察】警惕AI生成的“仅退款”羊毛党
北京商报· 2025-11-18 15:02
行业核心问题 - 电商行业出现利用AI技术伪造商品破损图片以恶意申请“仅退款”的新型欺诈行为 [1] - 该行为破坏了买卖双方诚信为本的交易原则 使商家权益受损 [2] - 此类造假行为多针对单价不高商品 单笔金额虽小但频繁发生 给商家带来显著损失 [1] 欺诈手段与影响 - 欺诈基本套路为使用AI工具对商品照片进行特殊效果处理 例如将化妆品包装瓶P碎 将新鲜蓝莓生成发霉状 将衣物P成破损 [1] - AI生成的伪证精准且几乎零成本 可批量操作 使商家陷入维权成本高于商品价值的困境 [1] - 商家通常要求买家拍照或视频证明商品损坏并销毁商品 但此认证过程被羊毛党利用 [1] 行业应对与监管 - 最新人工智能合成内容标识办法已于9月生效 明确规定不得恶意伪造生成合成内容标识 [2] - 电商平台需加强AI图片识别技术研发与应用 建立更严格审核机制 优化售后服务机制 [2] - 随着“仅退款”纠纷数量持续上升 众多商家已着手调整售后策略 [2] - 用法律规范AI使用以约束买卖双方行为迫在眉睫 [2]
女演员温峥嵘被AI盗播带货,直播间质问反被拉黑,平台该担责吗?
新浪财经· 2025-11-10 07:22
事件概述 - 女演员温峥嵘的AI虚拟形象被不法商家盗用于直播带货 其本人进入直播间质问后遭拉黑 [2] 平台责任与挑战 - 平台需承担事前审核责任 应利用技术手段如数字水印识别AI内容或对明星直播间进行身份核验以防范假账号 [4] - 平台在接到举报后须立即行动 《电子商务法》规定需在24小时内删除侵权内容 否则需对扩大的损害承担责任 [4] - AI造假具有隐蔽性 商家常将标识隐藏或于凌晨时段开播 增加了平台审核与维权的难度 [5] - 部分平台已下架上万条侵权视频 但事件暴露出平台审核存在漏洞 [4] 法律依据与维权路径 - 《民法典》明确禁止利用AI伪造他人肖像及盗用、假冒他人姓名 为明星维权提供了法律基础 [3][4] - 权利人有权通知网络服务提供者采取删除、屏蔽等措施 若平台不配合或商家继续侵权 可走法律途径起诉侵犯肖像权、姓名权乃至名誉权 [2][3] - 监管部门需加大处罚力度 例如北京海淀区曾对冒用央视主持人名义的公司进行处罚 此类案例具有警示作用 [4] - 温峥嵘团队已采取法律行动 发出律师函并一天内举报50个假账号 [3] 行业影响与行动呼吁 - AI盗播事件不仅侵犯明星权益 还可能导致消费者上当受骗 亟待法律和监管介入解决 [2] - 应对AI技术滥用的挑战 需要明星团队加强巡查、平台升级技术进行主动监管 形成集体行动予以遏制 [5] - 根治乱象需明星、平台和监管三方联动 通过责任共享机制保护明星权益并避免消费者受损 [6]
温峥嵘被AI温峥嵘拉黑:AI发展莫要助长“以假乱真”
扬子晚报网· 2025-11-06 06:30
事件概述 - 演员温峥嵘自曝遭遇AI盗播,其本人进入冒用其形象的带货直播间质问后被秒拉黑 [1] - 近期同一时段出现多个使用“温峥嵘”形象带货的直播间,妆发不同但话术一致,导致“很难证明我是我”的困境 [1] - 评论区显示消费者难以辨别直播间真伪,对“xx直播间是温峥嵘吗”及所购商品是否为明星推荐产生困惑 [1] 行业影响与风险 - AI盗播侵犯公众人物肖像权与声音权,误导消费者对商业合作的认知,侵权内容批量生成且账号频繁更换导致维权取证成本高昂 [2] - 消费者基于对明星的信任下单,可能购买到假货,且因责任主体难追溯而维权无门 [2] - 此类乱象正在透支整个数字生态的信任,使正规直播与合法代言受质疑,形成劣币驱逐良币的恶性循环 [2] 监管与技术应对 - 2023年9月施行的《人工智能生成合成内容标识办法》明确要求AI生成内容必须添加显著标识 [2] - 现实中部分商家将标识藏于角落或技术遮挡,平台审核滞后使侵权内容有机可乘,监管与技术落地存在差距 [2] - 破解困局需政策、技术与平台合力:监管应细化标识标准与处罚力度,技术可推广区块链数字身份证与隐式水印,平台需升级多模态审核系统并对未合规内容从严处置 [2] 核心观点 - 技术进步让“以假乱真”变得容易,需用规则与责任划清边界,让AI生成内容“亮明身份”并让侵权行为付出代价 [3] - 规范是AI产业行稳致远的保障,唯有在真实与信任基础上,技术创新才能惠及社会并实现高质量发展 [3]