马恩岛警察局(Isle of Man Constabulary)警告称,儿童使用人工智能(AI)制作的深度伪造(deepfake)和不雅图片数量"急剧上升"。警方表示,部分学生正在利用AI生成图片来嘲笑、欺凌或报复同龄人,其中一些图片可能构成性犯罪。
学校教育官员路易斯·肯诺(Louise Kennaugh)警官表示,家长和儿童都应该警惕AI滥用的危险,并建议家长对孩子的网络使用习惯要"友好但需要适度监管"。《2021年性犯罪和淫秽出版物法案》(Sexual Offences and Obscene Publications Act 2021)明确规定,任何人不得在没有后果的情况下使用社交媒体和AI创建图片。被判制作或分享不雅AI图片的人可能面临最高三年的监禁。
该法案同时更新了有关报复性色情和偷拍犯罪的法律规定。在性犯罪案件中,嫌疑人和被告在定罪前享有匿名权。肯诺警官指出,该法案的出台填补了针对深度伪造和AI制作不雅图片的法律空白。
肯诺警官的团队发现,学生们会拍摄同学的照片,然后使用AI在照片旁边叠加其他图片,或者让照片中的人看起来在做一些虚假的事情。这种行为已经成为一种报复、惩罚或威胁的手段。虽然AI可以成为包括儿童在内所有人的有用工具,但使用技术制作或分享不雅图片或深度伪造内容的危害极大。
肯诺警官的团队已与岛上学校合作,教导学生了解AI滥用的危险。警方同时呼吁家长积极行动,与年轻人公开讨论AI的负责任使用,以防止造成现实后果的错误。警方发言人强调:"重要的是要提醒孩子们,一旦内容在网上分享,就可能无法收回,图片会迅速传播并被他人保存。"