全链条斩断一网络水军黑手,涉案金额达2亿余元;|新型越狱攻击可突破ChatGPT、DeepSeek等主流AI服务防护

华盟原创文章投稿奖励计划

重要!!!2025HW招募,加V:Hacker-ED

详情请点击:

重要!2025HW招募!

全链条斩断一网络水军黑手,涉案金额达2亿余元;

文章转发量不够、曝光率太低、无人问津

怎么办?

这时,一则广告映入眼帘

“转发*万个*元、点赞*万个*元”

花钱买流量?

催生了一个新型产业

——网络水军


自动草稿


近日,公安网安部门重拳出击,侦破一起特大“刷量引流”网络水军案件。

广告顺线追踪,厘清犯罪脉络




公安网安部门在工作中发现,一条“转评赞”的广告在互联网群组内广泛传播。进一步侦查发现,广告的背后是一个利用刷量控评,收费获利的“网络水军”团伙。该团伙分工明确、组织紧密、窝点众多,业务遍布全国各地。

自动草稿

梳理组织架构,锁定团伙成员




经梳理研判,该团伙以胡某为首,利用购买水军账号,在国内某知名社交平台上转发、散布多篇文章,以此进行牟利。该犯罪团伙的行为严重危害了正常的社会经济秩序。

自动草稿


立即部署作战,雷霆出击收网




公安机关对全国多个窝点的犯罪嫌疑人实施统一抓捕行动,一举捣毁窝点6个,抓获犯罪嫌疑人23名,收缴作案手机、电脑6000余部,查获水军账号3万余个,涉案金额达2亿余元。斩断了一条涉及网络水军、平台号商、群控软件技术、网络链路平台、中介掮客等多环节的违法犯罪产业链条。

自动草稿


网警提醒






自动草稿

维护清朗网络空间,让“网络水军”无处遁形,需要我们每一位网民保持清醒的头脑,不做虚假流量背后的“数字傀儡”。




自动草稿

华盟信安网络安全就业班火热招生中!!!

详情请点击下方链接:

【零基础高薪直通车】渗透测试工程师训练营

4月底5月初班期正在报名中!!!!!

自动草稿





新型越狱攻击可突破ChatGPT、DeepSeek等主流AI服务防护

研究人员最新发现的两项越狱技术暴露了当前主流生成式AI服务的安全防护存在系统性漏洞,受影响平台包括OpenAI的ChatGPT、谷歌的Gemini、微软的Copilot、深度求索(DeepSeek)、Anthropic的Claude、X平台的Grok、MetaAI以及MistralAI。
这些越狱攻击可通过几乎相同的提示词在不同平台上执行,使攻击者能够绕过内置的内容审核和安全协议,生成非法或危险内容。其中名为"Inception"的技术利用嵌套虚构场景侵蚀AI的伦理边界,另一种技术则诱导AI透露其禁止响应内容后转向非法请求。

01

系统性越狱:

"Inception"与上下文绕过技术


近期出现的两种高效越狱策略利用了大型语言模型(LLM)设计和部署中的基础性弱点。其中"Inception"技术通过让AI想象嵌套虚构场景,逐步引导对话至通常会被安全过滤器拦截的请求。攻击者利用AI的角色扮演能力和多轮对话上下文保持特性,诱使模型生成违反伦理和法律准则的内容。


第二种技术通过询问AI"不应如何响应特定请求"来获取其内部防护规则信息。攻击者随后交替使用正常和非法提示词,利用AI的上下文记忆绕过安全检查。CERT公告指出,这两种方法都利用了AI的基础设计特性:乐于助人的驱动、上下文保持能力以及对语言和场景框架细微操纵的敏感性。


02

行业影响与潜在风险


这些越狱技术具有严重危害,攻击者可借此指示AI系统生成涉及管制物质、武器、钓鱼邮件、恶意软件等非法内容。虽然单个越狱风险等级可能较低,但其系统性漏洞特性显著放大了整体风险。恶意攻击者可能利用这些弱点大规模自动化生成有害内容,甚至将合法AI服务作为活动掩护。


主流平台的普遍受影响现状表明,当前AI安全和内容审核方法难以应对攻击者不断演变的战术。随着生成式AI在客服、医疗、金融等领域的广泛应用,成功越狱可能造成严重后果。


03

厂商响应与行业挑战


深度求索(DeepSeek)承认报告但表示这属于传统越狱而非架构缺陷,称AI提及的"内部参数"和"系统提示"属于幻觉而非真实信息泄露。其他厂商虽未公开声明,但据称正在进行内部调查和更新。


专家强调,事后防护栏和内容过滤器仍是AI安全的重要组成部分,但并非万无一失。攻击者持续开发角色注入(character injection)和对抗性机器学习规避(adversarial machine learning evasion)等新技术来利用审核系统盲点。随着生成模型能力提升和广泛应用,AI开发者与攻击者之间的攻防对抗预计将愈演愈烈。


安全研究人员David Kuzsmar和Jacob Liddle分别发现了"Inception"技术和上下文绕过方法,Christopher Cullen记录了他们的研究成果。这些发现促使行业重新审视AI安全协议,亟需建立更强大、自适应的防御机制。随着生成式AI加速融入日常生活和关键基础设施,保护这些系统免受创造性持续攻击的挑战正变得日益复杂。


文章来源 :公安部网安局、freebuf

精彩推荐

乘风破浪|华盟信安线下网络安全就业班招生中!

自动草稿


【Web精英班·开班】HW加油站,快来充电!

自动草稿


始于猎艳,终于诈骗!带你了解“约炮”APP

自动草稿

本文来源公安部网安局、freebuf,经授权后由华盟君发布,观点不代表华盟网的立场,转载请联系原作者。

发表回复