《用AI犯罪的五种方式亟待防范》

  • 来源专题:人工智能
  • 编译者: 袁晨
  • 发布时间:2024-06-21
  • 人工智能(AI)浪潮正以前所未有的速度推进。这是一个AI新纪元,在AI的帮助下,科研的边界被不断拓宽,解决复杂问题的速度越来越快,但必须警惕:AI也能极大提高犯罪分子的“生产力”。
    安全公司“趋势科技”研究员文森佐·钱卡利尼表示,生成式AI提供了一个新的、强大的工具包,使恶意行为者能够比以往更高效、更国际化地开展活动。
    钱卡利尼说,大多数犯罪分子“并不是生活在黑暗巢穴里密谋行事”,他们中“大多数都是普通人,从事着日常工作”。
    去年的“WormGPT衰落”是一个标志性事件。WormGPT是一种基于开源模型构建的AI语言模型,但它使用恶意软件相关数据进行训练,会协助黑客工作且没有任何道德规则或限制。2023年夏天,在引起媒体高度关注后,该模型的创建者宣布关闭模型。自那以后,网络犯罪分子大多停止开发自己的AI模型,转而借助更可靠的现有工具来“耍花招”。
    这可能是因为,犯罪分子也想更快获得收益且不想承担新技术带来的未知风险。人们对此必须多加注意,以下5种就是目前他们最常用的方式。
    网络钓鱼:诱骗你的私人信息
    瑞士苏黎世联邦理工学院的AI安全研究员米斯拉夫·巴卢诺维奇表示,目前生成式AI最大的滥用就是网络钓鱼,其试图诱骗人们泄露敏感信息,再用于恶意目的。研究发现,在ChatGPT兴起的同时,也伴随着网络钓鱼电子邮件数量大幅增加。
    钱卡利尼表示,GoMail Pro等垃圾邮件生成服务已集成ChatGPT,这使得犯罪用户能翻译或改进发送给受害者的消息。OpenAI的政策限制人们用其产品进行非法活动,但在实践中其实很难监管。
    OpenAI方面表示,他们将人工审核和自动化系统相结合,以识别和防止其模型被滥用,如果用户违反公司政策,则会实施警告、暂停、永久关闭等措施。
    还有一点值得注意,由于AI翻译工具的进步,世界各地犯罪集团的沟通变得更容易,他们可能开展大规模跨国行动,或在本国对其他国家用户采取恶意行动。
    深度伪造:进入地下市场
    生成式AI使深度伪造(Deepfake)的开发发生质变。当前,技术合成的图像或音视频,看起来或听起来比以往任何时候都更加真实,这一点犯罪分子也意识到了。
    钱卡利尼团队发现,已经有用户在电报(Telegram)等平台上展示他们的“深度伪造组合”,并以每张图片10美元或每分钟500美元的价格出售服务。
    相较图片,深度伪造视频制作起来更复杂,而且更容易露出破绽。深度伪造音频的制作成本低廉,只需几秒钟的某人的声音(例如从社交媒体获取),即可生成令人信服的内容。
    这样的诈骗案例并不鲜见,人们接到亲人打来的求救电话,称自己被绑架并要求交付赎金,结果却发现,打电话的人是个使用深度伪造语音的骗子。
    钱卡利尼建议,亲人之间应商定一些秘密安全词并定期更换,这有助于紧急情况下确认电话另一端的人的身份。
    绕过身份检查:一个伪造的“你”
    犯罪分子滥用AI技术的另一种方式是绕过验证系统。
    一些银行和加密货币交易需验证其客户是否本人。他们会要求新用户在手机相机前持身份证拍摄一张自己的照片,但犯罪分子已经开始在电报等平台上销售能绕过这一要求的应用程序。
    他们提供的是伪造或被盗的身份证件,再将深度伪造的图像强加在真人脸上,以欺骗手机相机验证程序。据钱卡利尼发现的一些例子,该服务的价格甚至低至70美元。
    “越狱”式服务:带来危险输出
    如果有人向AI询问如何制造炸弹,那他不会得到任何有用的答复。这是因为大多数AI公司已采取各种保护措施来防止模型泄露有害或危险信息。
    现在,网络犯罪分子不再构建自己的AI模型,这种方式既昂贵、耗时又困难。一种新犯罪趋势开始出现——“越狱”式服务。
    比如上面得不到答案的问题,这显示了模型都有关于如何使用它们的规则。但“越狱”允许用户操纵AI来生成违反这些政策的输出。例如,为勒索软件编写代码,或生成可在诈骗电子邮件中使用的文本。
    为了对抗这些不断增长的风险,OpenAI和谷歌等公司需时时堵塞可能导致紧急危害的安全漏洞。
    人肉搜索和监视:暴露用户隐私
    巴卢诺维奇表示,AI语言模型不仅是网络钓鱼的“完美工具”,对人肉搜索(在线泄露某人的私人身份信息)也是如此。这是因为AI语言模型经过大量互联网数据(包括个人数据)的训练, 可推断出某人位于何处。
    犯罪分子可能会让聊天机器人假装是具有侧写经验的私家侦探,然后让它分析受害者所写的文本,并从文本中的小线索推断出个人信息。例如,根据他们上高中的时间推断他们的年龄,或者根据他们在通勤时提到的地标推断他们的居住地点。互联网上该人的相关信息越多,就越容易被识别。
    巴卢诺维奇团队2023年底发现,大型语言模型,如GPT-4、Llama 2和Claude,已能够仅从与聊天机器人的日常对话中推断出人们的种族、位置和职业等敏感信息。理论上,任何能访问这些模型的人,都能以这种方式使用它们。
    这些服务的存在,并不直接表明犯罪活动的存在,但我们必须看到可供恶意行为者利用的新功能。而防止这些事情发生的唯一方法就是加强防御。
    巴卢诺维奇称,对AI公司来说,应完善数据保护;对个人来说,提高防范意识是关键——人们应三思而后行,考虑他们在网上分享的内容,并谨慎决定,自己是否愿意在语言模型中使用他们的个人信息。

  • 原文来源:http://www.chinasei.com.cn/xxjscy/rgzn/202406/t20240620_73415.html
相关报告
  • 《生态修复市场化亟待政策扶持》

    • 来源专题:长江流域资源与环境知识资源中心 | 领域情报网
    • 编译者:changjiang
    • 发布时间:2018-01-08
    • 作者:马越 陆琦 来源:科学网 www.sciencenet.cn 发布时间:2018/1/2 14:40:20 选择字号:小 中大 . . 生态修复市场化亟待政策扶持. . 一种开着小黄花叫做东南景天的植物如今在石家庄栾城区被大面积种植。这片看起来寻常无异的农区,正在进行着农田修复。 很难想象,这片占地400亩的农田被污水灌溉了50多年, 镉污染严重。2016年底,一家专门从事生态修复的专业化企业利用植物萃取和重金属钝化技术,开始对这片农田进行修复,每年可清除土壤镉达1.8公斤/公顷,土壤将逐渐恢复达到环境质量标准。 近年来,专业化企业在技术研发转化、推广应用以及产学研有效结合等方面承担着主要角色,正成为我国生态修复的主力军。 处在“风口”的生态修复产业 前不久召开的中央经济工作会议指出,加快推进生态文明建设,要实施好“十三五”规划确定的生态保护修复重大工程,引导国企、民企、外企、集体、个人、社会组织等各方面资金投入,培育一批专门从事生态保护修复的专业化企业。 用中国科学院生态环境研究中心副研究员黄锦楼的话来说,具有化腐朽为神奇能力的生态保护修复如今正处于“风口”。 “生态修复非常复杂,每一个地域都有其独特的本体生态环境系统、经济发展水平和产业状况,因此修复项目必须是定制化的,没有统一的标准。”黄锦楼在生态修复领域有着丰富经验,他打了个比方:“这就像医生给患者看病,需要高度专业的调查评估,因地制宜。” 巨大的市场驱动企业参与其中,想要分享生态修复这块大蛋糕。 “有些企业看重生态建设、绿色发展的前景,在参与生态治理过程中可以获利。”中国工程院院士李文华接受《中国科学报》采访时说。 目前,生态修复企业的专业化主要体现在技术优势上,他们在技术研发、转化和推广应用方面做了大量工作,尤其在技术转化上面,目前很多土壤修复企业通过企业收购、技术购买、技术合作或技术参股等形式加强自身技术实力,并快速转化为本企业的技术,实现技术的推广应用,推动了土壤修复的快速发展。 生态修复的主体责任仍待厘清 随着2016年“土十条”发布实施,我国土壤修复迅速发展,土壤修复企业从2010年的10多家增加到1000多家,从业人员从2000人增加到1万多人。目前80%以上的市场份额被大公司占领。这些企业业务范围覆盖场地调查及风险评估、修复工程实施等。 由于生态修复工程资金需求量大,政府希望发挥财政资金撬动功能,带动更多的社会资本参与生态修复。比如,通过政府和社会资本合作(PPP)、发展绿色金融、鼓励符合条件的治理与修复企业发行股票、开展重点行业企业环境保护污染强制责任保险试点等方式鼓励国企、民企、外企等方面资金投入。 “土壤修复领域进展比较缓慢。”北京瑞美德环境修复有限公司副总经理叶勇向《中国科学报》记者坦言,“相对而言,目前PPP模式具有一定前景,该模式在水污染处理、流域治理、区域环境整治等方面的成功经验值得土壤修复借鉴。” 企业过去是污染和被治理的主体,而现在让企业加入到环境保护中来,其难度也是可想而知。 其实,在“土十条”中明确了治理与修复主体,按照“谁污染,谁治理”的原则,造成土壤污染的单位或个人需要承担治理与修复的主体责任。但叶勇直言,这是很被动的,在推动过程中仍有一定困难,比如法律依据不完善、生产企业造成环境污染的证据往往很难收集、企业难以承担治理与修复的费用等。 专业化修复企业大有可为 国家对环境保护的不断重视和人民对环境质量要求的不断提高,倒逼相关企业成为环境保护的主体。 不过,中国科学院生态环境研究中心助理研究员张成龙坦言,生态修复是一项投入大、见效慢的工作,很多企业难以承担环境保护或生态修复所需费用,造成相关工作难以开展。 除此之外,由于生态修复项目的地域性较强,一般由当地政府主导,招投标过程中的地方保护有时会妨碍市场化参与,这些都影响了专业化企业更好地发挥作用。 对此,黄锦楼认为,鼓励社会资本进入生态修复领域,需要更完善的市场机制。不光支持社会资本进入,更要找到帮助它们进入的方法。 他表示,社会资本进来必须有明确的商业模式,且一定要有回报。“可以把单纯花钱的项目转换为投钱的项目,即修复完生态环境,将未来的生态资产转化成经济收入,反哺前期修复投入。不管是建成生态公园、休闲娱乐区域、高端社区,还是修复环境之后发展新的产业,都能打通产业链形成闭环。” 近日,黄锦楼主导创建的易修复生态平台与徐州市政府合作,在徐州建立国家级土地修复产业园区,培养修复领域专业化人才,生产专业监测装备和药剂材料等。一直致力于推动生态修复行业专业化发展的他,对国家下一步具体的生态修复政策充满期待。.
  • 《AI+储能“五大风口”》

    • 来源专题:能源情报网监测服务平台
    • 编译者:郭楷模
    • 发布时间:2025-03-13
    • 自deepseek问世以来,包括五大能源集团、两大电网在内的半数以上能源电力央企接入模型,采日能源等储能企业也相继接入。全球能源转型的齿轮正被AI+储能的深度融合加速转动。 AI+储能,站在风口。 据报道,宁德时代、比亚迪、LG新能源在着手利用AI造电池。当用AI造电池逐步进入现实,AI+储能的风口逐渐显现。2025年,国家能源局印发的《关于加快推进能源数字化智能化发展的若干意见》明确提出,到2030年,能源系统各环节数字化智能化创新应用体系初步构筑、数据要素潜能充分激活。 3月12日,卓阳数字能源正式推出全新AI助手——“卓小阳”。该智能体专为新能源行业设计,旨在通过大模型赋能提升行业效率,优化决策支持。“卓小阳”的核心应用场景包括:行业知识问答,场景解决方案输出,资产收益组合分析,能源电站投资分析等。 在此之前,基于DeepSeek在“融和·白泽”系统下的私有化部署,日电芯监控超2000万颗、日处理信息量达TB级,效率提升超50%;毫秒级故障检测与调度响应,运维成本进一步降低超30%的能力表现,是融和元储以一场“AI+储能”的深度联姻解码了在现如今储能行业波潮涌动情况下的运营新范式。 事实上,自deepseek问世以来,包括五大能源集团、两大电网在内的半数以上能源电力央企接入模型,采日能源等储能企业也相继接入。 包括宁德时代、卓阳数字能源、融和元储、阳光电源、比亚迪、海博思创等企业正利用AI+储能,在电池创新、运营优化、智慧运维等多方面展露“实力”。全球能源转型的齿轮正被AI+储能的深度融合加速转动。 AI+储能将带来哪些风口? AI+储能的风口之下,机遇与挑战如同硬币的两面。 正如宁德时代曾毓群所言:“没有颠覆性的技术突破,就不会有真正的能源革命。”当DeepSeek将AI训练成本降低90%,当华为实现储能系统全生命周期数字化,这场变革已不可逆转。 一是智能运维,储能电站的运维成本占全生命周期成本的30%,而AI正在改写这一经济模型。 阳光电源推出的iSolarBPS系统深度融合电力电子、电化学与AI算法(GeneSafe算法集群),可实时监测电芯健康状态,提前7天预警一致性异常、提前100小时识别内短路风险、提前1小时预判热失控,形成三级主动防御机制。该系统通过五维诊断(数据质量、行为分析、异常老化、故障告警、风险预警)覆盖50+指标,百兆瓦电站1分钟生成诊断报告,精准定位故障至电芯级,运维效率提升30%。 东方日升开发的Risen Cloud系统,通过分析10万+电芯的实时数据,将故障预警准确率提升至98%。这背后是深度学习算法对电池内阻、温差等200+参数的动态建模,使得电芯循环寿命突破10000次。 德国国王湖独立储能电站项目规模为10.35MW/22.36MWh,配备了海博思创 HyperBlock II液冷储能系统。作为海博思创大储类别旗舰产品,HyperBlock II性能卓越,具有成熟度高、安全可靠、低 LCOS、长寿命以及环境适应性强等显著优势。配备海博思创 AI 云平台的自动巡检、远程运维功能,可实现高效预警,及时消除消防隐患。 更颠覆性的变革在于商业模式创新。领储宇能打造的智能运维云平台,已实现“每GWh储能资产运维人力减少70%”,其电芯健康状态预测模型在青海某200MW/400MWh项目中,将意外停机损失降低540万元/年。这种从“卖设备”向“卖服务”的转型,正催生千亿级智慧能源管理市场。 远景能源为英国某200MW储能项目构建的数字孪生体,通过实时仿真预测未来72小时系统状态,使运维响应速度提升至毫秒级。这种“虚实共生”模式,正在重新定义能源资产管理的内涵。 二是电力交易。当光伏出力曲线遇上电力现货市场的价格波动,AI成为最大化收益的关键变量。 某头部储能企业披露,其基于强化学习的交易策略系统,在山东电力市场中将储能套利空间从0.25元/kWh提升至0.38元/kWh。这相当于将20年运营期的项目IRR提高4.2个百分点,彻底改变储能项目的投资逻辑。 清华大学张强教授团队在论文中提到,AI助力储能设备系统优化,清华四川院助力江苏首座AI智慧调控光储充换一体化站建设,率先应用了基于大模型的微电网协同控制技术,成功将光伏消纳率从96.0%提升至99.7%,储能日均放电量提升48.12千瓦时,套利能力提高25.1%,综合收益增长14.07%。 更深层的变革发生在虚拟电厂领域。科华数能开发的源网荷储一体化平台,通过聚合分布式储能资源,在长三角某试点区域实现15秒内完成200MW灵活调节能力调用。 据弘正储能副总经理张鹏介绍,目前该公司数字化团队已开发了具有自学习能力的AI算法体系,依托大量数据训练,预测未来负荷需求、新能源发电功率和电力市场价格等相关数据 ,通过算法模型生成动态调度策略,优化储能参与峰谷套利、辅助服务、电力现货交易和新能源消纳的收益,进一步深挖工商业储能的投资运营价值。 三是,极端环境适应。针对高温、高湿等极端工况,AI可构建“热-电-力”多物理场耦合模型,模拟电芯在极端应力下的失效过程。 例如,清华大学开发的电池热失控模型,在超过500℃的温度范围内对15种电池体系实现高精度预测,为极端环境下安全阈值设定提供依据。 在沙特50℃高温沙漠中,比亚迪MC Cube-T魔方系统以CTS集成技术创造2.6GWh零故障运行记录。其秘诀在于AI驱动的动态热管理系统:384个温度传感器实时调整液冷流速,使电芯温差控制在±1.5℃以内。 更具想象力的是极地储能市场。远景能源为南极科考站定制的AI储能系统,在-60℃环境下仍保持85%以上容量效率。其自研的低温自加热算法,使锂电池在无外部供能情况下实现“冷启动”,这项技术已延伸至俄罗斯北极圈内的微电网项目。 四是,数据中心储能。全球正加速迈入以人工智能、区块链和物联网为核心的算力经济时代,模型对算力的需求正以惊人的速度增长,过去年均增长超400%,远超摩尔定律增长速度。 传统上,数据中心主要使用锂电池作为UPS系统的一部分,在市电中断时提供短暂的备用电力。随着数据中心转向绿电供能,锂电池应用从备电类型向供能类型转变。GGII预计2027年全球数据中心储能锂电池出货量将突破69GWh,到2030年这一数字将增长至300GWh,2024-2030年复合增长率超过80%。 某云服务商采用光储一体化解决方案后,不仅将PUE从1.5降至1.2,更通过AI调度算法将储能系统的峰谷套利收益提升至0.72元/kWh。这标志着储能正从“备用电源”进化为“算力基础设施的核心组件”。 更前沿的探索在于算力-储能联合优化。某企业开发的“算力任务-储能充放电”协同算法,可根据GPU集群的工作负载预测,动态调整储能系统的SOC状态。在训练大模型的波谷时段储能充电,在推理高峰期放电,这种模式使算力中心购电成本降低18%。 五是AI颠覆电池创新。传统锂电材料研发需经历“试错法”迭代,而AI将这一过程压缩数倍。 清华大学陈翔–张强团队利用可解释机器学习方法解释了影响电解液还原稳定性的关键因素,并进一步开发知识与数据双驱动的电解液分子性质预测框架,从数十万分子中预测了29个潜在适用于宽温域和高安全性的电池场景下的分子,为高性能电解液设计和高通量开发提供了指导。 “宁德时代正利用人工智能寻找下一代革命性材料和超越锂离子的化学系统。”早在2024年9月,宁德时代董事长曾毓群在接受挪威主权财富基金主席尼古拉·坦根访谈时谈道,宁德时代拥有超过两万名工程师,致力于基础材料结构研究、模拟分析、材料相互作用探索等工作。据宁德时代研发总监欧阳楚英透露,目前宁德时代开发了电池材料智能化设计平台,基于AI材料智能设计算法,90天内就可完成材料筛选与闭环验证。 比亚迪也在利用AI技术。深圳市比亚迪锂电池有限公司CTO孙华军表示,在材料设计、材料筛选、电池自动化设计以及工艺制造质量管控、电池管理等方面,AI的应用可以提高设计效率,甚至会有产生新材料、新体系的机会。 近日,LG新能源也透露,已着手利用人工智能技术,为客户量身定制电池。 “电池设计正从第二代的仿真驱动,向第三代基于AI的电池智能设计技术方向发展。”中国科学院院士欧阳明高论断指出,电池智能设计技术可将电池研发效率提升1~2个数量级,节省研发费用70%~80%。 在回收领域,AI同样展现魔力。华友钴业建立的退役电池分选系统,通过X射线图像识别和容量预测算法,将梯次利用电池筛选效率大幅提升。这种技术突破,正推动锂电池全生命周期管理进入智能时代。 AI+储能狂欢下的隐忧 据不完全统计,2023年全球储能领域融资规模超过500亿美元,其中AI+储能相关企业融资占比超过30%。国内外科技巨头纷纷布局,如特斯拉的Autobidder平台、宁德时代的AI储能管理系统、阳光电源收购AI上市企业等,进一步推高了市场热度。 但狂欢之下隐忧凸显:AI+储能仍有许多问题亟待解决。一是,技术瓶颈。AI与储能的深度融合尚需突破。AI模型的准确性高度依赖数据质量,而储能系统的数据采集和标准化仍存在不足。此外,现有算法在复杂场景下的适应性有限。AI在储能领域的应用仍处于初级阶段,许多技术尚未经过大规模验证,实际效果存疑。 二是成本压力。AI赋能的高成本与回报周期AI技术的引入需要高昂的研发投入和硬件支持,这对中小型储能企业构成较大压力。短期内,AI+储能的成本优势难以体现,回报周期较长,可能影响企业盈利能力。 三是网络安全难题。AI系统的网络安全问题不容忽视,一旦遭受攻击,可能导致储能系统失控,引发安全事故。储能数据的隐私保护也成为焦点,如何在数据共享与隐私保护之间找到平衡,是行业亟待解决的问题。 四是政策与标准缺失。目前,AI+储能领域缺乏统一的技术标准和行业规范,可能导致市场混乱和技术壁垒。政策支持力度虽大,但具体实施细则和监管机制仍需完善。 一个行业人士提出一个有趣的问题:当AI开始自主决策储能系统的充放电策略,如何界定算法失误的法律责任?欧盟最新发布的《能源AI伦理指南》要求关键决策保留人类干预接口,这或许可为中国相关立法提供镜鉴。 欧阳明高也谈道,DeepSeek在电池知识问答和电池文本挖掘任务上均表现优异,在电池设计任务上具备初步的总结能力,但尚欠缺科学分析能力,仍需要垂直领域大模型解决。 站在2025年的节点回望,AI对储能行业的改造尚处“工具赋能”阶段。而展望2035年,颠覆性趋势可能正在孕育。正如厦门科华数能总裁崔剑所言:“我们不是在改造储能,而是在重塑人类与能量的对话方式。