AI安全

共 30 篇文章

AI安全
OpenAI封禁疑似中国账号,AI生成英文帖与西语文章被查

OpenAI近期封禁了一批疑似中国背景的账户,这些账户利用其AI模型大规模生成英文和西班牙语内容,涉嫌舆论操纵和虚假信息传播。事件揭示了AI技术被滥用的风险,引发对内容监管、地缘政治及网络安全的讨论。OpenAI已加强安全检测机制,但专家指出,AI驱动的信息污染已成为全球挑战,未来需建立全球性AI治理框架以防范恶意利用。

AI安全
Cyber threat actors: AI-assisted intrusion researc

在人工智能技术飞速发展的今天,其安全性问题再次成为全球关注的焦点。近日,美国人工智能研究公司OpenAI(开放人工智能公司)采取了一项重要行动,封禁了一批可能与朝鲜(DPRK,即朝鲜民主主义人民共和国)有关联的网络威胁行为者账户。这些账户被怀疑利用OpenAI的AI工具进行网络入侵工具研究、钓鱼攻击、恶意软件开发以及针对加密货币的攻击活动。这一事件不仅揭示了AI技术被滥用的新风险,也引发了业界对AI安全治理的深入思考。

据可靠消息来源,OpenAI此次封禁的账户与公开报道中提到的朝鲜背景威胁组织存在关联。这些威胁行为者被指利用OpenAI的AI平台,探索如何更高效地开发网络攻...

AI安全
OpenAI封禁伊朗关联账号,AI生成内容被用于舆论操控

在人工智能技术飞速发展的今天,其被滥用于信息操纵和虚假宣传的风险正日益成为全球关注的焦点。近日,全球领先的人工智能研究机构OpenAI(开放人工智能公司)采取了一项引人注目的行动,正式封禁了一批与伊朗有关联的账户。这些账户被指控利用其强大的AI工具,如ChatGPT(聊天生成预训练转换器),大规模生成并发布旨在影响国际舆论的虚假文章和社交媒体帖子。这一事件不仅揭示了AI技术在地缘政治博弈中的新型应用方式,也再次敲响了全球科技企业防范AI武器化的警钟。

据OpenAI官方披露的信息,此次被取缔的恶意活动主要涉及两个被标记的实体:IUVM(伊朗伊斯兰革命卫队下属的虚拟媒体单位)和...

AI安全
OpenAI 完成o3-mini模型安全评估:包括外部红队测试与准备框架审查

OpenAI正对其自主研发的o3-mini模型实施全面安全评估,以应对人工智能快速发展带来的技术风险和伦理挑战。此次评估涵盖多层次系统检查、外部红队渗透测试及针对灾难恢复场景的性能模拟,旨在提升模型在医疗等关键领域的应用安全性。评估工作借鉴了OpenAI先前发布的Red Teaming框架,并反映了行业对AI安全的共识——随着ChatGPT等产品广泛应用,用户数据保护和算法潜在误用已成为核心议题。OpenAI此举不仅强化了其技术安全体系,更体现了对负责任创新的承诺,未来或将推动小型化AI解决方案成为市场标准。

AI安全
OpenAI新推理模型助力美国顶尖科学家实现突破性研究

2023年,OpenAI发布先进推理引擎,旨在提升科学家逻辑分析能力。该模型可处理自然语言、识别数据模式并预测结果,预计在生物学等领域广泛应用,并通过全球顶尖机构合作推动药物研发、气候预测等学科突破。近年AI与科学结合加速发展,DeepMind的AlphaFold和OpenAI的ChatGPT等技术已取得显著成果。全球科研投资在AI领域增长约30%,推动更多机构参与竞争,但也需关注算法偏差和伦理挑战等潜在问题。

AI安全
OpenAI多层安全框架如何防范提示工程和越狱攻击?

OpenAI近日公开一份安全框架报告,系统性阐述其应对人工智能模型滥用的策略。该机构通过整合多层次防护措施,包括在训练阶段加入安全约束、采用限制性设计降低prompt manipulation风险,并通过预置安全规则及监控机制防范越狱行为。OpenAI还引入外部红色团队测试与持续的安全评估,以验证策略有效性并适应不断变化的威胁环境。报告强调公司对安全问题的长期承诺,表明其正随着AI技术发展不断迭代完善现有框架,并将这些努力视为推动整个行业安全标准提升的重要举措。在生成式AI广泛应用的背景下,OpenAI此举不仅展示了技术防护能力,也为构建可信的人工智能生态系统提供了参考。

AI安全
揭开AI Operator面纱:全新模型引领技术变革

DeepMind团队开发的新系统「Operator」正革新云计算行业。该算法通过自然语言交互与分布式计算结合,无需传统编程方式即可执行复杂任务,在蛋白质结构预测、量子电路模拟等领域表现优异。其核心突破在于构建统一的计算中介网络,提升了任务处理效率和准确率,并解决了多领域AI模型兼容难题。此外,系统采用零次隐私计算框架,在保护数据安全的同时实现高效协作。业界专家指出,Operator正推动云计算从算力节点向智能协同比例转变,并引发传统云服务商的技术路线调整,未来可能重塑AI与计算架构的融合发展格局。

AI安全
德国贝塔斯曼将OpenAI技术整合至全球品牌

全球知名传媒集团贝塔斯曼宣布整合美国AI企业OpenAI的技术,以提升旗下新闻、出版及教育服务的智能化水平。贝塔斯曼正在经历数字化转型,希望通过这一合作优化运营效率并增强在全球竞争中的优势。OpenAI是机器学习领域的创新先锋,其生成式AI技术已在多个场景中展示潜力。此次整合标志着贝塔斯曼在应对市场变化时采取关键举措,但也需关注数据隐私合规性和潜在的就业影响等问题。

AI安全
AI模型在推理效率与对抗稳健性之间如何权衡?

随着人工智能在人脸识别、自动驾驶等领域的广泛应用,模型面临的对抗性攻击风险日益增加。传统机器学习模型在面对精心设计的扰动数据时往往难以防御,导致业内开始关注'推理时间计算与对抗鲁棒性权衡'的问题。这一策略主张在模型的推理阶段增加计算资源以提升安全性,与传统的'Defensive Distillation'方法形成对比。支持者认为这种方法具有更强的泛化能力,但批评者指出其可能导致严重的运行时延问题。当前业界对这一权衡策略存在争议,研究人员正在探索包括随机化防御和模型结构改进在内的多种解决方案。随着AI技术的发展与应用范围的扩大,如何在安全性、效率和成本之间找到最佳平衡点成为企业和学术界面临的紧迫挑战。

AI安全
OpenAI发布o1模型新对齐策略:直接教授安全规范与推理能力

随着人工智能快速发展,大型语言模型的安全性问题日益突出。全球多家科技巨头近期公布的AI技术路线图中,一项名为'Deliberative Alignment'的策略引起关注。该方法旨在通过直接教授安全规范并结合推理能力来构建更稳健的语言模型,从而将安全性融入早期开发阶段而非事后补救。