OpenAI 封禁“Bad Grammar”俄关联 Telegram 评论活动账号
OpenAI 封禁了与名为“Bad Grammar”的俄罗斯关联行动相关的账户。该行动利用 AI 生成关于乌克兰、摩尔多瓦、波罗的海及美国政治的英语和俄语 Telegram 评论。
OpenAI 封禁了与名为“Bad Grammar”的俄罗斯关联行动相关的账户。该行动利用 AI 生成关于乌克兰、摩尔多瓦、波罗的海及美国政治的英语和俄语 Telegram 评论。
OpenAI 封禁了与俄罗斯“Doppelganger”行动相关的账户,该行动利用 AI 生成反乌克兰的社交媒体评论、翻译及多语言网站文案。
Hugging Face 通过自定义推理处理器在 Inference Endpoints 上集成 Whisper ASR、Pyannote 说话人分离及推测解码。该方案利用 PyTorch 2.2 Flash Attention 加速,支持单 API 端点调用多模型组合。用户可配置助手模型以启用推测解码,需满足特定架构与 batch size=1 限制。
OpenAI 封禁了与伊朗起源的“IUVM”影响力内容网络相关的账户。该网络利用 AI 生成和翻译支持伊朗、反对以色列及美国的网站内容。
OpenAI 宣布已阻止一个名为“Disruptive Cyber Group”的团体利用其模型进行虚假宣传活动。该组织被指试图通过自动化手段大规模生成误导性内容以操纵舆论,OpenAI 通过内部监控机制识别并切断了相关账户的使用权限。
OpenAI 封禁了与名为“Zero Zeno”的以色列关联行动相关的账户。该行动利用 AI 生成反哈马斯、反卡塔尔、亲以色列、反 BJP 及支持 Histadrut 的内容。
Hugging Face 联合 Dottxt 提出通过结构化生成解决 LLM 评估对提示格式敏感的问题。实验显示,同一模型在 MMLU 任务中因提示格式微调导致准确率波动高达 10 分,如 Qwen1.5-7B 从 51.2% 降至 22.9%,且 few-shot 样本顺序也会引入约 3 分的差异。
OpenAI 宣布将《金融时报》的新闻内容接入 ChatGPT。双方还将合作为 FT 读者开发新的 AI 体验。
Hugging Face 发布 StarCoder2-15B-Instruct-v0.1,这是首个采用完全宽松且透明管道训练的自对齐代码 LLM。该模型利用 StarCoder2-15B 自身生成指令和响应进行微调,在 HumanEval 上取得 72.6 分,超越了 CodeLlama-70B-Instruct。
推荐理由:展示了完全自对齐的代码模型训练流程,提供了无需蒸馏专有模型即可达到高性能的开源方案。
OpenAI 通过官方新闻渠道发布了关于其产品服务的更新公告。该消息由 OpenAI News RSS 源提供,标志着官方对现有产品线状态的正式通报。
OpenAI 宣布加速挽救生命的治疗方案开发。该举措旨在利用 AI 技术推动医疗领域的创新与突破,缩短新药研发周期并提升治疗效率。
OpenAI 面向 API 客户新增多项企业级功能,重点强化安全特性与控制权限。此次更新涵盖 Assistants API 的改进及更精细的成本管理工具,旨在提升企业用户的安全合规性与运营效率。
Hugging Face 发布 Open Chain of Thought Leaderboard,通过计算准确率增益(Δ = CoT准确率 - 无CoT准确率)评估LLM生成思维链的能力。该榜单基于LogiQA和LSAT等AGIEval任务,采用Classic与Reflect两种提示策略生成推理轨迹,旨在更稳健地衡量模型推理效能并抵抗训练数据污染。
Hugging Face 推出 Jack of All Trades (JAT) 项目,发布首个用于训练通才代理的数据集及基于 GPT-Neo 的多模态 Transformer 模型。该模型在 Atari、BabyAI 等 157 个任务上平均达到专家性能的 65.8%,其中 BabyAI 得分高达 99.0%。
OpenAI 提出“指令层级”方法,旨在训练大语言模型优先遵循系统级特权指令。当前 LLM 易受提示注入和越狱攻击,导致原始指令被恶意覆盖。该方案通过区分指令优先级,增强模型对对抗性攻击的防御能力。
Hugging Face 发布 Open Medical-LLM Leaderboard,通过 MedQA、MedMCQA 等数据集以准确率评估 LLM 在医疗问答中的表现。该榜单旨在解决 GPT-3 等模型在医疗场景下可能产生严重错误的问题,推动更可靠的医疗 AI 发展。
Meta 正式发布 Llama 3 系列开源大语言模型,包含 8B 和 70B 两种参数规模,均提供基础版和指令微调版。该模型采用新 tokenizer 将词汇表扩展至 128,256,并在超过 15 万亿 tokens 的数据上进行了预训练。
推荐理由:原文详细列出了 Llama 3 的模型规格、训练数据量及在 Hugging Face 生态中的集成方式,为开发者提供了从本地部署到云端推理的具体技术路径。
Mistral AI 发布最新开源模型 Mixtral 8x22B,采用稀疏混合专家(SMoE)架构,总参数 141B 但仅激活 39B。该模型支持英法意德西五种语言,具备函数调用能力,拥有 64K tokens 上下文窗口,并以最宽松的 Apache 2.0 许可证发布。在 MMLU、HumanEval 等基准测试中,其性能超越其他开源权重模型,且推理速度优于任何稠密 70B 模型。
推荐理由:官方详细披露了 Mixtral 8x22B 的稀疏激活参数、多语言基准表现及 Apache 2.0 许可,为评估其成本效率与开源价值提供了一手数据。
Gradio 推出 reload mode,通过 `gradio app.py` 启动即可在不重启服务器、不重新加载模型的情况下实时预览 UI 变更。该模式利用 `if gr.NO_RELOAD:` 标记保护模型加载逻辑,解决了传统开发中因重载导致的延迟问题。
Zama 利用 Hugging Face Endpoints 和自定义推理处理器,实现 Concrete ML 全同态加密(FHE)模型的云端一键部署。用户可通过 CPU 实例运行预编译模型,在数据加密状态下完成推理以保障隐私。该方案目前依赖 Python 3.10 环境,支持 scikit-learn、PyTorch 等框架的模型转换与调用。
Hugging Face 推出基于 LiveCodeBench 的排行榜,该基准由 UC Berkeley、MIT 和 Cornell 开发,通过按发布时间窗口评估防止数据污染。它涵盖代码生成、自我修复、执行及测试输出预测四个场景,使用 Pass@1 指标衡量能力。GPT-4-Turbo 在多数场景表现最佳,Claude-3-Opus 则在测试输出预测中超越前者。
Ryght 正式发布 Ryght Preview,这是一个面向生命科学领域的企业级生成式 AI SaaS 平台。该团队通过 Hugging Face Expert Support 获得技术咨询,利用 Text Generation Inference (TGI) 和 Text Embeddings Inference (TEI) 构建支持可插拔 LLM 的架构。
Hugging Face 正式发布 Idefics2,这是一个拥有8B参数的通用多模态模型,支持文本与图像混合输入及生成。该模型采用 Apache 2.0 许可证开源,显著增强了 OCR 能力,并在 Visual Question Answering 等基准测试中表现优于同尺寸模型,甚至可与 LLava-Next-34B 等更大模型竞争。
推荐理由:Idefics2 以8B参数和Apache 2.0协议开源,在视觉问答基准上表现优异并简化了微调流程,为社区提供了强大的多模态基础。
OpenAI 宣布在亚洲设立首个办公室,并推出针对日语优化的 GPT-4 定制模型。
Hugging Face 发布指南解析视觉语言模型(VLM)架构,涵盖 LLaVA、Qwen-VL 等开源模型的推理与微调方法。文章介绍利用 Vision Arena 和 Open VLM Leaderboard 进行模型选型,并支持通过 trl 库的新版本实现高效微调。
Hugging Face 联合 Google Cloud 发布“Deploy on Google Cloud”集成,允许开发者通过 Vertex AI 或 GKE 将数千个基础模型部署为 API Endpoint。
Google 发布 CodeGemma 系列开源代码大模型,包含 2B 基础版、7B 基础版和 7B 指令微调版,均基于 Gemma 架构并额外使用 5000 亿 token 进行训练。
推荐理由:原文给出了 CodeGemma 三个版本的训练数据、上下文长度及在 HumanEval 等基准上的表现,读者可据此评估其在代码补全和对话场景中的实际能力。
Klarna 部署的 AI 助手已能完成相当于 700 名全职客服的工作量。该 AI 系统正被用于革新个人购物、客户服务及员工生产力。
Hugging Face 宣布与云安全公司 Wiz 合作,集成其漏洞管理和 CSPM 功能以强化平台安全。Wiz 研究人员发现利用 pickle 文件在沙箱执行任意代码的缺陷,Hugging Face 已修复该问题并推广 Safetensors 作为替代方案。
OpenAI 为微调 API 新增功能,帮助开发者更精细地控制微调过程。同时宣布推出构建自定义模型的新方式,进一步扩展其自定义模型计划。
MotherDuck 与 Numbers Station 推出专为 DuckDB SQL 设计的 LLM 模型 DuckDB-NSQL-7B,基于 Meta Llama-2-7b 微调。
Hugging Face 展示如何利用 🤗 Optimum Intel 将 SetFit 模型在 Intel Xeon CPU 上的推理速度提升 7.8 倍。该方案采用静态后训练量化(PTQ),仅需少量无标签校准数据即可降低内存占用并保留精度,无需重新训练。这为基于 Sentence Transformers 的少样本微调框架提供了生产级部署的高效路径。
Harvey 与 OpenAI 合作,为法律专业人士构建定制训练模型。该举措旨在通过专门优化的 AI 能力满足法律行业的特定需求。
Hugging Face 与 Cloudflare 合作推出 Deploy on Cloudflare Workers AI 集成,允许开发者通过无服务器 API 调用 Llama、Mistral 等开源模型。
Oscar 将 AI 引入健康保险领域,旨在降低成本并改善患者护理。
OpenAI 调整策略,允许用户在不注册账号的情况下直接体验 ChatGPT。这一变化旨在降低使用门槛,让大众能更便捷地感受 AI 带来的益处。
OpenAI 分享了用于创建自定义语音的模型 Voice Engine 在小规模预览阶段的经验教训。该文章旨在探讨合成语音技术当前面临的挑战以及潜在的发展机遇。
Zelma 使用 GPT-4 让教育数据更易于访问。
OpenAI 自上月向公众推出 Sora 以来,一直与艺术家合作以探索该模型如何辅助其创作流程。
Pollen Robotics 发布开源库 Pollen-Vision,集成 OWL-VIT、Mobile Sam 和 RAM 等零样本模型,实现无需训练的 3D 物体检测。该库支持在消费级 GPU 上实时运行,例如 RTX 3070 处理单提示帧耗时约 75ms,旨在通过提供空间坐标助力机器人抓取未知物体。