跳到正文

#Hugging Face

今日 0 条
5月6日周五
5月4日周三
5月2日周一
4月28日周四
  1. Hugging Face Blog26

    使用 Kili 和 HuggingFace AutoTrain 构建文本分类主动学习流程

    文章演示了结合 Kili 标注平台与 HuggingFace AutoTrain 构建文本分类的主动学习流程。以 Medium 应用商店约 40130 条用户评论为例,通过定义订阅、内容等类别进行数据清洗与模型训练。该方案利用 AutoTrain 自动化超参数优化及 SOTA Transformer 模型生成,实现高效的用户情感分析。

4月26日周二
4月25日周一
4月22日周五
4月13日周三
  1. Hugging Face Blog18

    Hugging Face 机器学习专家 Lewis Tunstall:谈《NLP with Transformers》与模型优化

    Hugging Face 工程师 Lewis Tunstall 在播客中分享其合著书籍《NLP with Transformers》及开源贡献经历。他介绍了利用 ONNX 格式导出 PyTorch 模型以优化推理延迟和提升吞吐量的技术实践。Lewis 还回顾了从理论物理学家转型 ML 工程师并参与 transformers 库开发的职业历程。

4月12日周二
  1. Hugging Face Blog33

    Habana Labs 与 Hugging Face 合作加速 Transformer 模型训练

    Habana Labs 与 Hugging Face 宣布合作,通过集成 SynapseAI 软件套件与 Optimum 开源库,使开发者仅需少量代码即可在 Gaudi 处理器上加速 Transformer 模型训练。Habana Gaudi 解决方案提供比同类方案低 40% 的性价比,并支持从单卡到数千卡的系统扩展。该合作旨在为自然语言处理、计算机视觉等任务提供更高效、易用的训练工具集。

4月5日周二
  1. Hugging Face Blog38

    Hugging Face Transformers 为何违背 DRY 原则采用单模型文件策略

    Hugging Face Transformers 库刻意违背“不要重复自己”(DRY)原则,转而采用“单模型文件策略”,将模型前向传播所需的所有代码集中在一个文件中。这一设计旨在降低开源社区贡献门槛、提升代码可读性,并适应机器学习领域快速演进且模型架构静态的特性,避免中心化抽象带来的维护复杂性。

3月28日周一
3月23日周三
3月22日周二
  1. Hugging Face Blog12

    Hugging Face 宣布启动 AI 研究驻留项目

    Hugging Face 推出为期 9 个月的 AI 研究驻留项目,旨在培养具有社会影响力的机器学习研究人员。参与者将与科学团队合作,以开放协作方式开发新技术并发表论文。该项目仅接受全职申请,无需搬迁,截止日期为 2022 年 4 月 3 日。

3月17日周四
3月16日周三
3月11日周五
3月2日周三
2月11日周五
2月2日周三
2月1日周二
1月25日周二
1月21日周五
  1. Hugging Face Blog28

    Hugging Face Hub 集成 Stable-Baselines3

    Hugging Face 将 PyTorch 深度强化学习库 Stable-Baselines3 集成至 Hugging Face Hub,支持用户托管和加载社区模型。开发者可通过 `huggingface_hub` 和 `huggingface_sb3` 库轻松下载如 PPO 等预训练智能体或上传自训模型。后续计划扩展 RL-baselines3-zoo 并集成其他强化学习库。

1月13日周四
1月12日周三
  1. Hugging Face Blog42

    🤗 Transformers 集成 pyctcdecode 实现 Wav2Vec2 与 n-gram 语言模型联合解码

    🤗 Transformers 现已支持通过 Kensho Technologies 的 pyctcdecode 库,将微调后的 Wav2Vec2 模型与 n-gram 语言模型结合进行音频解码。该功能解决了此前缺乏简单用户界面以利用外部语言模型提升转录准确性的问题,特别适用于仅使用少量标注数据(如 10 分钟)训练的场景。

1月11日周二
12月23日周四
12月21日周二
  1. Hugging Face Blog52

    Hugging Face 宣布收购 Gradio

    Hugging Face 正式收购开源机器学习演示库 Gradio。Gradio 联合创始人 Abubakar Abid 表示,此次合作旨在进一步降低机器学习门槛,让任何拥有浏览器的人都能轻松构建、分享和使用模型演示。自 2019 年发布以来,Gradio 已支持创建超过 30 万个演示项目,覆盖文本、语音和视频等领域。

12月15日周三
  1. Hugging Face Blog53

    Hugging Face Transformers 集成 Perceiver IO 全模态模型

    Hugging Face 宣布将 Perceiver IO 加入 Transformers 库,这是首个支持文本、图像、音频、视频和点云等多种模态及其组合的 Transformer 基神经网络。该模型通过在潜在变量上执行自注意力机制,解决了传统 Transformer 在高维数据上的计算和内存扩展性限制。文中展示了其在光学流预测、图像分类及多模态自动编码等任务中的具体实现代码与性能表现。

12月8日周三
  1. Hugging Face Blog42

    Hugging Face 从零训练 CodeParrot 🦜 指南

    Hugging Face 发布教程,指导用户从零开始训练名为 CodeParrot 的 Python 代码生成模型。该模型基于 GPT-2 large 架构(1.5B 参数),利用清洗后的 50GB GitHub Python 数据集进行训练。通过自定义 Tokenizer 和 🤗 Accelerate 库,开发者可复现类似 GitHub Copilot 的代码自动补全功能。

12月2日周四
11月30日周二
11月29日周一
11月19日周五
11月15日周一
  1. Hugging Face Blog40

    使用 🤗 Transformers 微调 XLS-R 进行低资源 ASR

    Hugging Face 发布教程,演示如何使用 🤗 Transformers 微调 XLS-R(Wav2Vec2-XLS-R-300M)进行低资源自动语音识别。该模型基于近50万小时128种语言数据预训练,参数规模达3亿至20亿。教程以 Common Voice 数据集为例,采用 CTC 算法和 WER 指标评估,展示了从数据准备到 Hub 上传的完整流程。

11月4日周四
10月26日周二
10月25日周一
  1. Hugging Face Blog35

    Hugging Face 社区周项目:使用 10 亿训练对与 TPU v3-8 训练 SOTA 句子嵌入模型

    Hugging Face 在“用 10 亿训练对训练最佳句子嵌入模型”项目中开发了 state-of-the-art 句子嵌入模型。该项目利用 7 个 TPU v3-8 和 JAX/Flax 框架,采用对比学习及 Multiple Negative Ranking Loss 进行训练。通过优化批次大小、引入 hard negatives 及使用缩放余弦相似度,显著提升了模型性能。