跳到正文

全部动态

今日 11 条
2月8日周四
  1. Hugging Face Blog62

    Hugging Face 为 TGI 推出兼容 OpenAI 的 Messages API

    Hugging Face 为 Text Generation Inference(TGI)和 Inference Endpoints 推出 Messages API,从 1.4.0 版本起提供与 OpenAI Chat Completion API 兼容的接口,可直接配合 OpenAI 客户端库、LangChain 或 LlamaIndex 使用。

    推荐理由:TGI 新增 OpenAI 兼容的 Messages API,读者可据此判断现有 OpenAI 脚本迁移到开源模型的改造成本。

2月3日周六
  1. Hugging Face Blog62

    SegMind 发布 SegMoE:从零构建混合专家扩散模型框架

    SegMind 发布 SegMoE 框架,可从零创建混合专家(MoE)扩散模型,并已集成进 Hugging Face diffusers 生态。同时发布 SegMoE-4x2、SegMoE-2x1 和 SegMoE-SD4x2 三个模型(Apache 2.0 许可)以及配套 GitHub 仓库,用户通过 config.yaml 即可组合任意数量的模型,几分钟内完成构建。

    推荐理由:原文给出从零构建扩散模型 MoE 的完整流程与显存代价,读者可据此判断本地部署门槛。

2月2日周五
2月1日周四
  1. Hugging Face Blog62

    Hugging Face 发布用开源模型实现 Constitutional AI 的完整配方

    Hugging Face 发布了一套用开源模型实现 Constitutional AI(CAI)的端到端配方,并开源了 llm-swarm 工具,用于在 GPU Slurm 集群上基于 TGI 和 vLLM 进行可扩展的合成数据生成。

    推荐理由:Hugging Face 给出用开源模型复现 Constitutional AI 的完整配方,含数据集、模型与 Slurm 集群推理工具,可迁移到自定义对齐流程。

1月31日周三
1月30日周二
1月29日周一
1月26日周五
1月25日周四
1月24日周三
1月19日周五
1月18日周四
1月16日周二
1月15日周一
1月14日周日
1月12日周五
1月10日周三
  1. OpenAI News62

    OpenAI 推出 ChatGPT Team 团队版

    OpenAI 推出面向各类规模团队的 ChatGPT 新套餐 ChatGPT Team,提供安全、可协作的工作空间,帮助团队在工作中充分利用 ChatGPT。

    推荐理由:OpenAI 面向各类规模团队推出 ChatGPT 团队版,提供安全协作工作空间,可据此了解其企业协作定位。

  2. Hugging Face Blog72

    Unsloth 与 TRL 集成:LLM 微调提速 2 倍、显存降低 40%

    Hugging Face 博客介绍社区开发的轻量库 Unsloth,与 transformers、PEFT、TRL 完全兼容,可将 LLM 微调速度提升约 2 倍、显存占用降低约 40%,且相对标准 QLoRA 精度损失为 0%。

    推荐理由:原文给出 Unsloth 与 TRL 集成的实测加速与显存数据,读者可据此判断微调成本能降到什么程度。

1月8日周一
1月4日周四
1月2日周二
  1. Hugging Face Blog62

    Hugging Face 发布 SDXL Dreambooth LoRA 进阶训练脚本

    Hugging Face 发布新的 diffusers SDXL Dreambooth LoRA 训练脚本,把 Pivotal Tuning 与 Prodigy 优化器结合,并整合文本编码器独立学习率、自定义 caption、Min-SNR gamma、repeats 等社区实践。

    推荐理由:汇总 SDXL Dreambooth LoRA 微调的社区最佳实践,并给出可直接运行的 diffusers 训练脚本与参数配置。

12月20日周三
12月18日周一
12月14日周四
12月13日周三
12月11日周一
  1. Mistral AI88

    Mistral AI 发布开源稀疏 MoE 模型 Mixtral 8x7B

    Mistral AI 发布 Mixtral 8x7B,一个采用 Apache 2.0 许可、开放权重的稀疏混合专家(SMoE)模型,同时发布经监督微调和 DPO 优化的 Mixtral 8x7B Instruct。

    推荐理由:Mistral 放出 Apache 2.0 的稀疏 MoE 权重,并给出与 Llama 2 70B、GPT3.5 的对比,便于判断开源模型的成本性能取舍。

12月6日周三

最多提供 50 页,更早的内容请使用搜索或主题页。