From b38499e6802588686296b2055acbd915a85e267a Mon Sep 17 00:00:00 2001 From: jerrywgz Date: Mon, 29 Jul 2024 22:45:55 +0800 Subject: [PATCH] update doc --- README.md | 4 ++-- docs/CHANGELOG.md | 4 ++-- 2 files changed, 4 insertions(+), 4 deletions(-) diff --git a/README.md b/README.md index 12ba948c8..49575785f 100644 --- a/README.md +++ b/README.md @@ -20,8 +20,8 @@ PaddleMIX是基于飞桨的多模态大模型开发套件,聚合图像、文 ## 最新进展 **2024.07.25 发布PaddleMIX v2.0** -* 多模态理解:新增QwenVL-vl,LLaVA等;新增Auto模块统一SFT训练流程;新增mixtoken训练策略,SFT吞吐量提升5.6倍。 -* 多模态生成:发布[PPDiffusers 0.24.1](./ppdiffusers/README.md)版本,支持视频生成能力,文生图模型新增LCM。新增peft,accelerate后端。提供基于飞桨开发的ComfyUI插件。 +* 多模态理解:新增LLaVA系列,Qwen-VL等;新增Auto模块统一SFT训练流程;新增mixtoken训练策略,SFT吞吐量提升5.6倍。 +* 多模态生成:发布[PPDiffusers 0.24.1](./ppdiffusers/README.md)版本,支持视频生成能力,文生图模型新增LCM。新增飞桨版peft,accelerate后端。提供基于飞桨开发的ComfyUI插件。 * 多模态数据处理工具箱[DataCopilot](./paddlemix/datacopilot/):支持自定义数据结构,数据转换,离线格式检查;支持基本的统计信息,数据可视化功能。 **2023.10.7 发布 PaddleMIX v1.0** diff --git a/docs/CHANGELOG.md b/docs/CHANGELOG.md index 2d8034158..f1ead4f98 100644 --- a/docs/CHANGELOG.md +++ b/docs/CHANGELOG.md @@ -6,9 +6,9 @@ #### 多模态理解 -1. 新增模型:Qwen-vl,LLaVA: v1.5-7b, v1.5-13b, v1,6-7b,CogAgent, CogVLM +1. 新增模型:LLaVA: v1.5-7b, v1.5-13b, v1,6-7b,CogAgent, CogVLM, Qwen-VL, InternLM-XComposer2 2. 数据集增强:新增chatml_dataset图文对话数据读取方案,可自定义chat_template文件适配,支持混合数据集 -3. 工具链升级:新增Auto模块,统一SFT训练流程,兼容全参数、lora训练。新增mixtoken训练策略,SFT吞吐量提升5.6倍。支持QwenVL,LLaVA推理部署,较torch推理性能提升2.38倍 +3. 工具链升级:新增Auto模块,统一SFT训练流程,兼容全参数、lora训练。新增mixtoken训练策略,SFT吞吐量提升5.6倍。支持Qwen-VL,LLaVA推理部署,较torch推理性能提升2.38倍 #### 多模态生成