Paddlenlp

Highlights

New Features

- Trainer新增Memory Tracer 4181
- ERNIE 1.0 支持Ascend NPU 3954
- 新增无监督检索式问答系统 4193
- DynaBert支持动态图export 3549
- 增加信息抽取相关的英语文档 4247

Bug Fix
- 修复带PretrainedConfig的模型属性方面过多的warnings 4264
- 修复ErnieEncoder的PretrainedConfig适配问题 4281
- 修复IE taskflow加载定制模型的config名字问题 4271
- 修复Trainer fp16问题 4283
- 修复AutoTemplate 中的 prefix_dropout参数 4293
- 修复多卡下载config卡住的问题4274

New Features

PPDiffusers
- 新增BIT和DPT模型 4202
- 支持Ascend NPU部署 4217
- ppdiffusers pipelines文档修改升级，新增任务展示，针对ppdiffusers能力进行整理输出；新增audio diffusion推理脚本和权重
新增paint by example推理脚本和权重 4230

Bug Fix
- 修复AutoModel加载legacy config和standard config的问题 4083
- 修复PretrainedConfig带来的向后兼容问题 4237
- 修复GPT模型使用input_embeds的问题 4179
- 修复Trainer多卡时的save问题 4220

New Features

Sentiment Analysis
- 情感分析：3694
- 提供uie-senta系列训练模型，支持语句情感分类，属性抽取，观点抽取等常用情感分析能力
- 支持从输入数据到情感分析结果可视化，助力业务数据分析
- 定制情感分析能力，解决同义属性聚合、隐性观点抽取难题

UIE

- UIE Taskflow支持从HF Hub加载

TextClassification

- 文本分类Taskflow支持多标签预测 3968

FastTokenizer
- 修复FastTokenizer BertNormalizer json实例化bug

Bug Fix
- 修复AutoModel加载legacy config和standard config的问题 4083

Others

- Ernie/ErnieM/ErnieLayout/Bart/MBart/Unified_Transformer/Unimo/CodeGen 等模型迁移使用PretrainedConfig 4118 3769 4170
- 撰写贡献指南contributing.md 4160

New Features

UIE

- 新增UIE-X端到端文档抽取功能，支持Taskflow一键调用，并提供标注、微调及部署的产业级全流程解决方案。 3951

Machine Translation
* 新增数据下载以及全套数据预处理流程，新增数据集自定义接口以及文档说明 3269

PPDiffusers
- 添加FID和CLIP Score的计算代码 3860
- 发布ppdiffusers 0.6.3 3963
- 发布ppdiffusers 0.9.0 3919 4017 4018
- 新增ppdiffusers FastDeploy部署功能 3813

基础底座

- Model以及Tokenizer支持一行代码`.save_to_hf_hub()`上传至Huggingface Hub 3982

Others

- CodeGen文档中新增社区贡献的Jupyter Lab Extension 4002
- 将CodeStyle工具升级为isort, black和flake8. 大规模自动风格格式化 3925

New Features
Prompt API
- 新增 MaskedLMVerbalizer，支持 PET 算法实现。3889
FastTokenizer
- 新增CLIP FastTokenizer 3805
PPDiffusers
- PPDiffusers版的LDM权重转换为原版LDM权重。 3809
- 更新Unet中的attention的实现方式。 3792
Pipelines
- Pipelines新增ERNIE-Search的支持 3906
基础底座
- 新增文本分类专用的Text Classification Taskflow 3841
- 新增完型填空的Fill-Mask Taskflow, 并且直接从Huggingface Hub加载3870
- AutoModel和AutoTokenizer支持直接从Huggingface Hub加载 3786
- Dialogue Taskflow支持直接从Huggingface Hub加载 3865
- 新增 PaddleNLP SimpleServing 功能，支持 Taskflow、预训练模型快速部署 2845
Bug Fix
- 修复`from_pretrained_v2`不能加载FP16模型。3902
- 修复 `Template` 使用 `options` 关键字时无法组 batch 的问题 3889