Le_zon的博客

原创 MindSpore社区活动-深度学习模型之数据变换-Transforms学习与体验记录

在使用Lookup前，需要构造词表，一般可以加载已有的词表，或使用Vocab生成词表。配合map，将三段文本进行分词，可以看到处理后的数据成功分词。此模块用于通用数据增强，其中一部分增强操作是用C++实现的，具有较好的高性能，另一部分是基于Python实现，使用了NumPy模块作为支持。此模块用于图像数据增强，其中有一部分增强是基于C++ OpenCV实现的，具有较好的性能，而另一部分是基于Python Pillow实现的。transforms 是一个高性能文本数据增强模块，支持常见的文本数据增强处理。