You can not select more than 25 topics Topics must start with a chinese character,a letter or number, can include dashes ('-') and can be up to 35 characters long.

mindspore.dataset.rst 998 B

123456789101112131415161718
  1. mindspore.dataset
  2. 该模块提供了加载和处理各种通用数据集的API,如MNIST、CIFAR-10、CIFAR-100、VOC、COCO、ImageNet、CelebA、CLUE等,
  3. 也支持加载业界标准格式的数据集,包括MindRecord、TFRecord、Manifest等。此外,用户还可以使用此模块定义和加载自己的数据集。
  4. 该模块还提供了在加载时进行数据采样的API,如SequentialSample、RandomSampler、DistributedSampler等。
  5. 大多数数据集可以通过指定参数`cache`启用缓存服务,以提升整体数据处理效率。
  6. 请注意Windows平台上还不支持缓存服务,因此在Windows上加载和处理数据时,请勿使用。更多介绍和限制,
  7. 请参考`Single-Node Tensor Cache <https://www.mindspore.cn/docs/programming_guide/zh-CN/master/cache.html>`_。
  8. 在API示例中,常用的模块导入方法如下:
  9. .. code-block::
  10. import mindspore.dataset as ds
  11. from mindspore.dataset.transforms import c_transforms