You can not select more than 25 topics Topics must start with a chinese character,a letter or number, can include dashes ('-') and can be up to 35 characters long.

mindspore.dataset.deserialize.rst 1.6 kB

12345678910111213141516171819202122232425262728293031323334353637
  1. mindspore.dataset.deserialize
  2. ==============================
  3. .. py:method:: mindspore.dataset.deserialize(input_dict=None, json_filepath=None)
  4. 数据处理管道反序列化,支持输入Python字典或使用 `mindspore.dataset.serialize()` 接口生成的JSON文件。
  5. .. note::
  6. 反序列化包含自定义Python函数的数据处理管道时,部分参数信息可能丢失;当 `input_dict` 和 `json_filepath` 同时不为None时,返回反序列化JSON文件的结果。
  7. **参数:**
  8. - **input_dict** (dict):包含序列化数据集图的Python字典。
  9. - **json_filepath** (str):JSON文件的路径,用户可通过 `mindspore.dataset.serialize()` 接口生成。
  10. **返回:**
  11. 成功时,返回Dataset对象;失败时,则返回None。
  12. **异常:**
  13. **OSError:** 无法打开JSON文件。
  14. **样例:**
  15. >>> dataset = ds.MnistDataset(mnist_dataset_dir, 100)
  16. >>> one_hot_encode = c_transforms.OneHot(10) # num_classes是输入参数
  17. >>> dataset = dataset.map(operation=one_hot_encode, input_column_names="label")
  18. >>> dataset = dataset.batch(batch_size=10, drop_remainder=True)
  19. >>> # 用例1:序列化/反序列化 JSON文件
  20. >>> ds.engine.serialize(dataset, json_filepath="/path/to/mnist_dataset_pipeline.json")
  21. >>> dataset = ds.engine.deserialize(json_filepath="/path/to/mnist_dataset_pipeline.json")
  22. >>> # 用例2:序列化/反序列化 Python字典
  23. >>> serialized_data = ds.engine.serialize(dataset)
  24. >>> dataset = ds.engine.deserialize(input_dict=serialized_data)