98 Commits (master)

Author SHA1 Message Date
  x54-729 668430d33d 修正 paddle 多卡下替换 sampler 的逻辑及测试 3 years ago
  x54-729 9f60246749 test_fsdp device 统一为[0,1] 3 years ago
  x54-729 babf4b2f19 修复测试的一些bug 3 years ago
  x54-729 82fe167ea3 限制测试时使用的设备;为fsdp的测试添加版本限制 3 years ago
  x54-729 749415970e 1. fix bugs of DataSet.from_dataset 2. fix bugs of some tests 3. add to OneflowDriver.load_model 3 years ago
  x54-729 09a558c2c9 small change for tests 3 years ago
  x54-729 5a41cca483 seq_len_to_mask 添加oneflow部分;完善oneflow的测试标签 3 years ago
  YWMditto 4b6e455247 更新了文档 3 years ago
  YWMditto 0506fc2fcb 添加了 TorchFSDPDriver;修改了 ddp 中的部分细节;删除了 topksaveer 的 rank_zero_only 修饰器 3 years ago
  x54-729 f5005e1e8b fix conflict 3 years ago
  x54-729 eb218f3def 调整 driver 的部分文档 3 years ago
  x54-729 4cdfdc77c7 oneflow 动态图 单卡和ddp部分及测试 3 years ago
  x54-729 ad6ada2487 small 3 years ago
  x54-729 7023ea550c deepspeed的save load功能 3 years ago
  x54-729 22d95be007 Merge branch 'dev0.8.0' into deepspeed 3 years ago
  x54-729 b60621f3d1 small 3 years ago
  x54-729 cbee1c6cbc deepspeed test init 3 years ago
  x54-729 cd0957fb5b 跟进paddle jittor 关于 set_dist_repro_dataloader函数中的修改 3 years ago
  yhcc dd1c5ca035 修复设置了global seed的bug 3 years ago
  yhcc 7283bf27b2 在私有定制Sampler的情况下,多卡不替换 3 years ago
  x54-729 c99315f79e 修复新增的set_dist_repro_dataloader函数测试例在paddle情况下的问题 3 years ago
  yhcc 47b7c4e832 增加set_dist_repro_dataloader测试 3 years ago
  x54-729 9b0a30c8fb small bug 3 years ago
  x54-729 75a3278d69 1. 完成JittorSingleDriver的功能,并添加测试用例 2.在Sampler中添加属性num_samplers 用于动态获取dataset的长度 3.添加便于测试断点重训的数据集 4.修改jittor其它测试的一些bug,统一ArgMaxDataset 的命名 3 years ago
  x54-729 28eb1a5836 添加了对tensor_to_numeric reduce 参数的测试 3 years ago
  x54-729 f8015d050b Merge branch 'dev0.8.0' of github.com:fastnlp/fastNLP into dev0.8.0 3 years ago
  x54-729 06551964a3 paddle 不再为非fp16的driver加载fp16状态 3 years ago
  yh 466e924d2e 1.修复classify_f1_pre_rec_metric在batch中target不包含某类class时的计算错误;2.增加对FairScale的支持, 同时修改TorchDriver以实现兼容 3 years ago
  x54-729 5455663093 1.修改.Jenkinsfile移动html页面的步骤至post中 2.修改torch_dataloader/test_fdl.py的部分测试例 3.在torch版本较低时跳过worker_inif_function的测试 3 years ago
  x54-729 af36813296 1. test_fleet.py 和 test_ddp.py 中的 load_checkpoint 相关的测试例添加同步 2.修改 Jenkinsfile 中 Test Other 的 pytest 标签形式 3 years ago
  x54-729 c977d3be02 补充需要 _NEED_IMPORT_TORCH 的地方 3 years ago
  x54-729 51a4439737 torch test_dist_utils.py中torch.full添加dtype以兼容不同的torchban蹦 3 years ago
  yh 6d2dca421d 修改测试中需要超过2个gpu的 3 years ago
  x54-729 c4af9f21c6 paddle 和测试例跟进 set_dist_repro_dataloader 函数;修改test_trainer_wo_evaluator_torch.py的bug 3 years ago
  x54-729 655e48de99 1.修改torch测试例中多卡的driver参数 2.修改测试例中的driver.save driver.load为driver.save_checkpoint driver.load_checkpoint 3.添加lstm 3 years ago
  yh_cc 97b504c020 修改Trainer.save/Driver.save为Trainer.save_checkpoint/Driver.save_checkpoint 3 years ago
  x54-729 34698f0f9e 删除 mix_module 和 torch_paddle_driver 的内容 3 years ago
  x54-729 fe449bd543 删除 initialize_paddle_driver 对参数 driver的限制,使得它能够根据 device 初始化 driver 3 years ago
  x54-729 281a570b09 1、调整单卡中 save_and_load_model 测试例,不再使用 pytest.fixture 2、添加 PaddleFleetDriver 中 broadcast 误删的设备转换 3 years ago
  x54-729 45d08ee218 fix conflict 3 years ago
  x54-729 80ef85cf7c 为 paddle 分布式的测试例添加paddledist标签 3 years ago
  x54-729 007678b6d9 删除 paddle_driver/test_utils.py 中 get_device_from_visible 的测试例 3 years ago
  yh_cc 5e24933521 设置init 3 years ago
  x54-729 175ced3905 修正 initialize_torch_driver 的测试 3 years ago
  x54-729 f79ee04956 为torch测试例添加_NEED_IMPORT_TORCH 3 years ago
  x54-729 ebfd0e966c 为torch driver的测试例添加销毁通信进程的代码 3 years ago
  yh_cc 7d5ce620f4 增加RandomBatchSampler 3 years ago
  x54-729 f2fa05d136 测试例添加 _NEED_IMPORT_PADDLE 3 years ago
  x54-729 3310a6cadf 部分测试例重命名 3 years ago
  x54-729 4bfb509f12 调整测试例以适应pytest;为测试例添加标签 3 years ago