-
我注意到这两个tiny版本略有不同, 从config里看到模型size保持了一致, 但是模型文件参数`ckpt.data`大小有差异(17.2MB vs 49.7MB)
想请教一下brightmart版本是在预训练的具体什么阶段做了哪些优化
-
我看了Albert_zh发布的预训练模型和Google Albert发布的预训练模型中的albert_config.json文件,有几点不同:
1)在激活函数中,Albert_zh用的是RELU,而Google Albert用的是GELU。这个明显的Albert_zh是不对的,因为原论文中用的就是GELU。
2)vocab.txt文件中,Google Albert发布的词表后面带有数字,应该是…
-
Failed to find any matching files for /root/autodl-tmp/classifier_multi_label/albert_small_zh_google/albert_model.ckpt,您好,请问这个albert_model.ckpt文件是需要自己添加吗
-
从https://github.com/brightmart/albert_zh下载了tf models后,我能用convert_albert_tf_checkpoint_to_pytorch.py顺利成功转换albert_tiny成pytorch模型,但却无法转换所下载的albert_small_zh_google。转换失败的错误信息如下:
![image](https://user-…
-
使用albert_tiny_zh_google预训练模型,args.py 文件配置:
#模型目录
model_dir = os.path.join(file_path, 'albert_tiny_zh_google/')
#config文件
config_name = os.path.join(file_path, 'albert_config/albert_config_tiny_g…
-
使用albert_tiny_zh出现维度错误问题,ValueError: Layer weight shape (512, 128) not compatible with provided weight shape (512, 312)。
使用Google版本的albert_tiny_zh_google,则不会出现这个错误,这是什么情况?
-
你好作者:
想问一下我在运行训练代码的时候过了一个小时还是这样:
I0315 19:24:30.427282 140093487493760 tpu_estimator.py:2308] examples/sec: 13.3812
INFO:tensorflow:global_step/sec: 0.213636
I0315 19:24:35.107750 14009348…
XD-mu updated
4 months ago
-
Failed to find any matching files for C:\Users\Administrator\D
esktop\classifier_multi_label\albert_small_zh_google\albert_model.ckpt
请问需要提前准备albert_model.ckpt吗
-
when i run tfmodel_2_pymodel.py, pycharm told me OSError: Data loss: not an sstable (bad magic number): perhaps your file is in a different file format and you need to use a different restore operator…
-
我在使用下列的方式压缩模型的时候 出现了问题
![image](https://user-images.githubusercontent.com/51428350/73876960-be6f6400-480c-11ea-9fb3-32b618067279.png)
pip install tensorflow==1.15
freeze_graph --input_checkpo…