代码中提示model tokenization has no attribute 'FullTokenizer’的时候,首先安装bert
pip install bert-tensorflow
然后使用import bert.tokenization as tokenization
另外如果跑bert源代码的时候使用tensorflow2,可以转换一下
import tensorflow.compat.v1 as tf
tf.disable_v2_behavior()
2024-03-22 11:28:28
代码中提示model tokenization has no attribute 'FullTokenizer’的时候,首先安装bert
pip install bert-tensorflow
然后使用import bert.tokenization as tokenization
另外如果跑bert源代码的时候使用tensorflow2,可以转换一下
import tensorflow.compat.v1 as tf
tf.disable_v2_behavior()