- 博客(3)
- 收藏
- 关注
RSS订阅原创 Torchtext中使用spaCy作为Tokenizer加载IMDB数据集速度太慢的问题
https://github.com/pytorch/text/issues/481 这个issue提到了，我这边的解决方法是把语言模型换成小的# tokenizer_language 使用sm大小，要不然加载IMDB用时太久！TEXT = data.Field(tokenize = 'spacy', tokenizer_language = 'en_core_web_sm', include_lengths = True)LA
2021-05-17 16:38:27
739
原创 Spacy3.x 采坑
首先当然是 pip install sapcy 了，我这里是3.06，然后需要下载对应的语言模型，模型对应的版本要求在这个页面看： https://spacy.io/api/cli/#download其中的名字 en_core_web_{sm, md, lg}是模型大小，我下载的是lg然后直接python -m spacy download en_core_web_lg 这样下载是不行的，安装方式是pip install https://github.com/explosion/spacy-models
2021-05-16 12:07:59
658
原创 Spacy报错：OSError: [E050] Can‘t find model ‘en‘
https://github.com/gunthercox/ChatterBot/issues/1736
2021-05-15 20:21:09
162
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人