pytorch的torchtext.data.Field( )使用方法介绍
2022/4/20 23:17:12
本文主要是介绍pytorch的torchtext.data.Field( )使用方法介绍,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!
CLASS torchtext.data.Field(sequential=True,
use_vocab=True,
init_token=None,
eos_token=None,
fix_length=None,
dtype=torch.int64,
preprocessing=None,
postprocessing=None,
lower=False,
tokenize=None,
tokenizer_language='en',
include_lengths=False,
batch_first=False,
pad_token='<pad>',
unk_token='<unk>', pad_first=False, truncate_first=False,
stop_words=None, is_target=False)为参数列表。
sequential,是否把数据表示成序列,默认是True。
tokenize:分词函数. (如 string.cut 、jieba.cut 等)默认值: str.split.
这篇关于pytorch的torchtext.data.Field( )使用方法介绍的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!
- 2024-05-15PingCAP 黄东旭参与 CCF 秀湖会议,共探开源教育未来
- 2024-05-13PingCAP 戴涛:构建面向未来的金融核心系统
- 2024-05-09flutter3.x_macos桌面os实战
- 2024-05-09Rust中的并发性:Sync 和 Send Traits
- 2024-05-08使用Ollama和OpenWebUI在CPU上玩转Meta Llama3-8B
- 2024-05-08完工标准(DoD)与验收条件(AC)究竟有什么不同?
- 2024-05-084万 star 的 NocoDB 在 sealos 上一键起,轻松把数据库编程智能表格
- 2024-05-08Mac 版Stable Diffusion WebUI的安装
- 2024-05-08解锁CodeGeeX智能问答中3项独有的隐藏技能
- 2024-05-08RAG算法优化+新增代码仓库支持,CodeGeeX的@repo功能效果提升