读懂Transformer

1.Transformer 整体结构 首先介绍 Transformer 的整体结构,下图是 Transformer 用于中英文翻译的整体结构: Transformer 的整体结构,左图Encoder和右图Decoder 可以看到 Transformer 由 Encoder 和 Decoder 两

Lee 发布于 2024-03-07

深度学习处理文本分类

配置文件 Config = { "model_path": "output", 'ret_data_path': "output/ret_data.csv", "train_data_path": "test_data.csv", "valid_data_path":

Lee 发布于 2024-03-01

4.RNN中文分词

1.中文分词 1. 分词任务 - 分词是NLP中一类问题的代表 - 分词是NLP任务的基础 2. 中文分词的难点 - 歧义切分 - 新词、专有名词、改造词等 3. 中文分词算法<

Lee 发布于 2024-02-20

3.神经网络处理文本

小任务:字符串中是否存在关键字符串 在自然语言处理(NLP)任务中,神经网络被广泛应用于处理文本数据和字符串分类。下面是详细讲解: 1. 字符数值化(通过词表): - 首先,将文本中的字符映射为数值表示。一种直观的方式是将每个字符映射为一个数字,比如a->1, b->2, ...

Lee 发布于 2024-02-19