初识 NLP

2022-04-01 15:51:14 浏览数 (1)

NLP 两大核心任务

  1. 自然语言理解(NLU,NLI)
  2. 自然语言生成(NLG)

NLU: 希望机器像人一样,具备正常人的语言理解能力

NLG: 将非语言格式数据转为人类可以理解的语言格式

NLU 五大难点

  1. 语言的多样性
  2. 语言的歧义性
  3. 语言的鲁棒性
  4. 语言的知识依赖
  5. 语言的上下文

NLP 四大典型应用

  1. 情感分析
  2. 聊天机器人
  3. 语音识别
  4. 机器翻译

NLP 两大实现方式

  1. 传统机器学
  2. 深度学

传统机器学:语料预处理 -> 特征工程 -> 选择分类器

深度学:语料预处理 -> 设计模型 -> 训练模型

NLG 两种方式

  1. text - to - text: 文本到语言的生成
  2. data - to - text: 数据到语言的生成

NLG 三大典型应用

3目的:

  1. 能够大规模的产生个性化内容
  2. 帮助人类洞察数据,让数据更容易理解
  3. 加速内容生产

3应用:

  1. 自动写新闻
  2. 聊天机器人
  3. BI报告生成

三种典型的分词方法

  1. 基于词典匹配
  2. 基于统计
  3. 基于深度学

参考

感谢帮助!

  • 自然语言处理-Natural language processing | NLP

本文作者: yiyun

本文链接: https://cloud.tencent.com/developer/article/1970747

版权声明: 本博客所有文章除特别声明外,均采用 BY-NC-SA 许可协议。转载请注明出处!

0 人点赞