自然语言处理(NLP)
苹果语音助手Siri的工作流程：听懂思考组织语言回答这其中每一步骤涉及的流程为：语音识别自然语言处理 - 语义分析逻辑分析 - 结合业务场景与上下文自然语言处理 -...
解析GPT-3、GPT-4和ChatGPT关系-迈向自然语言处理的新高度“
Hello，小索奇！很高兴为你拓展关于GPT-3、GPT-4、ChatGPT之间关系的信息，以及解释自然语言模型和Transformer的区别。 首先，GPT-3、GPT-4、ChatGPT都是建立在GPT系列技术基础上的自然语言处理模型。它们在不同的代数、性能和应用场景下展现了自然语言处理领域的不...
【自然语言处理】【深度学习】NLP中的N-gram理解
N-gram是自然语言处理（NLP）中的一个概念，它描述的是文本中连续的n个项（通常是单词或字符）。这个概念主要用于语言建模和文本分析中。 具体来说： Unigram (1-gram): 包含一个单词的序列，例如句子中的单个单词。 Bigram (2-gram): 包含两个相邻单词的序列。例如，...
自然语言处理研究的内容-二.核心技术
2.1 机器翻译 机器翻译（Machine Translation，简称MT）是自然语言处理领域的一项核心技术，其目标是通过计算机系统自动将一种语言的文本翻译成另一种语言的文本。机器翻译技术在促进不同语言之间的交流和理解方面发挥着关键作用，具有重要的实际应用价值。 以下是机器翻译的一般介绍： 任务...
【NPL】自然语言处理（Natural Language Processing，NLP）的发展简述-关键词
语法和语义模型统计模型深度学习方法Transformer模型预训练语言模型 上面这几个关键词就是NLP不断升级和赋能的过程，从探索到预训练模型，不得不佩服这方面付出巨大的前辈们，我们都是站在巨人的肩膀上前行，期待NLP更多突破 总结：相信NPL在未来5年内还会有更新突破的项目，预测也会有很...
NLP自然语言处理介绍
自然语言处理（NLP，Natural Language Processing）是一门涉及计算机与人类语言之间交互的学科。它的目标是使计算机能够理解和生成人类语言，从而更好地处理和解析大量的文本数据。NLP不仅是人工智能领域中一个重要的分支，也是当今社会应用广泛的领域之一。 在NLP中，一个基础但关键...
Python 自然语言处理（1）中文分词技术
中文分词技术中文自动分词可主要归纳为“规则分词”“统计分词”和“混合分词”，规则分词主要是通过人工设立词库，按照一定方式进行匹配切分，实现简单高效，但对新词很难进行处理，统计分词能够较好应对新词发现能特殊场景，但太过于依赖语料的质量，因此实践中多是采用两者的结合，即混合分词。1.1 规则分词基于规则...
Python NLTK 自然语言处理入门与例程(转)
转 https://blog.csdn.net/hzp666/article/details/79373720Python NLTK 自然语言处理入门与例程在这篇文章中，我们将基于 Python 讨论自然语言处理（NLP）。本教程将会使用 Python NLTK 库。NLTK 是一个当下流行的，用于...
Python+NLTK自然语言处理学习（一）：环境搭建
Python+NLTK自然语言处理学习（一）：环境搭建参考黄聪的博客地址：http://www.cnblogs.com/huangcong/archive/2011/08/29/2157437.html
Coursera Deep Learning笔记 序列模型（二）NLP & Word Embeddings(自然语言处理与词嵌入)
参考1. Word Representation之前介绍用词汇表表示单词，使用one-hot 向量表示词，缺点：它使每个词孤立起来，使得算法对相关词的泛化能力不强。从上图可以看出相似的单词分布距离较近，从而也证明了Word Embeddings能有效表征单词的关键特征。2. 词嵌入(word emb...
（转）注意力机制（Attention Mechanism）在自然语言处理中的应用
注意力机制（Attention Mechanism）在自然语言处理中的应用本文转自：http://www.cnblogs.com/robert-dlut/p/5952032.html 近年来，深度学习的研究越来越深入，在各个领域也都获得了不少突破性的进展。基于注意力（attention）机制的神经网...
NLP1 —— Python自然语言处理环境搭建
最近开始研究自然语言处理了，所以准备好好学习一下，就跟着《Python自然语言处理》这本书，边学边整理吧安装Mac里面自带了python2.7，所以直接安装nltk就可以了。默认执行sudo pip install -U nltk会报错：Collecting nltk Downloading nl...
Atitit 自然语言处理原理与实现 attilax总结
Atitit 自然语言处理原理与实现 attilax总结1.1. 中文分词原理与实现 1111.2. 英文分析 19411.3. 第6章信息提取 27111.4. 第7章自动摘要 30411.5. 第8章文本分类 31911.6. 第9章文本倾向性分析 36411.7. 第10章问答系统 37411...
【NLP】自然语言处理：词向量和语言模型
声明：这是转载自LICSTAR博士的牛文，原文载于此：http://licstar.net/archives/328这篇博客是我看了半年的论文后，自己对 Deep Learning 在 NLP 领域中应用的理解和总结，在此分享。其中必然有局限性，欢迎各种交流，随便拍。Deep Learning 算法...
自然语言处理(5)之Levenshtein最小编辑距离算法
自然语言处理(5)之Levenshtein最小编辑距离算法题记：之前在公司使用Levenshtein最小编辑距离算法来实现相似车牌的计算的特性开发，正好本节来总结下Levenshtein最小编辑距离算法。算法简介：Levenshtein距离，是俄罗斯科学家Vladimir Levenshtein在1...
NLP自然语言处理学习笔记二(初试)
前言：用Python对自然语言处理有很好的库。它叫NLTK。下面就是对NLTK的第一尝试。安装：1.安装Pip比较简单，得益于CentOS7自带的easy_install。执行一行命令就可以搞定。*在终端控制台->easy_install pip2.检验Pip是否可用Pip是Python的包管...
《Python自然语言处理》中文版-纠错【更新中。。。】
最近在看《Python自然语言处理》中文版这本书，可能由于是从py2.x到py3.x，加上nltk的更新的原因，或者作者的一些笔误，在书中很多代码都运行不能通过，下面我就整理一下一点有问题的代码。第一章：p3.该处为小建议，书中没有错误：关于nltk.book的下载，最好下载到'/nltk_data...
flask 第六章 人工智能 百度语音合成 识别 NLP自然语言处理+simnet短文本相似度 图灵机器人
百度智能云文档链接 : https://cloud.baidu.com/doc/SPEECH/index.html1.百度语音合成概念: 顾名思义,就是将你输入的文字合成语音,例如:from aip import AipSpeech""" 你的 APPID AK SK """APP_ID = ''A...
Python中调用自然语言处理工具HanLP手记
手记实用系列文章：1 结巴分词和自然语言处理HanLP处理手记2 Python中文语料批量预处理手记3 自然语言处理手记4 Python中调用自然语言处理工具HanLP手记5 Python中结巴分词使用手记HanLP方法封装类：# -*- coding:utf-8 -*-# Filename: ma...
【自然语言处理】主题建模：BERTopic（实战篇）
主题建模：BERTopic（实战篇） BERTopic 是基于深度学习的一种主题建模方法。 2018 2018 2018 年底， ...