概要:自然语言处理(NLP)近来因为人类语言的计算表征和分析而获得越来越多的关注。自然语言处理(NLP)近来因为人类语言的计算表征和分析而获得越来越多的关注。它已经应用于许多如机器翻译、垃圾邮件检测、信息提取、自动摘要、医疗和问答系统等领域。本论文从历史和发展的角度讨论不同层次的 NLP 和自然语言生成(NLG)的不同部分,以呈现 NLP 应用的各种最新技术和当前的趋
转载
2023-08-30 20:50:32
72阅读
0.1 什么是NLP?NLP = NLU + NLGNLU:语音/文本 ——>语义 (text——>structure)NLG:语义——>文本/语音 (text——>structure)The challenge : Mutilple ways to express.The challenge : Ambiguity(一词多义) 解决方法:尽可能使用上下文信息今天参观了苹果
转载
2023-08-06 12:13:28
116阅读
不同的自然语言有不同的语法结构,因此需要对语言数据进行语法解析,才能让机器更准确地学到相应的模式。儿语言不同于图像,数据标注工作需要有一定的语言学知识,因此数据的整理也相对更困难。下面以英语为例(别的咱也看不懂),对NLP研究中常见的基本语言学概念进行记录。 词性(Part Of Speech) 词
原创
2022-09-24 01:23:49
237阅读
不同的自然语言有不同的语法结构,因此需要对语言数据进行语法解析,才能让机器更准确地学到相应的模式。儿语言不同于图像,数据标注工作需要有一定的语言学知识,因此数据的整理也相对更困难。下面以英语为例(别的咱也看不懂),对NLP研究中常见的基本语言学概念进行记录。 词性(Part Of Speech) 词
原创
2022-09-24 01:23:54
151阅读
绪论问题NLP:让计算机实现自动或人机互助的语言处理功能,实现海量语言信息的自动处理、知识挖掘和有效利用基本概念语言 Language由语音、词汇、语法构成的一定系统自然语言区别于人为编造的语言,例如程序语言语言学 Linguistics语音和文字是语言的两个基本属性三个不同语系屈折语用词的形态变化表示语法关系黏着语词内有专门表示语法意义的附加成分孤立语/分析语形态变化少,语法关系靠次序和虚词表示
转载
2024-04-01 17:41:58
57阅读
©原创作者 | 朱林论文解读:Contrastive Learning for Many-to-many Multilingual Neural Machine Translation论文作者:Xiao Pan, Mingxuan Wang, Liwei Wu, Lei Li论文地址:https://aclanthology.org/2021.acl-long.21.pdf收录会议:AC
转载
2024-08-08 07:34:31
91阅读
自然语言处理 (NLP)问题都是序列化的。前馈神经网络,在单次前馈中对到来数据处理,假定所有输入独立,模式丢失。循环神经网络(recurrent neural network,RNN)对时间显式建模神经网络。RNN神经元可接收其他神经元加权输入。RNN神经元可与更高层建立连接,也可与更低层建立连接。隐含活性值在同一序列相邻输入间被记忆。2006年 LSTM。语音识别、语音合成、手写连体字识别、时间
转载
2024-01-15 21:51:48
67阅读
终于来到最后一期,也是目前NLP最常用的架构RNN,及其各种变种。具体来看,本次总结的主要内容:RNN的结构。循环神经网络的提出背景、优缺点。着重学习RNN的反向传播、RNN出现的问题(梯度问题、长期依赖问题)、BPTT算法。双向RNNLSTM、GRU的结构、提出背景、优缺点。针对梯度消失(LSTM等其他门控RNN)、梯度爆炸(梯度截断)的解决方案。Text-RNN的原理。利用Text-RNN模型
转载
2024-01-31 02:05:15
53阅读
实验目的:初步认识Python语言基础部分,为日后学习铺垫
转载
2023-05-23 00:22:12
80阅读
关联的问题客户端和服务器之间的通讯,有一部分是数据是动态的,每次通讯都不一样。 Proxy 录制器在录制的时候是无法区分哪些是静态的信息,哪些是动态的信息,所有的信息都以 hard-coded 的方式记录下来。但是在回放的时候,如果有些信息不改变,那么脚本是不能执行成功的。考虑如下情形: 如上图所示,用户 jojo 以 jojo/bean 的账号 / 口令登录某一 web 服
转载
2024-07-28 15:42:35
27阅读
能做什么?自然语言处理:
如何让计算机能够自动或半自动地理解自然语言文本,懂得人的意图和心声?如何让计算机实现海量语言文本的自动处理、挖掘和有效利用,满足不同用户的各种需求,实现个性化信息服务?基本概念语言学:研究语言的本质、结构和发展规律的科学。类别
历时语言学 (diachronic linguistics)或称历史语言学 (historical linguistics)、共
转载
2023-10-01 15:58:16
91阅读
本书介绍这本书已经编写了很长时间(第一章的第一版有日期戳2005-08-04,11:30),随着f763e...
原创
2023-06-23 10:49:31
60阅读
关于NLP的概念和处理过程一、自然语言处理(Natural Language Processing)(1)自然语言处理是计算机科学领域与人工智能领域中的一个重要方向。它研究能实现人与计算机之间用自然语言进行有效通信的各种理论和方法。自然语言处理是一门融语言学、计算机科学、数学于一体的科学。 (2)自然语言处理并不是一般地研究自然语言,而在于研制能有效地实现自然语言通信的计算机系统,特别是其中的软件
转载
2023-07-31 22:26:50
0阅读
文 | Serena Gao@知乎首先,做nlp不一定要很懂语言学,也不一定要跟语言学扯上关系。nlp可以仅是data mining,features engineering, 也的确有很...
转载
2023-05-02 08:37:15
160阅读
代词是用来指代名词和名词短语的。代词可分为人称代词(I,me,he)、物主代词(my,their,yours)、反身代词(myself,himself,themself)、指示代词(this,that,those)、不定代词(some,many,each,any,all)、疑问代词(what,which)、关系代词[which,who(m),as,that]等3.1 人称代词3.1.1 主格人称代
转载
2024-01-17 09:39:11
108阅读
本书介绍这本书已经编写了很长时间(第一章的第一版有日期戳2005-08-04,11:30),随着语074&idx=1&sn=3be5a74021...
原创
2023-06-23 11:00:44
103阅读
本文将从建模、学习和推理三个方面综述基于神经网络的神经语言处理框架(neural NLP)的最新进展。深度神经网络极大促进了自然语言处理技术的发展。来自微软亚研的周明、段楠、刘树杰、沈向洋发表了神经自然语言处理的进展,从表示到建模再到推理,共16页pdf,值得详细查看。自然语言处理(NLP)是人工智能的一个子领域,其重点是使计算机能够理解和处理人类语言。在过去的五年里,我们见证了NLP在机器翻译、
转载
2024-01-12 19:03:36
37阅读
Go语言是什么2009年11月10日,Go语言正式成为开源编程语言家庭的一员。Go语言(或称Golang)是云计算时代的C语言。Go语言的诞生是为了让程序员有更高的生产效率,Go语言专门针对多处理器系统应用程序的编程进行了优化,使用Go编译的程序可以媲美C或C++代码的速度,而且更加安全、支持并行进程。开发人员在为项目选择语言时,不得不在快速开发和性能之间做出选择。C和C++这类语言提供了很快的执
转载
2023-07-12 00:37:41
83阅读
对比语言:c++,c#,java,oc,lua.直观的感受下各种语言的差异,也方便以后查阅,也是对 快速掌握语言 这个方法的总结。后3种语言的语法。基本都是2周内了解的。java因为和c#太像,最短.2天看完基本语法。对比的范例1.数字处理2.字符串处理。3.集合4.类,继承,多态5.回调: c# , java6.多线程7.手动编译:java
转载
2023-05-29 13:48:38
55阅读
前段时间一口气读完了 NN4NLP,很是畅快,非常喜欢作者行文讲解的口吻和逻辑。大概两周读完,每页都有收获,读完后反而担心有所疏漏,知识太多留不住,索性从头来一遍,把学习过程的知识点和思考记录下来,也算精简版供自己今后查阅。 感兴趣的,可以一起学习讨论,真的很推荐这本书。大致介绍下该书。NN4NLP 由 Goldberg 撰写,是 CMU CS11-747 课程的教材,配合公开课食用更佳,公开课
转载
2024-06-14 11:53:05
47阅读