55问答网
所有问题
当前搜索:
如何对一个语料进行词汇分析
文本
分析
研究方法有哪些?
答:
1、“新批评”法 “新批评”的方法很基础,但也很实用,即从文本中“细读”出那些语言的非日常化运用,如“反讽”、“张力”等。“细读”现在已成为包括各种文本
分析
在内的
一个
基本功。“新批评”对诗与短篇小说等文本的分析,非常有用,但对于长篇小说就有些不知从何处下嘴了,只有结合叙述学的...
如何
利用深度学习技术训练聊天机器人语言模型
答:
jieba分词默认的字典是:1998人民日报的切分
语料
还有
一个
msr的切分语料和一些txt小说。开发者可以自行添加字典,只要符合字典构建的格式就行。 jieba分词同时提供接口添加
词汇
。 Word embedding 使用机器学习训练的语言模型,网络算法是使用数字
进行
计算,在输入进行编码,在输出进行解码。word embedding就是编解码的手段。 【图...
文本
分析
和机器学习那个火
答:
特征提取数据清洗后
进行
特征提取,比如可以使用可视化板块里的tf-idf,其是常用的特征提取方法,它考虑了
词汇
在文本中的重要性和在
语料
库中的普遍性。TF-IDF值越高,表示该词汇在文本中的重要性越高,以及还有其它方法。后续
分析
利用文本数据进行后续分析,比如可视化图形展示、主题分析,聚类等等,下个...
学英语有什么技巧啊(应试方面单选阅读完型3块)
答:
就算我们认识每
一个单词
,也不能保证能理解句子的意思,这就需要我们掌握语法规则,
分析
句子的结构。语法是
词汇
组合成句进而组成篇章的规则。但是,纯粹为学习语法而学习语法的是毫无意义的。对英语学习者来说,语法只是一种不可或缺的辅助系统,我们在学习英语中所遇到的许多问题都可在语法中寻求答案。例如,什么时候用...
sat写作
怎么分析
?
答:
sat写作到底该
怎么分析
? 开宗明义:套路。 但我们先得明白为什么写SAT文章需要套路。道理很简单,没有套路,大多数学生都是瞎写一通,即使整篇文章写完自我感觉良好,好似行云流水,把该说的都说了,基本上分数都只能在5/5/5到6/6/6晃悠,想要那更高的分数,必须学习写作套路。 sat写作分析一:开头段 万事开头难,作文...
NLP应用于司法系统(综述)
答:
LQA中,问题的形式会有比较大的变化:有的问题强调对于司法概念的解释,有的问题主要考虑对于特定案件的
分析
。另外,从专业人员和非专业人员口中表达专业
词汇
可能会有差别。这些问题给LQA带来了很多挑战。 LegalAI中有很多数据集,Duan(2019)提出CJRC,
一个
司法阅读理解数据集,和SQUAD 2.0有相似的格式,包括span extraction...
短语结构规则
答:
·采用复杂特征集和
词汇
主义方法来重建自然语言的语法系统,是近二十年来全球语言学界对此作出的最重要的努力。 2.2 事实之二——短语结构规则的覆盖有限 通过大规模
语料
的调查,人们发现一种语言的短语规则的分布符合齐夫率(Zipf's Law)。Zipf是
一个
统计学家和语言学家。他提出,如果对某个语言单位(不论是字母还是...
统计机器翻译的模型
答:
根据平行
语料
的大小不同及所设置的迭代次数多少,训练时间可能很长。
一个
参考数据为,1千万句中文-英文平行语料(约3亿词)在Inter Xeon 2.4GHz服务器上运行时间约为6天。如果耗时过长可考虑使用MGIZA++和PGIZA++
进行
并行对齐(PGIZA++支持分布式对齐)。其后,对两个方向的GIZA++对齐结果进行合并,供短语抽取之用。
蛙的主题内容与语言特点
答:
第二章主要是对小说《蛙》中
词汇
的运用
进行分析
,分别从方言词、熟语和粗话三个方面进行举例分析,探讨这些词汇的运用在莫言小说中产生的作用。第三章是对小说《蛙》的修辞艺术进行探讨,通过搜集
语料
发现作者在小说中对多种辞格进行运用,不仅丰富了小说内容,同时也使作品中的人物形象更加立体。第四章是小说...
常用的音字转换技术有哪些
答:
这类系统一般只能处理有限的
词汇
和有限的句型由于汉字使用较西文更为灵活,词的分类、句法、语法
分析
方法尚未成熟,使得分析方法在处理大规模文本时遇到了很大困难基于
语料
库的统计方法,是把语言看成
一个
马尔可夫模型在训练阶段,通过对大规模语料的机器自动学习来训练模型参数在转换阶段通过计算选取后验概率最大...
<涓婁竴椤
1
2
3
4
5
6
7
8
9
10
涓嬩竴椤
灏鹃〉
其他人还搜