主要内容

addTypeDetails

向文档中添加令牌类型详细信息

描述

实例

更新的文档=addTypeDetails(文件)检测中的令牌类型文件并更新令牌详细信息。此函数仅向未知类型的令牌添加类型详细信息。若要从更新的文档,使用令牌详细信息.

实例

更新的文档=addTypeDetails(文件,名称、值)使用一个或多个名称-值对指定其他选项。

提示

使用addTypeDetails在使用降低,上面的,删除标点符号函数作为addTypeDetails使用这些函数删除的信息。

例子

全部崩溃

将手动标记的文本转换为tokenizedDocument对象,设置“标记化方法”选项“没有”.

str=[“对”“更多”“信息”","“见”"//www.tatmou.com""."];文档=标记化文档(str,“标记化方法”,“没有”)
documents=tokenizedDocument:7标记:有关更多信息,请参阅//www.tatmou.com .

使用令牌详细信息作用

t详细信息=令牌详细信息(文档)
tdetails =7×2表令牌文档编号\uuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuuu//www.tatmou.com" 1 "." 1

如果你设置“标记化方法”“没有”在呼叫tokenizedDocument函数,则它不会检测令牌的类型。要添加令牌类型详细信息,请使用addTypeDetails作用

= addTypeDetails文件(文档);

查看更新的令牌详细信息。

t详细信息=令牌详细信息(文档)
tdetails =7×3表“1个字母”更多“1个字母”信息“1个字母”,“1个标点符号”请参见“1个字母”//www.tatmou.com“1个网址”“1个标点符号”

输入参数

全部崩溃

输入文档,指定为tokenizedDocument大堆

名称值参数

指定可选的逗号分隔的字符对名称、值论据。名称是参数名和价值为对应值。名称必须出现在引号内。您可以按任意顺序指定多个名称和值对参数,如下所示:Name1, Value1,…,的家.

例子:“TopLevelDomains”,[“com”“net”“org”]指定用于web地址检测的顶级域“com”、“net”和“org”。

用于web地址检测的顶级域,指定为字符向量、字符串数组或字符向量的单元格数组。

如果您没有指定TopLevelDomains,则该函数使用顶级域作用

例子:[“com”“net”“org”]

数据类型:烧焦|一串|单间牢房

放弃以前计算的详细信息并重新计算它们的选项,指定为真正的错误的.

数据类型:必然的

输出参数

全部崩溃

已更新的文档,作为tokenizedDocument大堆要从中获取令牌详细信息,请执行以下操作:更新的文档,使用令牌详细信息.

在R2018b中引入