删除标点符号

从文本和文档中擦除标点符号

页面上倒塌

句法

newstr =侵蚀（str）

newdocuments =侵蚀（文件）

newDocuments=删除标点符号（文档、'TokenTypes'，类型）

新闻=侵蚀（str.）从元素中删除标点符号和符号str.。该函数删除属于Unicode标点符号或符号类的字符。

新的模特=侵蚀（文件）从中删除标点符号和符号文件。如果在删除标点符号和符号字符后，则单词是空的，则该功能会删除它。对于令牌化文档输入，该函数删除与类型的令牌标点'标点'和'其他'。例如，该函数不会从URL和电子邮件地址删除标点符号和符号字符。

新的模特=侵蚀（文件，'tokentypes'，类型）仅从指定的标记类型中删除标点和符号。

打开实时脚本

从文本中删除标点符号str.。

str =“这是一个和/或两个。”;newstr =侵蚀（str）

newstr =“它的一个Andor两个”

插入一个空间"/"符号是，首先使用代替功能。

newstr =替换（str，"/"那" "）

newStr=“是一加二。”

Newstr =侵蚀（Newstr）

newStr=“它是一个或两个”

打开实时脚本

删除文档数组中的标点符号。

文档= tokenizeddocument（[......“一个短句的例子。”“另一个例子......带有URL：//www.tianjin-qmedu.com”])

文档= 2x1令牌设备：7个令牌：短句的一个例子。10令牌：另一个例子。。。使用URL：//www.tianjin-qmedu.com

newdocuments =侵蚀（文件）

newdocuments = 2x1 tokenizeddocument：6个令牌：短句6令牌的示例：另一个例子，带有URL //www.tianjin-qmedu.com

这里，该函数不会从URL删除标点符号。

输入文本，指定为字符串数组、字符向量或字符向量的单元格数组。

例子：[“短句的一个例子。”;“第二句话。”]

数据类型：细绳|烧焦|单间牢房

输入文档，指定为a标记化文档大批。

令牌类型以擦除标点符号，指定为字符向量，字符串阵列或包含一个或多个令牌类型（包括自定义令牌类型）的字符向量的小区数组。

这标记化文档和addTypeDetails函数自动检测以下令牌类型：

要在标记化时指定自己的自定义标记类型，请使用'CustomTokens'或“常规表达”选项标记化文档. 如果未指定自定义令牌的类型，则软件会将相应的令牌类型设置为'风俗'。

数据类型：细绳|烧焦|单间牢房

输出文本，返回为字符串数组，字符向量或字符向量的单元格数组。str.和新闻具有相同的数据类型。

输出文件，作为a返回标记化文档大批。