python token_token --- 与Python解析树一起使用的常量

token --- 与Python解析树一起使用的常量¶

此模块提供表示解析树（终端令牌）的叶节点的数值的常量。请参阅 Python 发行版中的文件 Grammar/Grammar ，以获取语言语法上下文中名称的定义。名称映射到的特定数值可能会在 Python 版本之间更改。

该模块还提供从数字代码到名称和一些函数的映射。这些函数镜像了 Python C 头文件中的定义。

token.tok_name¶

将此模块中定义的常量的数值映射回名称字符串的字典，允许生成更加人类可读的解析树表示。

token.ISTERMINAL(x)¶

对终端标记值返回 True。

token.ISNONTERMINAL(x)¶

对非终端标记值返回 True。

token.ISEOF(x)¶

如果 x 是表示输入结束的标记则返回 True。

标记常量是：

token.ENDMARKER¶

token.NAME¶

token.NUMBER¶

token.STRING¶

token.NEWLINE¶

token.INDENT¶

token.DEDENT¶

token.LPAR¶

"(" 的权标值。

token.RPAR¶

")" 的权标值。

token.LSQB¶

"[" 的权标值。

token.RSQB¶

"]" 的权标值。

token.COLON¶

":" 的权标值。

token.COMMA¶

"," 的权标值。

token.SEMI¶

";" 的权标值。

token.PLUS¶

"+" 的权标值。

token.MINUS¶

"-" 的权标值。

token.STAR¶

"*" 的权标值。

token.SLASH¶

"/" 的权标值。

token.VBAR¶

"|" 的权标值。

token.AMPER¶

"&" 的权标值。

token.LESS¶

"<" 的权标值。

token.GREATER¶

">" 的权标值。

token.EQUAL¶

Token value for "=".

token.DOT¶

Token value for ".".

token.PERCENT¶

Token value for "%".

token.LBRACE¶

Token value for "{".

token.RBRACE¶

Token value for "}".

token.EQEQUAL¶

Token value for "==".

token.NOTEQUAL¶

Token value for "!=".

token.LESSEQUAL¶

Token value for "<=".

token.GREATEREQUAL¶

Token value for ">=".

token.TILDE¶

Token value for "~".

token.CIRCUMFLEX¶

Token value for "^".

token.LEFTSHIFT¶

Token value for "<<".

token.RIGHTSHIFT¶

Token value for ">>".

token.DOUBLESTAR¶

Token value for "**".

token.PLUSEQUAL¶

Token value for "+=".

token.MINEQUAL¶

Token value for "-=".

token.STAREQUAL¶

Token value for "*=".

token.SLASHEQUAL¶

Token value for "/=".

token.PERCENTEQUAL¶

Token value for "%=".

token.AMPEREQUAL¶

Token value for "&=".

token.VBAREQUAL¶

Token value for "|=".

token.CIRCUMFLEXEQUAL¶

Token value for "^=".

token.LEFTSHIFTEQUAL¶

Token value for "<<=".

token.RIGHTSHIFTEQUAL¶

Token value for ">>=".

token.DOUBLESTAREQUAL¶

Token value for "**=".

token.DOUBLESLASH¶

Token value for "//".

token.DOUBLESLASHEQUAL¶

Token value for "//=".

token.AT¶

Token value for "@".

token.ATEQUAL¶

Token value for "@=".

token.RARROW¶

Token value for "->".

token.ELLIPSIS¶

Token value for "...".

token.COLONEQUAL¶

Token value for ":=".

token.OP¶

token.AWAIT¶

token.ASYNC¶

token.TYPE_IGNORE¶

token.TYPE_COMMENT¶

token.ERRORTOKEN¶

token.N_TOKENS¶

token.NT_OFFSET¶

C 标记生成器不使用以下标记类型值，但 tokenize 模块需要这些标记类型值。

token.COMMENT¶

标记值用于表示注释。

token.NL¶

标记值用于表示非终止换行符。 NEWLINE 标记表示 Python 代码逻辑行的结束；当在多条物理线路上继续执行逻辑代码行时，会生成 NL 标记。

token.ENCODING¶

指示用于将源字节解码为文本的编码的标记值。 tokenize.tokenize() 返回的第一个标记将始终是一个 ENCODING 标记。

token.TYPE_COMMENT

Token value indicating that a type comment was recognized. Such

tokens are only produced when ast.parse() is invoked with

type_comments=True.

在 3.5 版更改:补充 AWAIT 和 ASYNC 标记。

在 3.7 版更改:补充 COMMENT 、 NL 和 ENCODING 标记。

在 3.7 版更改:移除 AWAIT 和 ASYNC 标记。 "async" 和 "await" 现在被标记为 NAME 标记。

在 3.8 版更改:Added TYPE_COMMENT, TYPE_IGNORE, COLONEQUAL.

Added AWAIT and ASYNC tokens back (they're needed

to support parsing older Python versions for ast.parse() with

feature_version set to 6 or lower).

python token_token --- 与Python解析树一起使用的常量 — Python 3.9.0 文档相关推荐

python token_token --- 与Python解析树一起使用的常量 — Python 3.8.6 文档
token --- 与Python解析树一起使用的常量¶ 此模块提供表示解析树(终端令牌)的叶节点的数值的常量. 请参阅 Python 发行版中的文件 Grammar/Grammar ,以获取语言语法 ...
python 常量类用法_token --- 与Python解析树一起使用的常量 — Python 3.10.0a3 文档
token --- 与Python解析树一起使用的常量¶ This module provides constants which represent the numeric values of le ...
计算机毕业设计Python+djang的小区疫情防控系统(源码+系统+mysql数据库+Lw文档）
项目介绍随着信息化时代的到来,管理系统都趋向于智能化.系统化,居民小区疫情防控管理系统也不例外,但目前国内的市场仍都使用人工管理,市场规模越来越大,同时信息量也越来越庞大,人工管理显然已无法应对时代 ...
计算机毕业设计Python+djang的图书馆图书借阅归还管理系统(源码+系统+mysql数据库+Lw文档）
项目介绍论文阐述了图书管理系统,并对该系统的需求分析及系统需要实现的设计方法作了介绍.该系统的基本功能包括读者登录,修改密码,读者管理,图书管理和借阅管理等功能,并且个个模块都包括了添加修改和删除和 ...
计算机毕业设计Python+django大学生闲置二手交易商城平台(源码+系统+mysql数据库+Lw文档）
项目介绍当前在市场经济的快速发展下,我国的经济形势也在不断的发展壮大.特别是在计算机信息化的普及下,新的互联网+业态促使着零售业在不断的转型发展.随着B2C.O2O的不断发展,传统的零售实体都受到了 ...
基于python食品安全溯源管理系统django框架计算机毕业设计源码+系统+数据库+lw文档+调试部署
基于python食品安全溯源管理系统django框架计算机毕业设计源码+系统+数据库+lw文档+调试部署基于python食品安全溯源管理系统django框架计算机毕业设计源码+系统+数据库+lw文档 ...
python 类-9. 类 — Python 3.9.0 文档
9.类¶ 类提供了一种组合数据和功能的方法. 创建一个新类意味着创建一个新的对象类型,从而允许创建一个该类型的新实例 . 每个类的实例可以拥有保存自己状态的属性. 一个类的实例也可以有改变自己状态 ...
孤荷凌寒自学python第七十九天开始写Python的第一个爬虫9并使用pydocx模块将结果写入word文档...
孤荷凌寒自学python第七十九天开始写Python的第一个爬虫9 (完整学习过程屏幕记录视频地址在文末) 今天在上一天的基础上继续完成对我的第一个代码程序的书写. 到今天终于完成了对docx模块针对 ...
python用字典统计单词出现次数_python - 如何使用字典理解来计算文档中每个单词的出现次数...
我有一个用python编写的列表,其中充满了文本.就像每个文档中的固定单词.所以对于每个文档,我都有一个列表,然后在列表中列出所有文档. 所有列表只包含唯一的单词.我的目的是计算完整文档中每个单词的出 ...

python token_token --- 与Python解析树一起使用的常量 — Python 3.9.0 文档

python token_token --- 与Python解析树一起使用的常量 — Python 3.9.0 文档相关推荐

最新文章

热门文章