From 95df201a78fb213cf911f1b65ca6774236541603 Mon Sep 17 00:00:00 2001
From: Alex Waygood <Alex.Waygood@Gmail.com>
Date: Sun, 27 Feb 2022 00:35:55 +0000
Subject: [PATCH] Add `tokenize.__all__` (#7387)

---
 stdlib/tokenize.pyi | 300 ++++++++++++++++++++++++++++++++++++++++++++
 1 file changed, 300 insertions(+)

diff --git a/stdlib/tokenize.pyi b/stdlib/tokenize.pyi
index f908261ca..e8f64a7d0 100644
--- a/stdlib/tokenize.pyi
+++ b/stdlib/tokenize.pyi
@@ -4,6 +4,306 @@ from builtins import open as _builtin_open
 from token import *
 from typing import Any, Callable, Generator, Iterable, NamedTuple, Pattern, Sequence, TextIO, Union
 
+if sys.version_info >= (3, 10):
+    __all__ = [
+        "tok_name",
+        "ISTERMINAL",
+        "ISNONTERMINAL",
+        "ISEOF",
+        "ENDMARKER",
+        "NAME",
+        "NUMBER",
+        "STRING",
+        "NEWLINE",
+        "INDENT",
+        "DEDENT",
+        "LPAR",
+        "RPAR",
+        "LSQB",
+        "RSQB",
+        "COLON",
+        "COMMA",
+        "SEMI",
+        "PLUS",
+        "MINUS",
+        "STAR",
+        "SLASH",
+        "VBAR",
+        "AMPER",
+        "LESS",
+        "GREATER",
+        "EQUAL",
+        "DOT",
+        "PERCENT",
+        "LBRACE",
+        "RBRACE",
+        "EQEQUAL",
+        "NOTEQUAL",
+        "LESSEQUAL",
+        "GREATEREQUAL",
+        "TILDE",
+        "CIRCUMFLEX",
+        "LEFTSHIFT",
+        "RIGHTSHIFT",
+        "DOUBLESTAR",
+        "PLUSEQUAL",
+        "MINEQUAL",
+        "STAREQUAL",
+        "SLASHEQUAL",
+        "PERCENTEQUAL",
+        "AMPEREQUAL",
+        "VBAREQUAL",
+        "CIRCUMFLEXEQUAL",
+        "LEFTSHIFTEQUAL",
+        "RIGHTSHIFTEQUAL",
+        "DOUBLESTAREQUAL",
+        "DOUBLESLASH",
+        "DOUBLESLASHEQUAL",
+        "AT",
+        "ATEQUAL",
+        "RARROW",
+        "ELLIPSIS",
+        "COLONEQUAL",
+        "OP",
+        "AWAIT",
+        "ASYNC",
+        "TYPE_IGNORE",
+        "TYPE_COMMENT",
+        "SOFT_KEYWORD",
+        "ERRORTOKEN",
+        "COMMENT",
+        "NL",
+        "ENCODING",
+        "N_TOKENS",
+        "NT_OFFSET",
+        "tokenize",
+        "generate_tokens",
+        "detect_encoding",
+        "untokenize",
+        "TokenInfo",
+    ]
+elif sys.version_info >= (3, 8):
+    __all__ = [
+        "tok_name",
+        "ISTERMINAL",
+        "ISNONTERMINAL",
+        "ISEOF",
+        "ENDMARKER",
+        "NAME",
+        "NUMBER",
+        "STRING",
+        "NEWLINE",
+        "INDENT",
+        "DEDENT",
+        "LPAR",
+        "RPAR",
+        "LSQB",
+        "RSQB",
+        "COLON",
+        "COMMA",
+        "SEMI",
+        "PLUS",
+        "MINUS",
+        "STAR",
+        "SLASH",
+        "VBAR",
+        "AMPER",
+        "LESS",
+        "GREATER",
+        "EQUAL",
+        "DOT",
+        "PERCENT",
+        "LBRACE",
+        "RBRACE",
+        "EQEQUAL",
+        "NOTEQUAL",
+        "LESSEQUAL",
+        "GREATEREQUAL",
+        "TILDE",
+        "CIRCUMFLEX",
+        "LEFTSHIFT",
+        "RIGHTSHIFT",
+        "DOUBLESTAR",
+        "PLUSEQUAL",
+        "MINEQUAL",
+        "STAREQUAL",
+        "SLASHEQUAL",
+        "PERCENTEQUAL",
+        "AMPEREQUAL",
+        "VBAREQUAL",
+        "CIRCUMFLEXEQUAL",
+        "LEFTSHIFTEQUAL",
+        "RIGHTSHIFTEQUAL",
+        "DOUBLESTAREQUAL",
+        "DOUBLESLASH",
+        "DOUBLESLASHEQUAL",
+        "AT",
+        "ATEQUAL",
+        "RARROW",
+        "ELLIPSIS",
+        "COLONEQUAL",
+        "OP",
+        "AWAIT",
+        "ASYNC",
+        "TYPE_IGNORE",
+        "TYPE_COMMENT",
+        "ERRORTOKEN",
+        "COMMENT",
+        "NL",
+        "ENCODING",
+        "N_TOKENS",
+        "NT_OFFSET",
+        "tokenize",
+        "generate_tokens",
+        "detect_encoding",
+        "untokenize",
+        "TokenInfo",
+    ]
+elif sys.version_info >= (3, 7):
+    __all__ = [
+        "tok_name",
+        "ISTERMINAL",
+        "ISNONTERMINAL",
+        "ISEOF",
+        "ENDMARKER",
+        "NAME",
+        "NUMBER",
+        "STRING",
+        "NEWLINE",
+        "INDENT",
+        "DEDENT",
+        "LPAR",
+        "RPAR",
+        "LSQB",
+        "RSQB",
+        "COLON",
+        "COMMA",
+        "SEMI",
+        "PLUS",
+        "MINUS",
+        "STAR",
+        "SLASH",
+        "VBAR",
+        "AMPER",
+        "LESS",
+        "GREATER",
+        "EQUAL",
+        "DOT",
+        "PERCENT",
+        "LBRACE",
+        "RBRACE",
+        "EQEQUAL",
+        "NOTEQUAL",
+        "LESSEQUAL",
+        "GREATEREQUAL",
+        "TILDE",
+        "CIRCUMFLEX",
+        "LEFTSHIFT",
+        "RIGHTSHIFT",
+        "DOUBLESTAR",
+        "PLUSEQUAL",
+        "MINEQUAL",
+        "STAREQUAL",
+        "SLASHEQUAL",
+        "PERCENTEQUAL",
+        "AMPEREQUAL",
+        "VBAREQUAL",
+        "CIRCUMFLEXEQUAL",
+        "LEFTSHIFTEQUAL",
+        "RIGHTSHIFTEQUAL",
+        "DOUBLESTAREQUAL",
+        "DOUBLESLASH",
+        "DOUBLESLASHEQUAL",
+        "AT",
+        "ATEQUAL",
+        "RARROW",
+        "ELLIPSIS",
+        "OP",
+        "ERRORTOKEN",
+        "COMMENT",
+        "NL",
+        "ENCODING",
+        "N_TOKENS",
+        "NT_OFFSET",
+        "tokenize",
+        "detect_encoding",
+        "untokenize",
+        "TokenInfo",
+    ]
+else:
+    __all__ = [
+        "tok_name",
+        "ISTERMINAL",
+        "ISNONTERMINAL",
+        "ISEOF",
+        "ENDMARKER",
+        "NAME",
+        "NUMBER",
+        "STRING",
+        "NEWLINE",
+        "INDENT",
+        "DEDENT",
+        "LPAR",
+        "RPAR",
+        "LSQB",
+        "RSQB",
+        "COLON",
+        "COMMA",
+        "SEMI",
+        "PLUS",
+        "MINUS",
+        "STAR",
+        "SLASH",
+        "VBAR",
+        "AMPER",
+        "LESS",
+        "GREATER",
+        "EQUAL",
+        "DOT",
+        "PERCENT",
+        "LBRACE",
+        "RBRACE",
+        "EQEQUAL",
+        "NOTEQUAL",
+        "LESSEQUAL",
+        "GREATEREQUAL",
+        "TILDE",
+        "CIRCUMFLEX",
+        "LEFTSHIFT",
+        "RIGHTSHIFT",
+        "DOUBLESTAR",
+        "PLUSEQUAL",
+        "MINEQUAL",
+        "STAREQUAL",
+        "SLASHEQUAL",
+        "PERCENTEQUAL",
+        "AMPEREQUAL",
+        "VBAREQUAL",
+        "CIRCUMFLEXEQUAL",
+        "LEFTSHIFTEQUAL",
+        "RIGHTSHIFTEQUAL",
+        "DOUBLESTAREQUAL",
+        "DOUBLESLASH",
+        "DOUBLESLASHEQUAL",
+        "AT",
+        "ATEQUAL",
+        "RARROW",
+        "ELLIPSIS",
+        "OP",
+        "AWAIT",
+        "ASYNC",
+        "ERRORTOKEN",
+        "N_TOKENS",
+        "NT_OFFSET",
+        "COMMENT",
+        "tokenize",
+        "detect_encoding",
+        "NL",
+        "untokenize",
+        "ENCODING",
+        "TokenInfo",
+    ]
+
 if sys.version_info >= (3, 8):
     from token import EXACT_TOKEN_TYPES as EXACT_TOKEN_TYPES
 else: