Преглед на файлове

Remove Py2-related unicode patch

remotes/origin/gm/2021-09-23T00Z/github.com--lark-parser-lark/master
Erez Sh преди 3 години
родител
ревизия
a9129f33c2
променени са 1 файла, в които са добавени 1 реда и са изтрити 6 реда
  1. +1
    -6
      lark/lexer.py

+ 1
- 6
lark/lexer.py Целия файл

@@ -157,12 +157,7 @@ class Token(str):
end_pos: int

def __new__(cls, type_, value, start_pos=None, line=None, column=None, end_line=None, end_column=None, end_pos=None):
try:
inst = super(Token, cls).__new__(cls, value)
except UnicodeDecodeError:
value = value.decode('latin1')
inst = super(Token, cls).__new__(cls, value)

inst = super(Token, cls).__new__(cls, value)
inst.type = type_
inst.start_pos = start_pos
inst.value = value


Зареждане…
Отказ
Запис