lexin:小型词典分析仪

时间:2024-03-04 17:29:11
【文件属性】:

文件名称:lexin:小型词典分析仪

文件大小:6KB

文件格式:ZIP

更新时间:2024-03-04 17:29:11

Python

列克星 一个用Python编写的小型词典分析器,它以字符流作为输入,并产生标记流为输出。 如何使用 只需导入项目, import lexin.lexer tokens = lexin.lexer.tokenize("some string you want to tokenize 123") 或者,您也可以检查文件夹中的单元测试,或使用以下命令从命令行界面运行它们: python -m unittest discover 自行发现它们。 关于 该项目由由(我),和。 它是由我们学院的“语言的语法和语义”课程的实验室提供给我们的。


【文件预览】:
lexin-master
----source()
--------lexer.py(4KB)
--------test_lexer.py(5KB)
--------fsda.py(3KB)
----setup.py(163B)
----.gitignore(2KB)
----readme.md(810B)

网友评论