这篇文章解析转换器3:手写PHP转Python编译器的词法部分
一时技痒,自然而然地想搞个大家伙,把整个PHP程序转成Python。不比模板,可以用正则匹配偷懒,这次非写一个Php编译器不可。
上网搜了一下,发现大部分Python to xxx的transpile都是直接基于AST,省略了最重要的Tokenizer,Parser。直接写个Visitor了事。要不然就是基于Antlr之类的生成器,搞一大堆代码,看得令人心烦。
既然大家都不想做这个苦力,我就来试试,手工写一个Php编译器。分Tokenizer,Parser,Visitor三个部分来实现。
翻出《龙书》《虎书》做参考,仔细学了一回PHP,不学不知道,原来PHP有那么多特性,做个编译器真心累人。
词法部分很简单,就是一个自动机。设计了一个结构存放自动机,然后简单粗暴地在自动机上编程,也顾不上什么性能了,就是个一锤子买卖。
写得还算快,调试不是很顺,不过我是不会说的,哈
自动机不复杂,发上来大家看看,敬请指正。
self.statemachine = { 'current': { 'state': 'default', 'content': '', 'line': 0}, 'default': [ {'name': 'open', 'next': 'php', 'extra': 0, 'start': 0, 'end': 0, 'cache': '', 'token': r'<\?'}, {'name': 'open', 'next': 'php', 'extra': 0, 'start': 0, 'end': 0, 'cache': '', 'token': r'<\?php'}], 'php': [ {'name': 'close', 'next': 'default', 'extra': 0, 'token': r'\?>', 'start': 0, 'end': 0, 'cache': ''}, {'name': 'lnum', 'next': '', 'extra': 0, 'start': 0, 'end': 0, 'cache': '', 'token': r'[0-9]+'}, {'name': 'dnum', 'next': '', 'extra': 0, 'start': 0, 'end': 0, 'cache': '', 'token': r'([0-9]*\.[0-9]+)|([0-9]+\.[0-9]*)'}, {'name': 'exponent', 'next': '', 'extra': 0, 'start': 0, 'end': 0, 'cache': '', 'token': r'(([0-9]+|([0-9]*\.[0-9]+)|([0-9]+\.[0-9]*))[eE][+-]?[0-9]+)'}, {'name': 'hnum', 'next': '', 'extra': 0, 'start': 0, 'end': 0, 'cache': '', 'token': r'0x[0-9a-fA-F]+'}, {'name': 'bnum', 'next': '', 'extra': 0, 'start': 0, 'end': 0, 'cache': '', 'token': r'0b[01]+'}, {'name': 'label', 'next': '', 'extra': 0, 'start': 0, 'end': 0, 'cache': '', 'token': r'[a-zA-Z_\x7f-\xff][a-zA-Z0-9_\x7f-\xff]*'}, {'name': 'comment', 'next': 'commentline', 'extra': 1, 'token': r'//', 'start': 0, 'end': 0, 'cache': ''}, {'name': 'comment', 'next': 'commentline', 'extra': 1, 'token': r'#', 'start': 0, 'end': 0, 'cache': ''}, {'name': 'comment', 'next': 'comment', 'extra': 1, 'token': r'/\*', 'start': 0, 'end': 0, 'cache': ''}, {'name': 'string', 'next': 'string1', 'extra': 1, 'token': r'\'', 'start': 0, 'end': 0, 'cache': ''}, {'name': 'string', 'next': 'string2', 'extra': 1, 'token': r'"', 'start': 0, 'end': 0, 'cache': ''}, {'name': 'symbol', 'next': '', 'extra': 0, 'start': 0, 'end': 0, 'cache': '', 'token': r'[\\\{\};:,\.\[\]\(\)\|\^&\+-/\*=%!~$<>\?@]'}], 'string1': [ {'name': 'string', 'next': 'php', 'extra': 0, 'token': r'\'', 'start': 0, 'end': 0, 'cache': ''}, {'name': 'string', 'next': 'escape1', 'extra': 1, 'token': r'\\', 'start': 0, 'end': 0, 'cache': ''}, {'name': 'string', 'next': '', 'extra': 1, 'token': r'', 'start': 0, 'end': 0, 'cache': ''}], 'escape1': [ {'name': 'string', 'next': 'string1', 'extra': 1, 'token': r'.', 'start': 0, 'end': 0, 'cache': ''}], 'string2': [ {'name': 'string', 'next': 'php', 'extra': 0, 'token': r'\'', 'start': 0, 'end': 0, 'cache': ''}, {'name': 'string', 'next': 'escape2', 'extra': 1, 'token': r'\\', 'start': 0, 'end': 0, 'cache': ''}, {'name': 'string', 'next': '', 'extra': 1, 'token': r'', 'start': 0, 'end': 0, 'cache': ''}], 'escape2': [ {'name': 'string', 'next': 'string2', 'extra': 1, 'token': r'.', 'start': 0, 'end': 0, 'cache': ''}], 'commentline': [ {'name': 'comment', 'next': 'php', 'extra': 0, 'token': r'(\r|\n|\r\n)', 'start': 0, 'end': 0, 'cache': ''}, {'name': 'comment', 'next': 'php', 'extra': 0, 'token': r'', 'start': 0, 'end': 0, 'cache': ''}], 'comment': [ {'name': 'comment', 'next': 'php', 'extra': 0, 'token': r'\*/', 'start': 0, 'end': 0, 'cache': ''}, {'name': 'comment', 'next': '', 'extra': 1, 'token': r'', 'start': 0, 'end': 0, 'cache': ''}]}
以上是解析转换器3:手写PHP转Python编译器的词法部分的详细内容。更多信息请关注PHP中文网其他相关文章!

NumPyarraysareessentialforapplicationsrequiringefficientnumericalcomputationsanddatamanipulation.Theyarecrucialindatascience,machinelearning,physics,engineering,andfinanceduetotheirabilitytohandlelarge-scaledataefficiently.Forexample,infinancialanaly

useanArray.ArarayoveralistinpythonwhendeAlingwithHomeSdata,performance-Caliticalcode,orinterFacingWithCcccode.1)同质性data:arrayssavememorywithtypedelements.2)绩效code-performance-clitionalcode-clitadialcode-critical-clitical-clitical-clitical-clitaine code:araysofferferbetterperperperformenterperformanceformanceformancefornalumericalicalialical.3)

不,notalllistoperationsareSupportedByArrays,andviceversa.1)arraysdonotsupportdynamicoperationslikeappendorinsertwithoutresizing,wheremactssperformance.2)listssdonotguaranteeconeeconeconstanttanttanttanttanttanttanttanttimecomplecomecomecomplecomecomecomecomecomecomplecomectaccesslikearrikearraysodo。

toAccesselementsInapythonlist,useIndIndexing,负索引,切片,口头化。1)indexingStartSat0.2)否定indexingAccessesessessessesfomtheend.3)slicingextractsportions.4)iterationerationUsistorationUsisturessoreTionsforloopsoreNumeratorseforeporloopsorenumerate.alwaysCheckListListListListlentePtotoVoidToavoIndexIndexIndexIndexIndexIndExerror。

Arraysinpython,尤其是Vianumpy,ArecrucialInsCientificComputingfortheireftheireffertheireffertheirefferthe.1)Heasuedfornumerericalicerationalation,dataAnalysis和Machinelearning.2)Numpy'Simpy'Simpy'simplementIncressionSressirestrionsfasteroperoperoperationspasterationspasterationspasterationspasterationspasterationsthanpythonlists.3)inthanypythonlists.3)andAreseNableAblequick

你可以通过使用pyenv、venv和Anaconda来管理不同的Python版本。1)使用pyenv管理多个Python版本:安装pyenv,设置全局和本地版本。2)使用venv创建虚拟环境以隔离项目依赖。3)使用Anaconda管理数据科学项目中的Python版本。4)保留系统Python用于系统级任务。通过这些工具和策略,你可以有效地管理不同版本的Python,确保项目顺利运行。

numpyarrayshaveseveraladagesoverandastardandpythonarrays:1)基于基于duetoc的iMplation,2)2)他们的aremoremoremorymorymoremorymoremorymoremorymoremoremory,尤其是WithlargedAtasets和3)效率化,效率化,矢量化函数函数函数函数构成和稳定性构成和稳定性的操作,制造

数组的同质性对性能的影响是双重的:1)同质性允许编译器优化内存访问,提高性能;2)但限制了类型多样性,可能导致效率低下。总之,选择合适的数据结构至关重要。


热AI工具

Undresser.AI Undress
人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover
用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool
免费脱衣服图片

Clothoff.io
AI脱衣机

Video Face Swap
使用我们完全免费的人工智能换脸工具轻松在任何视频中换脸!

热门文章

热工具

安全考试浏览器
Safe Exam Browser是一个安全的浏览器环境,用于安全地进行在线考试。该软件将任何计算机变成一个安全的工作站。它控制对任何实用工具的访问,并防止学生使用未经授权的资源。

SublimeText3 Mac版
神级代码编辑软件(SublimeText3)

DVWA
Damn Vulnerable Web App (DVWA) 是一个PHP/MySQL的Web应用程序,非常容易受到攻击。它的主要目标是成为安全专业人员在合法环境中测试自己的技能和工具的辅助工具,帮助Web开发人员更好地理解保护Web应用程序的过程,并帮助教师/学生在课堂环境中教授/学习Web应用程序安全。DVWA的目标是通过简单直接的界面练习一些最常见的Web漏洞,难度各不相同。请注意,该软件中

EditPlus 中文破解版
体积小,语法高亮,不支持代码提示功能

VSCode Windows 64位 下载
微软推出的免费、功能强大的一款IDE编辑器