PHP-7.1 源代碼學(xué)習(xí)：詞法分析

liuchengxu 發(fā)布于2019-07-01 12:20 / 525人閱讀

摘要：前言語法分析器調(diào)用獲取詞法單元，對于復(fù)雜的語言實(shí)現(xiàn)一般都會(huì)自定義，搜索的宏定義搜索函數(shù)的定義打開文件查看函數(shù)定義這里出現(xiàn)了兩個(gè)新的數(shù)據(jù)類型，，從命名推測是語法分析棧元素語法分析樹節(jié)點(diǎn)，搜索代碼里面哪些地方引用了

前言 yylex

bison 語法分析器調(diào)用 yylex 獲取詞法單元，對于復(fù)雜的語言實(shí)現(xiàn)一般都會(huì)自定義 yylex，搜索 yylex 的宏定義

# grep -rin --color --include=*.h "#define yylex"
Zend/zend_language_parser.c:64:#define yylex zendlex

搜索 zendlex 函數(shù)的定義

# grep -rin --color --include=*.c zendlex
Zend/zend_language_parser.c:1689:int zendlex(zend_parser_stack_elem *elem)

打開 zend_language_parser.c 文件查看 zendlex 函數(shù)定義

int zendlex(zend_parser_stack_elem *elem) {
    zval zv;
    int retail;

    ...

again:
    ZVAL_UNDEF(&zv);
    retval = lex_scan(&zv);
    if (EG(Exception)) {
        return T_ERROR;
    }

    switch (retval) {
        ...
    }

    return retval;
}

這里出現(xiàn)了兩個(gè)新的數(shù)據(jù)類型 zval，zend_parser_stack_elem，從命名推測 zend_parser_stack_elem 是語法分析棧元素（語法分析樹節(jié)點(diǎn)），搜索代碼里面哪些地方引用了 zend_parser_stack_elem

grep --color -rinw --include=*.c --include=*.h zend_parser_stack_elem
Zend/zend_compile.h:130:} zend_parser_stack_elem;
Zend/zend_language_parser.c:108:#define YYSTYPE zend_parser_stack_elem

打開 zend.compile.h 文件 130 行，zend_parser_stack_elem 是一個(gè)聯(lián)合體的 typedef

typedef union _zend_parser_stack_elem {
    zend_ast *ast;
    zend_string *str;
    zend_ulong num;
} zend_parser_stack_elem;

zend_language_parser.c 文件的 108 行表明 zend_parser_stack_elem 是詞法分析模塊傳遞給語法分析模塊的 token value

總結(jié)

GPU云服務(wù)器云服務(wù)器 flex詞法分析語言簡單詞法分析器c語言詞法源代碼分析

文章版權(quán)歸作者所有，未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為，您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請注明本文地址：http://systransis.cn/yun/30534.html

相關(guān)文章

PHP-7.1 源代碼學(xué)習(xí)：語法分析之概述

摘要：前言使用和進(jìn)行語法分析和詞法分析，本文以語法定義文件為起點(diǎn)，使用等命令行工具搜索相關(guān)源碼，以此來展示探索語法分析源碼思路語法定義文件在源代碼根目錄下通過命令查找文件我們找到了文件，里面定義了腳本的語法語法分析樹節(jié)點(diǎn)類型在查看具體的語法規(guī)則前言 php 使用 lex 和 bison 進(jìn)行語法分析和詞法分析，本文以 bison 語法定義文件為起點(diǎn)，使用 find, grep 等命令行工具...

luqiuwen 2019-07-01 12:20 評論0 收藏0
PHP-7.1 源代碼學(xué)習(xí)：php-cli 啟動(dòng)流程

摘要：前言函數(shù)默認(rèn)構(gòu)建目標(biāo)為，相關(guān)代碼在目錄下，文件中能夠找到入口函數(shù)，大概流程如下命令行參數(shù)處理初始化清理工作語言系統(tǒng)編程常用手法，通過中聲明函數(shù)指針類型的字段來實(shí)現(xiàn)類似面向?qū)ο笾谐橄箢惖母拍?，在文件中可以找到該結(jié)構(gòu)體的定義，這里只列出部分前言 php cli main 函數(shù) configure & make 默認(rèn)構(gòu)建目標(biāo)為 php-cli，相關(guān)代碼在 sapi/cli 目錄下，php_...

VishKozus 2019-06-27 15:24 評論0 收藏0
PHP-7.1 源代碼學(xué)習(xí)：字節(jié)碼生成之 "$a = 1"

摘要：前言本文通過分析這個(gè)語句的編譯和執(zhí)行來窺探解釋執(zhí)行邏輯準(zhǔn)備參考之前的系列文章，在環(huán)境下下載，編譯源代碼將代碼導(dǎo)入中編輯運(yùn)行選項(xiàng)，增加運(yùn)行參數(shù)設(shè)置斷點(diǎn)開始調(diào)試是一個(gè)測試腳本，放在目錄下，中只包含一條簡單的賦值語句調(diào)用堆棧參考之前的系列文章前言本文通過分析 $a=1 這個(gè) PHP 語句的編譯和執(zhí)行來窺探 php-cli 解釋執(zhí)行邏輯準(zhǔn)備參考之前的系列文章，在 ubuntu 環(huán)境下...

ConardLi 2019-06-27 15:23 評論0 收藏0
PHP-7.1 源代碼學(xué)習(xí)：字節(jié)碼生成之概述

摘要：前言字節(jié)碼生成編譯的代碼主要集中在，文件中包含大量的函數(shù)，基本上一個(gè)函數(shù)對應(yīng)語法規(guī)則文件一個(gè)非終結(jié)符，函數(shù)是所有函數(shù)的入口數(shù)據(jù)結(jié)構(gòu)結(jié)構(gòu)體是字節(jié)碼抽象結(jié)構(gòu)體并沒有像名字那樣簡單，它包含了大量的字段供虛擬機(jī)在運(yùn)行時(shí)使用一如既往的簡單，直觀，相比前言字節(jié)碼生成（編譯）的代碼主要集中在 zend_compile.c ，文件中包含大量的 zend_compile_xxx 函數(shù)，基本上一個(gè)函數(shù)...

1fe1se 2019-06-27 15:23 評論0 收藏0
使用PHP擴(kuò)展Xhprof分析項(xiàng)目性能實(shí)踐

摘要：一背景項(xiàng)目即將上線，想通過一些工具來分析代碼的穩(wěn)定性和效率，想起在上個(gè)團(tuán)隊(duì)時(shí)使用過的擴(kuò)展因?yàn)閾Q了新電腦，所以需要重新編譯此擴(kuò)展，現(xiàn)將安裝與實(shí)際排查過程完整記錄下來，方便自己回顧和幫助更多的讀者。作者湯青松微信日期一、背景項(xiàng)目即將上線，想通過一些工具來分析代碼的穩(wěn)定性和效率，想起在上個(gè)團(tuán)隊(duì)時(shí)使用過的xhprof擴(kuò)展；因?yàn)閾Q了新電腦，所以需要重新編譯此擴(kuò)展，現(xiàn)將安裝與實(shí)際排查過程完整記...

高勝山 2019-07-01 10:34 評論0 收藏0