Skip to content

微信调试、API调试和AJAX的调试的工具,能将日志通过WebSocket输出到Chrome浏览器的console中

Notifications You must be signed in to change notification settings

luofei614/SocketLog

Folders and files

NameName
Last commit message
Last commit date

Latest commit

532e529 · Feb 3, 2021
Jan 27, 2021
Jan 27, 2021
Feb 3, 2021
Jan 23, 2021
Jan 27, 2021
Jul 15, 2018
Jan 23, 2021
Dec 8, 2015
Jan 27, 2021
Feb 3, 2021
Jan 27, 2021

Repository files navigation

一,简介

SocketLog 是一款高效的、探针式的服务器端程序调试和分析工具。

将“探针”引入到目标项目后,SocketLog 会通过在服务端启动的一个 WebSocket 服务,将程序执行过程中收集到的调试信息推送到客户端。 客户端会通过一个 Chrome 插件将调试信息打印到浏览器的 Console 中,这些信息包括程序的运行时间、吞吐率、内存消耗;PHP 的 Error、warning、notice 信息;程序执行的 SQL 语句以及对 SQL 语句的 explain 等等。

SocketLog 使用 PHP 和 NodeJs 开发,是 FirePHP 和 ChromePHP 的替代者,特别适合用于调试 Ajax 方式发起的请求和 API 项目。

1、使用场景举例:

用 SocketLog 来做微信开发调试。

举一个常见的场景:你在做微信 API 开发的时候,是否遇到了 API 有 bug,微信只提示“该公众账号暂时无法提供服务,请稍候再试” ?

我们根本不知道 API 出了什么问题,由于不能打印信息,只能通过日志来排查,这种方式的调试效率实在是太低了。

现在有了 SocketLog 就不一样了,我们可以知道微信给 API 传递了哪些参数,程序有错误我们也能看见错误信息。

微信调试

2、SocketLog 的用途:

  • API bug 调试

    • 正在运行的 API 有 bug,不能使用 var_dump() 进行调试,因为会影响 client 的调用。 将日志写到文件,查看也不方便,特别是带调用栈或大数据结构的文件日志,查看起来十分困难。
    • 是时候让 SocketLog 大显身手了,它通过 WebSocket 将调试日志打印到浏览器的 Console 中,查看起来非常方便。
  • 其他用途

    • 你还可以用它来分析开源程序、分析 SQL 性能、结合 PHP Taint 分析程序漏洞。

3、文件和目录简要说明:

├── chrome        :Chrome 插件的源代码目录。
├── chrome.crx    :Chrome 插件的安装包文件,手动安装方法见下文。
├── demo.php      : Demo 示例文件。
├── Dockerfile
├── composer.json
├── README.md
├── php
│   ├── slog.function.php :探针文件,在需要发送日志的时候,载入这个文件,然后调用其中的函数 slog() 即可。
│   └── slog.php          :收集调试日志的函数类库文件,需要在探针文件中载入这个类库。
├── screenshots           :README.md 本文档中需要的示例图片。
└── server
    ├── bin
    │   └── socketlog-server:当前目录下启动 WebSocket 服务的文件。
    ├── config.json
    ├── index.html          : 申请 client_id 的页面。
    ├── index.js            :WebSocket 服务的入口文件。
    ├── node_modules        :Node 所需的组件目录。
    └── package.json

4、效果展示:

针对一个开源的 Web 项目,我们想基于它做二次开发。如果能在浏览网站的时候,可以从浏览器的 Console 中知道程序都做了些什么,这对二次开发将十分有帮助。

下面的效果图显示,在浏览 discuz 程序时,Console 中打印出了:

  • 程序的运行时间、吞吐率和内存消耗信息。
  • 程序的 warning,notice 等错误信息。
  • 当前页面执行了哪些 SQL 语句,以及执行 SQL 语句的调用栈信息。

打印浏览 discuz 时执行的 SQL 语句

二,安装与使用

1、安装:

  • 1,客户端,安装 Chrome 插件。

    • 方法一,在线安装:

      打开 Chrome 网上应用店,搜索 SocketLog ,然后点击 “添加至 Chrome” 完成安装。如果不能正常访问 Chrome 网上应用店,可以尝试如下的手动安装方法。

    • 方法二,手动安装:

      在 GitHub 上下载 chrome.crx,打开浏览器地址栏并输入:chrome://extensions,将chrome.crx 拖入打开的页面即可。

  • 2,服务端,安装 Socket 服务并启动。

    (请确保你的环境已经安装了 NodeJs)

    • 方法一,npm 方式安装:
      • 全局安装
        $ npm install -g socketlog-server
      • 局部安装 (切换到目标项目所在目录)
        $ npm install socketlog-server
        
      • 启动服务
        ## 普通方式运行:
        $ socketlog-server
        
        ## 如果想让服务在后台运行:
        $ socketlog-server > /dev/null &
    • 方法二,源码方式安装:
      • 根据实际情况选定目录(例如,在目标项目所在目录下)
        ## 下载项目代码或者 clone
        $ git clone https://github.com/luofei614/SocketLog.git
      • 启动服务
        ## 请注意实际项目的 index.js 文件的路径
        $ node server/index.js
  • 3,php 探针文件:

    <?php
    // 根据实际情况,确定源码的 php 目录放置位置,在需要调试的文件中引入
    include './php/slog.function.php';
    slog('hello world');
  • 4,说明:

    • 这样将会在服务器端起一个 WebSocket 服务,监听端口是 1229。
    • 我们提供公用的服务端,需要去 申请 client_id (目前已停服)。
    • 如果你的服务器有防火墙,请开启 1229 和 1116 两个端口,SocketLog 需要使用它们。

2、示例:

  • 1,在自己的程序中发送日志:

    <?php
    include './php/slog.function.php';
    slog('hello world');
  • 2,slog() 函数支持的多种日志类型:

    slog('msg', 'log');    // 一般日志
    slog('msg', 'error');  // 错误日志
    slog('msg', 'info');   // 信息日志
    slog('msg', 'warn');   // 警告日志
    slog('msg', 'trace');  // 输出日志,同时会打出调用栈
    slog('msg', 'alert');  // 将日志以alert方式弹出
    slog('msg', 'log', 'color:red;font-size:20px;'); // 自定义日志的样式,第三个参数为 css 样式
  • 3,小结:通过上面例子可以看出,slog() 函数支持三个参数:

    • 第一个参数是 日志内容
      • 日志内容不光能支持字符串哟,大家如果传递数组、对象等作为参数,一样可以打印到 Console 中。
    • 第二个参数是 日志类型
      • 可选,如果没有指定日志类型,则默认类型为 log。
    • 第三个参数是 自定样式
      • 在这里写上你的自定义 css 样式即可。

3、配置:

在载入 slog.function.php 文件后,还可以对 SocketLog 进行一些配置。

  • 1, SocketLog 配置实例:

    例如,将程序的报错信息也输出到 Console,示例代码如下:

    <?php
    include './php/slog.function.php';
    
    // 输出报错信息
    slog(
        array('error_handler' => true),  // error_handler 需要设置为 true
        'config'
    );
    echo notice; // 制造一个 notice 报错
    
    // 输出一般日志
    slog('这里是输出的一般日志');
    • 配置解析:
      • 第一个 slog() 函数有两个参数,第一个参数 传递配置项的数组,第二个参数 设置为 config
      • 第二个 slog() 函数,将字符串消息直接输出。
  • 2,支持的其他配置项:

    <?php
    include './php/slog.function.php';
    
    slog(
        array(
            'enable'              => true,        // 是否打印日志, [true | false]
            'host'                => 'localhost', // WebSocket 服务器地址,默认为 localhost
            'optimize'            => false,       // 是否显示有利于程序优化的信息,如运行时间、吞吐率、消耗内存等,默认为 false
            'show_included_files' => false,       // 是否显示本次程序运行加载了哪些文件,默认为 false
            'error_handler'       => false,       // 是否接管程序错误,将程序错误显示在 Console 中,默认为 false
            'force_client_id'     => '',          // 日志强制输出到配置的 client_id,默认为空
            'allow_client_ids'    => array()      // 限制允许读取日志的 client_id,默认为空,表示所有人都可以获得日志。
        ),
        'config'
    );
    • 参数解析:
      • optimize
        • 若设置为 true,则日志中显示有利于程序优化的信息。
        • 如:[运行时间:0.081346035003662s][吞吐率:12.29req/s][内存消耗:346,910.45kb]
      • show_included_files
        • 若设置为 true,则显示出程序运行时加载了哪些文件。
        • 比如,我们在分析开源项目时,如果不知道模板文件在那里,往往需要看一下加载的文件列表。
      • error_handler
        • 若设置为 true,则接管报错,将错误信息打印到浏览器 Console。
        • 在开发时 notice 信息能让我们快速发现 bug,但是有些 notice 是不可避免的,如果让他们显示在页面中会影响网页的正常布局,那么设置 error_handler 为 true,可让它显示在浏览器 Console 中,问题成功解决。
    • 另外,此功能结合 鸟哥 开发的 PHP Taint 也是极佳的。
      • Taint 能自动检测出 XSS、SQL 注入、Shell注入等漏洞。
      • 如果只用 PHP Taint,它的 warning 报错只告诉了变量输出的地方,并不知道变量在哪里赋值、怎么传递?
      • 通过 SocketLog,能看到调用栈,可以轻松地对有问题的变量进行跟踪。更多 Taint 的信息请参考 这里
  • 3,设置 client_id

    在 Chrome 浏览器中,可以设置插件的 client_id,可以是你任意指定的字符串。

    设置插件的 client_id

    设置了 client_id 后能实现以下功能:

    • 1,设置 allow_client_ids 配置项,只允许指定的浏览器获取日志,这样就可以把调试代码带上线。

      • 普通用户访问不会触发调试,也不会收到调试日志,而开发人员访问就能看到调试日志,这样有利于找线上 bug。

      • client_id 建议设置为:姓名拼音+随机字符串形式,原因有二。

        • 其一,如果有员工离职可以将其对应的 client_id 从配置项 allow_client_ids 中移除。
        • 其二,加上随机字符串,目的是防备别人根据你公司员工姓名猜测出 client_id,获取线上的调试日志。
      • 设置 allow_client_ids 的示例代码:

        slog(
            array(
                'allow_client_ids' => array('luofei_zfH5NbLn', 'easy_DJq0z80H')    // 可设置多个 cliet_id
            ),
            'set_config'
        );
    • 2,设置 force_client_id 配置项,让后台脚本也能输出日志到 Console 中。

      • 网站有可能使用了队列,一些业务逻辑通过后台脚本处理,由于后台脚本不和浏览器接触,并不知道当前触发程序的是哪个浏览器。所以如果需要调试,我们就需要强制将日志打印到指定 client_id 的浏览器上。
      • 因此在后台脚本中使用 SocketLog 时,设置 force_client_id 配置项,指定要强制输出浏览器的 client_id 即可(只可设置一个 client_i)。
      • 设置 force_client_id 的示例代码:
        <?php
        include './php/slog.function.php';
        
        slog(
            array(
                'force_client_id' => 'luofei_zfH5NbLn'    // 只可设置一个 cliet_id
            ),
            'config'
        );
        slog('test');

4,支持 composer(暂不推荐):

  • 1,使用 composer 的安装命令如下:

    注意:通过 composer 方式安装的文件版本较旧,有些问题,不能直接使用,故不推荐。

    composer require luofei614/socketlog
  • 2,直接调用静态方法

    <?php
    require './vendor/autoload.php';
    
    use think\org\Slog;
    
    // 配置 SocketLog
    Slog::config(
        array(
            'enable'              => true,        // 是否打印日志, [true | false]
            'host'                => 'localhost', // WebSocket 服务器地址,默认为 localhost
            'optimize'            => false,       // 是否显示有利于程序优化的信息,如运行时间、吞吐率、消耗内存等,默认为 false
            'show_included_files' => false,       // 是否显示本次程序运行加载了哪些文件,默认为 false
            'error_handler'       => false,       // 是否接管程序错误,将程序错误显示在 Console 中,默认为 false
            'force_client_id'     => '',          // 日志强制输出到配置的 client_id,默认为空
            'allow_client_ids'    => array()      // 限制允许读取日志的 client_id,默认为空,表示所有人都可以获得日志。
        )
    );
    
    Slog::log('log');      // 一般日志
    Slog::error('msg');    // 错误日志
    Slog::info('msg');     // 信息日志
    Slog::warn('msg');     // 警告日志
    Slog::trace('msg');    // 输出日志,同时会打出调用栈
    Slog::alert('msg');    // 将日志以 alert 方式弹出
    Slog::log('msg', 'log', 'color:red;font-size:20px;');  // 自定义日志的样式,第三个参数为 css 样式

5,支持 ThinkPHP:

ThinkPHP5 之后,在框架层集成了 SocketLog,只需要设置配置即可用。参考:远程调试

6,对数据库进行调试:

SocketLog 还能对 SQL 语句进行调试,自动对 SQL 语句进行 explain 分析,打印出有性能问题的 SQL 语句。 如下图所示。

对 SQL 语句进行 explain 分析

  • 图片解析:

    • 图中显示出了三条 SQL 语句,第一条 SQL 语句字体较大,是因为它有性能问题,在 SQL 语句的后台已经标注 Using filesort。
    • 我们还可以点击某个 SQL 语句查看它执行的调用栈,清楚地知道 SQL 语句是如何被执行的,方便我们分析程序、方便做开源程序的二次开发。
    • 图中第三条 SQL 语句为被点开的状态。
  • 实际用例:

    • 用 slog() 函数打印 SQL 语句时,第二个参数传递 mysql 或 mysqli 的对象即可。
  • 示例代码:

    $link = mysql_connect('localhost:3306', 'root', '123456', true);
    mysql_select_db('kuaijianli', $link);
    
    $sql = "SELECT * FROM `user`";
    
    slog($sql, $link);

    后面会以 OneThink 为例再对数据库调试进行演示

    借助上面的方法,SocketLog 还能自动为你检测出没有 where 条件的 SQL 操作,然后自动提示你。

注意:有时候在数据比较少的情况下,MySQL 查询不会使用索引,explain 也会提示 Using filesort 等性能问题,其实这时候并不是真正有性能问题,你需要自行判断,或者增加更多的数据再测试。

7,对 API 进行调试:

网站调用了 API ,如何将 API 程序的调试信息也打印到浏览器的 Console 中?

  • 方法一:配置 force_client_id

    • 前面我们讲了一个 force_client_id 配置,能将日志强制记录到指定的浏览器。这种方法同样适用于将 API 的调试信息打印到 Console 中。
    • 缺点: force_client_id 只能指定一个 client_id,如果我们的开发环境是多人共用,这种方式就不方便了。
  • 方法二:识别 User-Agent

    • 其实只要将浏览器发送的 User-Agent 再传递给 API,API 程序中不用配置 force_client_id,也能识别当前访问程序的浏览器,将日志回传回来。
    • 我们需要将 SDK 代码稍微做一下修改。调用 API 的 SDK,一般是用 curl 写的,添加下面的代码可以将浏览器的 User-Agent 传递到 API 。
      $headers = array();
      if (isset($_SERVER['HTTP_USER_AGENT'])) {
          $headers[] = 'User-Agent: ' . $_SERVER['HTTP_USER_AGENT'];
      }
      
      if (isset($_SERVER['HTTP_SOCKETLOG'])) {
          $headers[] = 'Socketlog: ' . $_SERVER['HTTP_SOCKETLOG'];
      }
      
      curl_setopt($ch, CURLOPT_HTTPHEADER, $headers);

8,区分正式和开发环境:

  • 1,进入 Chrome 浏览器的 “更多工具” ----> “扩展程序(E)” 或者直接在地址栏输入 chrome://extensions/,打开扩展程序列表页。

  • 2,找到 “SocketLog” 然后点击 “详细信息”,打开 SocketLog 的详细页。

SocketLog 详细信息

  • 3,找到“扩展程序选项”,点击右侧的按钮。

扩展程序选项

  • 4,此时在打开的 SocketLog Options 页,可以设置 “特殊环境域名” 和 “正式环境域名”。

设置开发环境的域名

9,分析开源程序:

有了 SocketLog,我们能很方便的分析开源程序,下面以 OneThink 为例,大家可以在 http://www.topthink.com/topic/2228.html 下载最新的 OneThink 程序。 安装好 OneThink 后,按下面步骤增加 SocketLog 程序。

  • 1,将 slog.php 复制到 OneThink 的程序目录中,如果没有想好将文件放到哪个子文件夹,可以暂且放到根目录。

  • 2,编辑入口文件 index.php,在代码的最前面加载 slog.function.php,并设置 SocketLog。

    <?php
    include './slog.function.php';
    slog(
        array(
            'error_handler'       => true,
            'optimize'            => true,
            'show_included_files' => true
        ),
        'config'
    );
  • 3,编辑 ThinkPHP/Library/Think/Db/Driver.class.php 文件,在这个类中的 execute() 方法为一个执行 SQL 语句的方法,增加代码:

    slog($this->queryStr, $this->_linkID);
  • 4,类中的 query() 方法也是一个执行 SQL 语句的地方,同样需要增加上面的代码。

  • 5,然后浏览网站看看效果:

enter image description here

通过 Console 的日志,访问每一页我们都知道程序干了些什么,这是一件很爽的事情。

提示: 另一种更简单的方法,因为 OneThink 每次执行完 SQL 语句都会调用 $this->debug, 所以我们可以把 slog($this->queryStr, $this->_linkID); 直接写在 Db.class.php 文件的 debug() 方法中。 这样不管是 mysqli 还是 mysql 驱动都有效。

三,视频教程

http://edu.normalcoder.com/course/941

感谢猿团的张盛翔(诺墨)提供教程。

四,About Me

  • Author: @luofei614 新浪微博:http://weibo.com/luofei614
  • 优伯立信创始人,ThinkPHP核心开发者之一,待过新浪云计算

About

微信调试、API调试和AJAX的调试的工具,能将日志通过WebSocket输出到Chrome浏览器的console中

Resources

Stars

Watchers

Forks

Packages

No packages published