Laravel 学习笔记之 Query Builder 源码解析(中)

   2016-10-31 0
核心提示:说明:本篇主要学习数据库连接阶段和编译SQL语句部分相关源码。实际上,上篇已经聊到Query Builder通过连接工厂类ConnectionFactory构造出了MySqlConnection实例(假设驱动driver是mysql),在该MySqlConnection中主要有三件利器:\Illuminate\Database\MysqlCo

说明:本篇主要学习数据库连接阶段和编译SQL语句部分相关源码。实际上,上篇已经聊到 Query Builder 通过连接工厂类 ConnectionFactory 构造出了 MySqlConnection 实例(假设驱动driver是mysql),在该MySqlConnection中主要有三件利器: \Illuminate\Database\MysqlConnector ; \Illuminate\Database\Query\Grammars\Grammar ; \Illuminate\Database\Query\Processors\Processor ,其中 \Illuminate\Database\MysqlConnector 是在 ConnectionFactory 中构造出来的并通过MySqlConnection的构造参数注入的,上篇中重点谈到的通过 createPdoResolver($config) 获取到的闭包函数作为参数注入到该 MySqlConnection ,而 \Illuminate\Database\Query\Grammars\Grammar\Illuminate\Database\Query\Processors\Processor 是在MySqlConnection构造函数中通过setter注入的。

开发环境:Laravel5.3 + PHP7

数据库连接器

连接工厂类 ConnectionFactory 中通过简单工厂方法实例化了 MySqlConnection ,看下该connection的构造函数:

public function __construct($pdo, $database = '', $tablePrefix = '', array $config = [])
    {
        // 该$pdo就是连接工厂类createPdoResolver($config)得到的闭包
        $this->pdo = $pdo;

        // $database就是config/database.php中设置的connections.mysql.database字段,默认为homestead
        $this->database = $database;

        $this->tablePrefix = $tablePrefix;

        $this->config = $config;

        $this->useDefaultQueryGrammar();

        $this->useDefaultPostProcessor();
    }
    
    public function useDefaultQueryGrammar()
    {
        $this->queryGrammar = $this->getDefaultQueryGrammar();
    }
    
    protected function getDefaultQueryGrammar()
    {
        return new \Illuminate\Database\Query\Grammars\Grammar;
    }
    
    public function useDefaultPostProcessor()
    {
        $this->postProcessor = $this->getDefaultPostProcessor();
    }
    
    protected function getDefaultPostProcessor()
    {
        return new \Illuminate\Database\Query\Processors\Processor;
    }

通过构造函数知道该 MySqlConnection 有了三件利器: PDO实例 ; Grammar SQL语法编译器实例 ; Processor SQL结果处理器实例 。那 PDO实例 是如何得到的呢?再看下连接工厂类的 createPdoResolver($config) 方法源码:

protected function createPdoResolver(array $config)
    {
        return function () use ($config) {
            // 等同于(new MySqlConnector)->connect($config)
            return $this->createConnector($config)->connect($config);
        };
    }

闭包里的代码这里还没有执行,是在后续执行SQL语句时调用 Connection::select() 执行的,之前的Laravel版本是没有封装在闭包里而是先执行了 连接 操作,Laravel5.3是封装在了闭包里等着执行SQL语句再 连接 操作,应该是为了提高效率。不过,这里先看下其 连接 操作的源码,假设是先执行了 连接 操作:

public function connect(array $config)
    {
        // database.php中没有配置'unix_socket',则调用getHostDsn(array $config)函数
        // $dsn = 'mysql:host=127.0.0.1;port=21;dbname=homestead',假设database.php中是默认配置
        $dsn = $this->getDsn($config);

        // 如果配置了'options',假设没有配置
        $options = $this->getOptions($config);

        // 创建一个PDO实例
        $connection = $this->createConnection($dsn, $config, $options);

        // 相当于PDO::exec("use homestead;")
        if (! empty($config['database'])) {
            $connection->exec("use `{$config['database']}`;");
        }
        
        $collation = $config['collation'];
        
        // 相当于PDO::prepare("set names utf8 collate utf8_unicode_ci")->execute()
        if (isset($config['charset'])) {
            $charset = $config['charset'];

            $names = "set names '{$charset}'".
                (! is_null($collation) ? " collate '{$collation}'" : '');

            $connection->prepare($names)->execute();
        }
        
        // 相当于PDO::prepare("set time_zone UTC+8")
        if (isset($config['timezone'])) {
            $connection->prepare(
                'set time_zone="'.$config['timezone'].'"'
            )->execute();
        }

        // 假设'modes','strict'没有设置
        $this->setModes($connection, $config);

        return $connection;
    }
    
    protected function getHostDsn(array $config)
    {
        // 使用extract()函数来读取一个关联数组,如['host' => '127.0.0.1', 'database' => 'homestead']
        // 则 $host = '127.0.0.1', $database = 'homestead', 很巧妙的一个函数
        extract($config, EXTR_SKIP);

        return isset($port)
                        ? "mysql:host={$host};port={$port};dbname={$database}"
                        : "mysql:host={$host};dbname={$database}";
    }

通过构造函数知道最重要的一个方法是 createConnection($dsn, $config, $options) ,该方法实例化了一个 PDO这里就明白了Query Builder也只是在PDO基础上封装的一层API集合,Query Builder提供的Fluent API使得不需要写一行SQL语句就能操作数据库了,使得书写的代码更加的面向对象,更加的优美。 看下其源码:

public function createConnection($dsn, array $config, array $options)
    {
        $username = Arr::get($config, 'username');

        $password = Arr::get($config, 'password');

        try {
            // 抓取出用户名和密码,直接new一个PDO实例
            $pdo = $this->createPdoConnection($dsn, $username, $password, $options);
        } catch (Exception $e) {
            $pdo = $this->tryAgainIfCausedByLostConnection(
                $e, $dsn, $username, $password, $options
            );
        }

        return $pdo;
    }
    
    protected function createPdoConnection($dsn, $username, $password, $options)
    {
        // 如果安装了Doctrine\DBAL\Driver\PDOConnection模块,就用这个类来实例化出一个PDO
        if (class_exists(PDOConnection::class)) {
            return new PDOConnection($dsn, $username, $password, $options);
        }

        return new PDO($dsn, $username, $password, $options);
    }

总之,通过上面的代码拿到了 MySqlConnection 对象,并且该对象有三件利器: PDO ; Grammar ; ProcessorGrammar 将会把Query Builder的fluent api编译成 SQLPDO 编译执行该SQL语句得到结果集 resultsProcessor 将会处理该结果集 results 。OK,那Query Builder是如何把书写的api编译成SQL呢?

编译API成SQL

还是以上篇说到的一行简单的fluent api为例:

Route::get('/query_builder', function() {
    // Query Builder
    // (new MySqlConnection)->table('users')->where('id', '=', 1)->get();
    return DB::table('users')->where('id', '=', 1)->get();
});

这里已经拿到了 MySqlConnection 对象,看下其 table() 的源码:

public function table($table)
    {
        return $this->query()->from($table);
    }
    
    public function query()
    {
        return new \Illuminate\Database\Query\Builder(
            $this, $this->getQueryGrammar(), $this->getPostProcessor()
        );
    }
    
    // SQL语法编译器
    public function getQueryGrammar()
    {
        return $this->queryGrammar;
    }
    
    // 后置处理器
    public function getPostProcessor()
    {
        return $this->postProcessor;
    }

很容易知道Query Builder提供的fluent api都是在 Builder 这个类里,上篇也说过这是个非常重要的类。该 Builder 还必须装载两个神器: Grammar SQL语法编译器 ; Processor SQL结果集后置处理器 。看下 Builder 类的 from() 方法:

public function from($table)
    {
        $this->from = $table;

        return $this;
    }

只是简单的赋值给 $from属性 ,并返回 Builder 对象,这样就可以实现fluent api。OK,看下 where('id', '=', 1) 的源码:

public function where($column, $operator = null, $value = null, $boolean = 'and')
    {
        // 从这里也可看出where()语句可以这样使用:
        // where(['id' => 1]) 
        // where([
        //   ['name', '=', 'laravel'],
        //   ['status', '=', 'active'],
        // ])
        if (is_array($column)) {
            return $this->addArrayOfWheres($column, $boolean);
        }

        // $value = 1, $operator = '=',这里可看出如果这么写where('id', 1)也可以
        // 因为prepareValueAndOperator会把第二个参数1作为$value,并给$operator赋值'='
        list($value, $operator) = $this->prepareValueAndOperator(
            $value, $operator, func_num_args() == 2 // func_num_args()为3,3个参数
        );

        // where()也可以传闭包作为参数
        if ($column instanceof Closure) {
            return $this->whereNested($column, $boolean);
        }

        // 检查操作符是否非法
        if (! in_array(strtolower($operator), $this->operators, true) &&
            ! in_array(strtolower($operator), $this->grammar->getOperators(), true)) {
            list($value, $operator) = [$operator, '='];
        }

        // 这里$value = 1,不是闭包
        if ($value instanceof Closure) {
            return $this->whereSub($column, $operator, $value, $boolean);
        }

        // where('name')相当于'name' = null作为过滤条件
        if (is_null($value)) {
            return $this->whereNull($column, $boolean, $operator != '=');
        }

        $type = 'Basic';

        // $column没有包含'->'字符
        if (Str::contains($column, '->') && is_bool($value)) {
            $value = new Expression($value ? 'true' : 'false');
        }

        // $wheres = [
        //   ['type' => 'basic', 'column' => 'id', 'operator' => '=', 'value' => 1, 'boolean' => 'and'],
        // ];
        // 所以如果多个where语句如where('id', '=', 1)->where('status', '=', 'active'),则依次在$wheres中注册:
        // $wheres = [
        //   ['type' => 'basic', 'column' => 'id', 'operator' => '=', 'value' => 1, 'boolean' => 'and'],
        //   ['type' => 'basic', 'column' => 'status', 'operator' => '=', 'value' => 'active', 'boolean' => 'and'],
        // ];
        $this->wheres[] = compact('type', 'column', 'operator', 'value', 'boolean');

        if (! $value instanceof Expression) {
            // 这里是把$value与'where'标记符绑定在该Builder的$bindings属性中
            // 这时,$bindings = [
            //    'where' => [1],
            // ];
            $this->addBinding($value, 'where');
        }

        // 最后返回该Query Builder对象
        return $this;
    }

从Builder类中 where('id', '=', 1) 的源码中可看出,重点就是把where()中的变量值按照 $column, $operator, $value 拆解并装入 $wheres[ ] 属性中,并且 $wheres[ ] 是一个'table'结构,如果有多个where过滤器,就在 $wheres[ ] 中按照'table'结构存储,如 [['id', '=', '1'], ['name', '=', 'laravel'], ...] 。并且,在 $bindings[] 属性中把where过滤器与值相互绑定存储,如果有多个where过滤器,就类似这样绑定, ['where' => [1, 'laravel', ...], ...]

OK,再看下最后的 get() 的源码:

public function get($columns = ['*'])
    {
        $original = $this->columns;

        if (is_null($original)) {
            // $this->columns = ['*']
            $this->columns = $columns;
        }
        
        // processSelect()作为后置处理器处理query操作后的结果集
        $results = $this->processor->processSelect($this, $this->runSelect());

        $this->columns = $original;

        return collect($results);
    }

从上面的源码可看出重点有两步:一是 runSelect() 编译执行SQL;二是后置处理器processor处理query操作后的结果集。说明 runSelect() 方法干了两件大事:编译API为SQL;执行SQL。在看下这两步骤之前,先看下后置处理器对查询的结果集做了什么后置操作:

// \Illuminate\Database\Query\Processors\Processor
    public function processSelect(Builder $query, $results)
    {
        // 直接返回结果集,什么都没做
        return $results;
    }

后置处理器对 select 操作没有做什么后置操作,而是直接返回了。如果由于业务需要做后置操作扩展的话,可以在 Extensions/ 文件夹下做 override 这个方法。再看下 runSelect() 的源码:

protected function runSelect()
    {
        return $this->connection->select($this->toSql(), $this->getBindings(), ! $this->useWritePdo);
    }
    
    public function getBindings()
    {
        // 把在where()方法存储在$bindings[]中的值取出来
        return Arr::flatten($this->bindings);
    }

从上面源码能猜出个大概逻辑: toSql() 方法大概就是把API编译成SQL语句,同时并把 getBindings() 中的真正的值取出来与SQL语句进行 值绑定select() 大概就是执行准备好的SQL语句。这个过程就像是先准备好$sql语句,然后就是常见的 PDO->prepare($sql)->execute($bindings) 。在这里也可看到如果想知道 DB::tables('users')->where('id', '=', 1)->get() 被编译后的SQL语句是啥,可以这么写: DB::tables('users')->where('id', '=', 1)->toSql()

OK, toSqlselect() 源码在下篇再聊吧。

总结:本文主要学习了Query Builder的数据库连接器和编译API为SQL相关源码。编译SQL细节和执行SQL的过程下篇再聊,到时见。

 
标签: 数据库 Laravel
反对 0举报 0 评论 0
 

免责声明:本文仅代表作者个人观点,与乐学笔记(本网)无关。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。
    本网站有部分内容均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责,若因作品内容、知识产权、版权和其他问题,请及时提供相关证明等材料并与我们留言联系,本网站将在规定时间内给予删除等相关处理.

  • 【Rust】标准库-Result rust数据库
    环境Rust 1.56.1VSCode 1.61.2概念参考:https://doc.rust-lang.org/stable/rust-by-example/std/result.html示例main.rsmod checked {#[derive(Debug)]pub enum MathError {DivisionByZero,NonPositiveLogarithm,NegativeSquareRoot,}pub type MathResult =
    02-09
  • 【Rust】标准库-引用 rust 数据库框架
    环境Rust 1.56.1VSCode 1.61.2概念参考:https://doc.rust-lang.org/stable/rust-by-example/std/rc.html示例rust 使用 Rc 来实现引用计数。main.rsuse std::rc::Rc;fn main() {let rc_examples = "Rc examples".to_string();{println!("--- rc_a is created
    02-09
  • DELPHI中使用UNIDAC连接ORACLE数据库
    


		
DELPHI中使用UNIDAC连接ORACLE数据库
    DELPHI中使用UNIDAC连接ORACLE数据库
      最近在DELPHI中使用到UNIDAC连接到oracle数据库,这样可以不要安装oracle客户端,比较方便使用;所以简单学习了一下,主要是用到查询和执行存储过程,其中存储过程我测试了没有返回参数、有返回参数、有多高返回参数、有返回游标等存储过程,没有深入研究
    02-09
  • Perl操作Mysql数据库 perl操作excel
    一. 安装DBI模块步骤1:从TOOLS栏目中下载DBI.zip,下载完后用winzip解开到一个temp目录,共有三个文件:ReadmeDBI.ppdDBI.tar.gz步骤2: 在DOS窗口下,temp目录中运行下面的DOS命令:ppm install DBI.ppd 如果提示无效命令,可在perl/bin目录下运行 二. 安装DBD
    02-09
  • 在OS X系统中配置Ruby on Rails使其可以访问Sql
    经过大半天的折腾,终于可以让RoR在OS X系统里访问Sql Server数据库了。这里记录一下操作的过程,免得以后忘了。第一步,安装FreeTDS从FreeTDS的官网上下载最新的稳定版的压缩包,然后,遵照这里的说明进行手工编译(好怀念微软的Setup.exe和*.msi啊),其中
    02-09
  • 小程序-列表页跳详情页(不在数据库)
    1.缓存localstorage,可以长期保存数据2.绑定到view层id='',只要显示历史记录,就能携带id到详情页e.currentTarget.id访问点击当前的view的id
    02-09
  • Mysql数据库一个小程序实现自动创建分表。
    每当跨月的时候也是系统出问题最多的时候,没有表和字段缺失是两个最常见的错误。为了解决这个问题,研究了一下mysql的 information_schema 表:information_schema这张数据表保存了MySQL服务器所有数据库的信息。如数据库名,数据库的表,表栏的数据类型与访
    02-09
  • C#连接本地Access数据库及简单操作的winform小程序
    C#连接本地Access数据库及简单操作的winform小
    连接本地Access数据库及简单操作的winform小程序一、准备工作用Access创建一个数据库并创建一个表格。(对于非远程数据库,Access十分简单。表格可参考三、界面设计)。二、代码using System;using System.Collections.Generic;using System.ComponentModel;u
    02-09
  • 解决小程序云函数操作数据库回调不执行
    背景最近写个微信小程序,在云函数中操作数据库时,明明操作成功了,理应回调success,却没有;而在小程序端,一样的代码,却能成功回调。 问题原因参见官方文档:https://developers.weixin.qq.com/miniprogram/dev/wxcloud/reference-server-api/init.html
    02-09
  • Rust 连接 SQLite 数据库
    Rust 连接 SQLite 数据库
    使用 Rust 语言连接操作 SQLite 数据库,我使用 rusqlite 这个 crate。看例子:首先,使用 cargo 创建一个 Rust 项目,然后添加依赖 rusqlite: 来到 main.rs,其余所有的代码都写在这里。首先引入 rusqlite 相关的类型,并建立一个 Person struct:Person
    02-09
点击排行