动手实现Expression翻译器1

时间:2022-09-23 14:44:48

动手实现Expression翻译器 – Part I

 

伴随.Net3.5到来的Expression,围绕着它产生了各种各样有趣的技术与应用,Linq to object、Linq to sql、Linq to sqllite、Linq to Anything啊~~各种舒爽不侧漏。当然Expression的应用肯定不会狭隘到只能在Linq查询里,只是它本身的性质很适合作为查询表达。不过本系列的目的只是实现自己的Expression翻译器,其他不做探讨。

一. 明确需求

a) 翻译什么(Expression)

b) 翻译成什么(What?)

c) 怎么翻译(How?)

熟悉一门语言(Expression)的时候,想要翻译成别的语言,这个时候翻译成什么就只限制于你掌握的语言数目(Sql?SqlLite?),怎么翻译则取决于你对语言的熟练程度。

既然作为练习,我们就拿比较通用也比较有实际意义的SQL语言来翻译好了。

二.熟悉Expression

这里要求的是你对Expression熟悉,起码能知道它的应用,这里给个学习的链接

Expression Tree上手指南

三.找到翻译入口

3.1 LinqToObject 和 LinqToSql 的核心接口

动手实现Expression翻译器1

其中LinqToObject是直接在IEnumerable<T>接口上添加扩展方法。

LinqToSql则是在IQueryable<T>上做扩展。

我们注意到IQueryable有个Expression的成员,这个就是它的查询表达式,比如

//query为一个IQueryable对象
//使用query调用GroupBy扩展方法,返回一个新的IQueryable对象,赋值给result
//那么result.Expression = query.Expression + "x => GroupBy(x.UserName)"
//当然实际不是那么加的,做个比喻而已,总之就是链式查询
var result = query.GroupBy(x => x.UserName);

IQueryProvider像是一个工厂,其两个CreateQuery方法都接收一个Expression然后返回IQueryable对象,我们在代码里遍历IQueryable对象时,其实就是由IQueryable对象将自身的Expression传递给IQueryProvider对象翻译并Excute返回IEnumerator。

OK那么我们的入口很明显了,只要实现自己的IQueryProvider和IQueryable<T>,就可以使用一大堆针对IQueryable<T>的扩展方法啦。

首先是QueryProvider,它只是初步实现了 IQueryProvider 接口,并留下一些方法给子类实现。

动手实现Expression翻译器1
/// <summary>
/// Linq集成查询的数据提供器
/// </summary>
public abstract class QueryProvider : IQueryProvider
{
/// <summary>
/// 根据表达式创建一个可查询对象
/// </summary>
public IQueryable CreateQuery(Expression expression)
{
return (IQueryable)this.Execute(expression);
} /// <summary>
/// 根据表达式创建一个可查询对象
/// </summary>
public IQueryable<TElement> CreateQuery<TElement>(Expression expression)
{
return new DbQuery<TElement>(this, expression);
} /// <summary>
/// 根据表达式执行并返回一个结果对象
/// </summary>
object IQueryProvider.Execute(Expression expression) { return this.Execute(expression); } /// <summary>
/// 根据表达式执行并返回一个结果对象
/// </summary>
TResult IQueryProvider.Execute<TResult>(Expression expression) { return (TResult)this.Execute(expression); } /// <summary>
/// 执行表达式并返回结果
/// </summary>
public abstract object Execute(Expression expression); /// <summary>
/// 翻译表达式为查询语句
/// </summary>
public abstract string Translate(Expression expression);
}
动手实现Expression翻译器1

其次是DbQuery

动手实现Expression翻译器1
/// <summary>
/// 一个可使用Lamdba表达式查询的数据库对象
/// </summary>
public class DbQuery<T> : IQueryable<T>
{
private readonly QueryProvider _provider; /// <summary>
/// 创建一个可使用Linq集成查询的对象
/// </summary>
public DbQuery(QueryProvider provider)
{
_provider = provider;
this.Expression = Expression.Constant(this);
} /// <summary>
/// 创建一个可使用Linq集成查询的对象
/// </summary>
public DbQuery(QueryProvider provider, Expression expression)
: this(provider)
{
this.Expression = expression;
} IEnumerator<T> IEnumerable<T>.GetEnumerator()
{
return ((IEnumerable<T>)Provider.Execute(this.Expression)).GetEnumerator();
} public IEnumerator GetEnumerator()
{
return ((IEnumerable)Provider.Execute(this.Expression)).GetEnumerator();
} public Expression Expression { get; set; } public Type ElementType { get { return typeof(T); } } public IQueryProvider Provider { get { return _provider; } } public override string ToString()
{
return _provider.Translate(this.Expression);
}

}

动手实现Expression翻译器1

最后是对QueryProvider的具体实现

动手实现Expression翻译器1
/// <summary>
/// 提供数据库对象的Lamdba表达式查询服务
/// </summary>
public class DbQueryProvider : QueryProvider
{
#region 数据库对象 private readonly DbConnection _dbConnection; #endregion public DbQueryProvider(DbConnection conn)
{
_dbConnection = conn;
} public override object Execute(Expression expression)
{
var cmd = _dbConnection.CreateCommand();
cmd.CommandText = this.Translate(expression);
return cmd.ExecuteReader();
} public override string Translate(Expression expression)
{
//先不实现
return string.Empty;
}
}
动手实现Expression翻译器1
 

使用示例如下

动手实现Expression翻译器1
//初始化一个Provider,并将数据库连接传递
var provider = new DbQueryProvider(conn);
//创建一个Query,将provider传递给它
var query = new DbQuery<User>(provider);
//query.Provider.CreateQuery(query.Where(x => x.UserName == "灰机"))
var result = query.Where(x => x.UserName == "灰机"); //result.Provider.Execute(result.Expresson)
foreach (var user in result)
{
Console.WriteLine(user.UserName);
}
动手实现Expression翻译器1

看到这里整个流程应该都比较清晰了。

 

四.基础工作

4.1 既然是将Expression翻译为SQL查询式,那么在我们的项目中就得为SQL语句建模,构建一个DbExpression模块,能够更好的映射SQL表达式结构

首先是SQL表达式的类型

动手实现Expression翻译器1
/// <summary>
/// 数据库表达式类型
/// </summary>
public enum DbExpressionType
{
Query = 1000,
Select,
Column,
Table,
Join
}
动手实现Expression翻译器1

这里为什么我要让Query = 1000呢,因为这些DbExpression要跟Expression和谐共处的,算是对Expression的扩展,但是枚举不支持继承,那我就用土一点的方法,从很大的值开始(1000),以后用到就强转咯

动手实现Expression翻译器1
/// <summary>
/// 列表达式
/// </summary>
public class ColumnExpression : Expression
{
public ColumnExpression(Type type, Expression value, string selectAlias, string columnName, int index)
: base((ExpressionType)DbExpressionType.Column, type)
{
SelectAlias = selectAlias;
ColumnName = columnName;
Index = index;
Value = value;
} #region 属性 /// <summary>
/// 值表达式
/// </summary>
public Expression Value { get; set; } /// <summary>
/// 归属的查询表达式的别名
/// </summary>
public string SelectAlias { get; set; } /// <summary>
/// 列名
/// </summary>
public string ColumnName { get; set; } /// <summary>
/// 排序
/// </summary>
public int Index { get; set; } #endregion
}
动手实现Expression翻译器1

这里为了让查询类的Expression更具有抽象性,我引入了QueryExpression,让其余DbExpression都继承它。

动手实现Expression翻译器1
/// <summary>
/// 代表输出查询的表达式(Select、Table、Join等表达式)
/// </summary>
public abstract class QueryExpression : Expression
{
protected QueryExpression(ExpressionType expressionType, Type type)
: base(expressionType, type)
{ }
/// <summary>
/// 查询的别名
/// </summary>
public string Alias { get; set; } /// <summary>
/// 查询的所有列表达式
/// </summary>
public virtual IEnumerable<ColumnExpression> Columns { get; set; } /// <summary>
/// 查询的结果类型
/// </summary>
public Type ElementType { get; set; } /// <summary>
/// 查询表达式的真正类型
/// </summary>
public virtual DbExpressionType ExpressionType { get; set; } /// <summary>
/// 查询的来源
/// </summary>
public virtual Expression From { get; set; } /// <summary>
/// 查询表达式的翻译器
/// </summary>
public object Translator { get; set; } /// <summary>
/// 扩展(存放翻译器解析表达式时的必要数据)
/// </summary>
public object ExData { get; set; }
}
动手实现Expression翻译器1
动手实现Expression翻译器1
/// <summary>
/// 表达式-数据库表
/// </summary>
public class TableExpression : QueryExpression
{
/// <summary>
/// 初始化一个表示数据库表引用的表达式
/// </summary>
/// <param name="type">表内元素的类型(对应实体类)</param>
/// <param name="alias">表的别名</param>
/// <param name="name">表的名称</param>
public TableExpression(Type type, string alias, string name)
: base((ExpressionType)DbExpressionType.Table, type)
{
ElementType = type;
Alias = alias;
Name = name;
} /// <summary>
/// 表的名称
/// </summary>
public string Name { get; set; } public override DbExpressionType DbExpressionType { get { return DbExpressionType.Table; } }
}
动手实现Expression翻译器1
动手实现Expression翻译器1
/// <summary>
/// Select 表达式
/// </summary>
public class SelectExpression : QueryExpression
{
public SelectExpression(Type type, string alias, IEnumerable<ColumnExpression> columns, Expression from, Expression where = null,
 IEnumerable<ColumnExpression> groupBy = null, IEnumerable<Expression> orderBy = null, object translator = null)
: base((ExpressionType)DbExpressionType.Select, type)
{
ElementType = type;
Alias = alias;
Columns = columns;
From = from;
Where = where;
GroupBy = groupBy;
OrderBy = orderBy;
Translator = translator;
} #region 属性 /// <summary>
/// Where条件
/// </summary>
public Expression Where { get; set; } /// <summary>
/// GroupBy
/// </summary>
public IEnumerable<ColumnExpression> GroupBy { get; set; } /// <summary>
/// OrderBy
/// </summary>
public IEnumerable<Expression> OrderBy { get; set; } public override DbExpressionType DbExpressionType { get { return DbExpressionType.Select; } } #endregion
}
动手实现Expression翻译器1
动手实现Expression翻译器1
/// <summary>
/// Join 表达式
/// </summary>
public class JoinExpression : QueryExpression
{
public JoinExpression(Type type, QueryExpression left, QueryExpression right, Expression leftKey, Expression rightKey)
: base((ExpressionType)DbExpressionType.Join, type)
{
Left = left;
Right = right;
LeftKey = leftKey;
RightKey = rightKey;
} #region 属性 /// <summary>
/// 左表
/// </summary>
public QueryExpression Left { get; set; } /// <summary>
/// 右表
/// </summary>
public QueryExpression Right { get; set; } /// <summary>
/// 左表匹配键
/// </summary>
public Expression LeftKey { get; set; } /// <summary>
/// 右表匹配键
/// </summary>
public Expression RightKey { get; set; } /// <summary>
/// 左别名
/// </summary>
public string LeftAlias { get { return Left.Alias; } } /// <summary>
/// 右别名
/// </summary>
public string RightAlias { get { return Right.Alias; } } public override DbExpressionType DbExpressionType { get { return DbExpressionType.Join; } } #endregion
}
动手实现Expression翻译器1

OK,以上就是我们翻译器的基础模型了,下一节讲解如何将Expression与DbExpression互相转换并构建为SQL查询

 
 
 
标签: LinqExpression解析器

动手实现Expression翻译器1的更多相关文章

  1. 自己动手实现Expression翻译器 – Part I

    伴随.Net3.5到来的Expression,围绕着它产生了各种各样有趣的技术与应用,Linq to object.Linq to sql.Linq to sqllite.Linq to Anythi ...

  2. 自己动手实现Expression翻译器 – Part Ⅱ

    上一节我们了解了Linq查询大体上是如何运转的,并针对SQL表达式进行建模(DbExpression),这一节的重点在于如何将表达式转换为DbExpression. 可以说只要能生成结构清晰的DbEx ...

  3. 自己动手实现Expression翻译器 – Part Ⅲ

    上一节实现了对TableExpression的解析,通过反射创建实例以及构建该实例的成员访问表达式生成了一个TableExpression,并将其遍历格式化为”Select * From TableN ...

  4. 动手写IL到Lua的翻译器——准备

    文章里的代码粘过来的时候格式有点问题,原因是一开始文章是在订阅号上写的(gamedev101,文末有二维码),不知道为啥贴过来就没了格式,还要手动删行号,就没搞了. 介绍下问题背景: 小说君正在参与的 ...

  5. 自己动手写ORM的感受

    之前看到奋斗前辈和时不我待前辈的自己动手写ORM系列博客,感觉讲解的通俗易懂,清晰透彻.作为一个菜鸟,闲来也想着自己写一个ORM,一来加深自己对 ORM的理解,以求对EF,NHibernate等ROM ...

  6. Windows 8 动手实验系列教程 实验8:Windows应用商店API

    动手实验 实验 8: Windows应用商店API 2012年9月 简介 编写Windows应用商店应用最令人瞩目的理由之一是您可以方便地将它们发布到Windows应用商店.考虑到世界范围内目前有超过 ...

  7. 不可不知的表达式树(1)Expression初探

    说起Lambda表达式,大家基本都很熟悉了,而表达式树(Expression Trees),则属于80%的工作中往往都用不到的那种技术,所以即便不是什么新技术,很多人对其理解都并不透彻.此文意图从表达 ...

  8. LeetCode 失败的尝试 10&period; regular expression matching &amp&semi; 正则

    Regular Expression Matching 看到正则就感觉头大,因为正则用好了就很强大.有挑战的才有意思. 其实没有一点思路.循环的话,不能一一对比,匹配模式解释的是之前的字符.那就先遍历 ...

  9. atitit&period;自己动手开发编译器and解释器&lpar;2&rpar; ------语法分析,语义分析,代码生成--attilax总结

    atitit.自己动手开发编译器and解释器(2) ------语法分析,语义分析,代码生成--attilax总结 1. 建立AST 抽象语法树 Abstract Syntax Tree,AST) 1 ...

随机推荐

  1. Socket与SocketServer结合多线程实现多客户端与服务器通信

    需求说明:实现多客户端用户登录,实现多客户端登录一般都需要使用线程技术: (1)创建服务器端线程类,run()方法中实现对一个请求的响应处理: (2)修改服务器端代码,实现循环监听状态: (3)服务器 ...

  2. WPF入门教程系列&lpar;一&rpar; 创建你的第一个WPF项目

    WPF入门教程系列(一) 创建你的第一个WPF项目 WPF基础知识 快速学习绝不是从零学起的,良好的基础是快速入手的关键,下面先为大家摞列以下自己总结的学习WPF的几点基础知识: 1) C#基础语法知 ...

  3. 2013 ACM&sol;ICPC Asia Regional Changsha Online J Candies

    AC了,但是不知道为什么,但是恶心的不得了~最近写代码,思路都非常清晰,但是代码各种bug~T.T~说说思路吧:二分~330ms~ 小队友fribbi的思路是离线250msAC~ 预处理solve函数 ...

  4. 实现View弹性滑动例子

    弹性滑动原理 将一次大的滑动非为若干次小的滑动,并在一个时间段内完成.有一种顺畅的感觉更-好的用户体验 实现方式很多种,包括用Scroller.动画.延时策略. 使用Handler实现弹性滑动 效果可 ...

  5. Android 控件 之 Menu 菜单

    http://www.cnblogs.com/Mrs-cc/archive/2012/07/21/2603042.html 1.OptionsMenu (选项菜单)用法总结   使用方法: 方法一:添 ...

  6. C&num;winform检测电脑安装的&period;netframework版本和是否安装了某软件

    代码如下: //C#获取已安装 .NET Framework 版本 private static string[] GetDotNetVersions() { DirectoryInfo[] dire ...

  7. jQuery遍历-祖先

    祖先是父.祖父或曾祖父等等. 通过 jQuery,您能够向上遍历 DOM 树,以查找元素的祖先. 向上遍历 DOM 树 这些 jQuery 方法很有用,它们用于向上遍历 DOM 树: parent() ...

  8. c&num;游戏进程杀手

    我认为写博客还是比较重要的,特别是短时间写出一个含有新知识点的软件.这样总结下这次编程经验和再捋顺一下这次编程思路.首先来谈谈为什么想做这个小程序,一是感觉自己太贪玩想控制一下,二是也锻炼下自己的编程 ...

  9. beego 初体验 - 基础模块 - config&comma; httplibs&comma; logs

    beego 的基础模块支持了一些web开发常用的功能. 配置,http操作库,日志 配置模块: 这是我的配置文件 如何读取: httplibs:这是一个利用 httplibs 发起 get 请求的示例 ...

  10. oracle中REGEXP&lowbar;SUBSTR方法的使用

    近期在做商旅机票平台,遇到这样一个问题: 有一张tt_ticket表,用来存机票信息.里边有一个字段叫schedule,表示的是行程,存储格式为:北京/虹桥 由于公司位于上海.而上海眼下有两个机场:浦 ...