最近在工作上遇到一个问题,由于数据量过大所以进行了分表保存用户数据,项目dao层使用了MyBatis框架,并且用xml保存维护sql语句,
方便后期DBA介入进行查询语句的优化。
由于分表就涉及到了有相近查询语句只是表名不同的情况,刚开始使用了
<select id="selectById" resultMap="BaseResultMap" parameterType="java.util.Map" >
select
<include refid="Base_Column_List" />
from TABLENAME = #{openId,jdbcType=VARCHAR}
where ID = #{id,jdbcType=INTEGER}
</select>
这种形式进行动态插入表名,这样做是错误的,因为parameterType这种种类型在执行sql语句之前先进行了编译,而没有表名的查询语句编译
是无法通过的,所以要用执行时才进行编译的类型"STATEMENT"。
<select id="testSelect" resultMap="BaseResultMap" statementType="STATEMENT" >
select
<include refid="Base_Column_List" />
from ${tableName}
where ID = ${id}
</select>
此类的解决方法在网上很多,这里只是当个笔记来使用,可能不是很完善,可以继续参考其他相关资料进行了解。
另外在实际使用中,动态传入表名独自拿出来是没有意义的,往往配合自动生成表来使用。关于分表,无论时使用时间来进行分表还是使用用户主键来进行分表,表名都不是无意义的,一般来说都是有顺序的。下面的代码是我在实际使用中用到的自动分表方法。
1.mybatis使用xml文件建表的方法。
<update id="createNewTable" statementType="STATEMENT">
CREATE TABLE ${tableName} (
ID int(8) NOT NULL AUTO_INCREMENT,
NAME varchar(12) NOT NULL,
OPEN_ID varchar(50) NOT NULL,
NICK_NAME varchar(50) NOT NULL,
SEX int(1) NOT NULL
</update>
使用了statementType="STATEMENT"字段也实现了传入表名进行建表。
2.异常捕获,触发建表
Map<String, Object> condition = new HashMap<String, Object>();
condition.put("tableName", "user_info");
condition.put("id", 1);
try {
UserInfo userInfo = userInfoSrv.testSelect(condition);
} catch (BadSqlGrammarException e) {
logger.error("Table not exist,now creat new table!", e);
int gt = userInfoSrv.createNewTable(condition);
}
当捕获异常BadSqlGrammarException时自动建表,当然这个异常不仅仅是标示表不存在的异常,还有其他的情况,所以其他可能触发建表的异常都要提前用代码排除掉,以上就是我解决这个问题的全部思路。