数据导入计算
数据的重要意义就不需要我多说了吧,本项目中的数据来源是来自荆艺系统(熟悉物流报关的朋友应该知道)导出的一张Excel,包含了一段时间内整个公司所有销售的全部记录,保密级别那是杠杠的,下面开搞!!
首先在Controllers文件夹下面添加一个控制器 命名DataInfoAndCalController.cs 在他默认action上面右击添加视图,就会在Views文件夹下面创建对应的视图,这样可以避免拼写错误。
这个View个页面很简单,引用了”_Layout.cshtml“页面后只有两个选择年月的下拉框,一个文件域,两个按钮,一个导入一个计算,剩下的就是处理了
数据提交部分给大家参考下
<form onsubmit="return funs();" enctype="multipart/form-data" method="post" action="/DataInfoAndCal/index/">
<div class="table_box">
<table cellpadding="" cellspacing="" border="" style="padding: 10px;" width="100%">
<tr>
<td width="40%" height="" align="right" style="font-size: 14px;">选择导入月份:</td>
<td height="" width="60%"> <select id="selYear" name="selYear" class="input_xz">
<option value=""></option>
<option value="" selected="selected"></option>
<option value=""></option>
</select>
<select id="selMon" name="selMon" class="input_xz">
<option value=""></option>
<option value=""></option>
<option value=""></option>
<option value=""></option>
<option value=""></option>
<option value=""></option>
<option value=""></option>
<option value=""></option>
<option value=""></option>
<option value=""></option>
<option value=""></option>
<option value=""></option>
</select>
</td>
</tr>
<tr>
<td height="" align="right" style="font-size: 14px;">选择导入文件:</td>
<td>
<input id="fileName" type="file" name="fileName" />
</td>
</tr>
<tr>
<td></td>
<td height=""> <input id="info" type="submit" value="导 入" class="bt_bg" />
<input id="cal" type="button" value="计 算" class="bt_bg" />
</td>
</tr>
</table>
</div>
</form>
数据导入 --View
function funs() {
var msg = $("#selYear option:selected").val() + '年' + $("#selMon option:selected").val() + '月';
if (confirm("确定要导入'" + msg + "'的数据吗?")) {
return true;
}
return false;
}
JS funs
下面来看Index视图,注意一点 <from>表单里面的html元素的值可以通过相同的id接受到这个标签的Value值,所以我的导入的action
[HttpPost]
public ActionResult index(string selYear, string selMon)
{
date = selYear + selMon;
GlobalValue.CurrentDate = date;
HttpPostedFileBase fb = Request.Files[];
string fileName = fb.FileName; //获取到文件名 xx.xls
if (!string.IsNullOrEmpty(fileName))
{
string extenSion = Path.GetExtension(fileName); //文件后缀 .xls
if (extenSion.Equals(".xls") || extenSion.Equals(".xlsx"))
{
string suffix = ConfigurationManager.AppSettings["FileNameSuffix"].ToString();
string ExcelName = date + suffix + extenSion;
//一:上传服务器
string pathEndName = string.Empty;
string savePath = string.Empty;
try
{
savePath = ConfigurationManager.AppSettings["FilePath"].ToString();
if (!Directory.Exists(savePath))
{
Directory.CreateDirectory(savePath);
}
//确定要写入的xls文件是否存在 不存在则复制并重新命名
string pathStart = Server.MapPath(@"~/ResourceData/Model.xls");
savePath += "\\" + ExcelName;
try
{
System.IO.File.Copy(pathStart, savePath, true); }
catch (Exception ex)
{
throw ex;
} //将文件流写入指定的文件
fb.SaveAs(savePath);
pathEndName = savePath;
}
catch (Exception ex)
{
throw ex;
} //二:将Excel表格转换为DadaSet数据集
dsCal = GetDataSet(pathEndName);
//将五张基本表存入数据库中
if (FillDataToDB(date, savePath))
{
ViewBag.returnMsg = "数据导入成功!请计算";
}
else
{
ViewBag.returnMsg = "请确认导入Excel表格格式是否规范!";
}
}
else
{
ViewBag.returnMsg = "请选择Excel文件!";
}
}
else
{
ViewBag.returnMsg = "您还没有没有选择要导入的Excel文件!";
} return View();
}
数据导入 Action
具体的 导入方法和逻辑在这里就不再写了,因为以后还要提供下载的功能,所以这里把这个Excel文件上传到了服务器上面了,因为数据两比较大,开始我是考虑的是用Linq To Sql 入库的,但是处理大批量的数据貌似不是很给力,所以最后选择了SqlBulkCopy来批量导入,效率还是不错的,我测过了,过万的数据只要两秒多点,要知道这可是导入金的不同的数据表的,把这一段贴出来鉴赏下
#region 统一将DataSet中的数据存入数据库
private bool DataSetToDB()
{
bool isSuc = false;
using (SqlConnection conn = new SqlConnection(ConfigurationManager.ConnectionStrings["GM360_RewardContext"].ToString()))
{
if (conn.State == ConnectionState.Closed)
{
conn.Open();
}
SqlTransaction tran = conn.BeginTransaction();
//同月份是否有数据 有数据则删除
DeleteSameMonthData(date);
SqlBulkCopy sbKc = null;
try
{
for (int i = ; i < dsDate.Tables.Count; i++)
{
sbKc = new SqlBulkCopy(conn, SqlBulkCopyOptions.Default, tran); sbKc.BatchSize = ;
sbKc.DestinationTableName = dsDate.Tables[i].TableName;
if (dsDate.Tables[i].TableName == "AdvanceExtendFees")
{
sbKc.DestinationTableName = "AdvanceExtendFee";
}
int count = dsDate.Tables[i].Columns.Count;
for (int k = ; k < count; k++)
{
sbKc.ColumnMappings.Add(k, k);
}
sbKc.WriteToServer(dsDate.Tables[i]);
}
isSuc = true;
tran.Commit();
}
catch (Exception ex)
{
isSuc = false;
tran.Rollback();
}
finally
{
conn.Dispose();
conn.Close();
}
}
return isSuc;
}
#endregion
批量入库
这里要操作的是一个DataSet,放进了内存里面了 ,所以不用想这个方法里面传参了,删除同月数据是写了个存储过程,运用了EF的Linq To SQL 做删除效率还是蛮可以的。好了数据成功入库
由于这里是Post提交过来的文件,所以有几点需要注意 <form>标签要添加 ” enctype="multipart/form-data" “属性数据才不会乱码,返回页面的时候刷新了页面会造成页面年月重新加载丢失导入条件,所以在这里添加两句
ViewBag.selYear = (selYear == "") ? "" : selYear;
ViewBag.selMon = (selMon == "") ? "" : selMon;
View页面的最底部添加
<script type="text/javascript">
var yearReturn = '@ViewBag.selYear';
if (yearReturn != null && yearReturn != '') {
$("#selYear option[value='" + yearReturn + "']").attr("selected", true);
}
else {
var year = '@ViewBag.year';
$("#selYear option[value='" + year + "']").attr("selected", true);
} var monthReturn = '@ViewBag.selMon';
if (monthReturn != null && monthReturn != '') {
$("#selMon option[value='" + monthReturn + "']").attr("selected", true);
}
else {
var month = '@ViewBag.month';
$("#selMon option[value='" + month + "']").attr("selected", true);
}
</script>
这里ViewBag.year 和 ViewBag.month是开始加载页面初始化的,而另外两个则是记录查询条件的
数据导入到这里也算告一段落了 计算要说的比这个还要多就留下下一篇里面说吧,篇幅实在是有限,所以就写了部分我觉得比较核心的,还是不错的哈哈