如何实现WEB站点的后台定时任务?

时间:2022-01-09 08:14:43

1、为什么WEB站点要用后台定时任务
        也许有人要问,WEB站点本身就后台服务了,为什么还要定制后台定时任务呢?
        其实很简单,做过实际WEB应用的人都知道。一个实际站点内经常要做一些后台处理,如统计、评价、数据更新等操作,其中一些任务是非常有规律地重复,当然可以由管理员定期去执行我们开发好的WEB页上的Click事件(大家知道,IIS是客户端响应才执行后台程序的)。
        另外还一种情况,就是有些Click执行的操作,IIS响应时间是比较长的,比如作者去年做的一个应用,是评价某一地区的XX问题,由于后台执行一个模型系统,Click后要等3分钟左右才出结果(哈哈,这样的等待你受得了吗?)。这时候就可以用后台定时任务来提前实现,将结果存放好或分解成响应快的任务。

2、如何实现
        作者首先想到的是定时器,在自己开发之前,按照以前的习惯上网先查前人的成果,没想到,还真有人想过了,也做过了。在这就不再分析了,以下是摘录原文:

在ASP.net的WEB开发中经常会碰到这样的一个问题:即用户操作响应慢的情况。

出现这种情况的原因可能是本身用户操作就是一个耗时的操作,一般。Net程序设计时均在用户提交操作时即在后台处理,等到处理完成后再将操作结果返回给用户。 在小一点的系统中这样设计简单易行,而且性能上也不会有多大的问题,但在大一点的系统中这种设计就会给用户带来不好的操作体验,影响用户对系统的印象好坏。

在我以前实施的系统中对这种情况一般有两种处理方式:一、将用户操作直接记录到后台数据库,由后台程序定时扫描来执行。二、采用Asp.net的定时处理方式,直接在WEB服务器层来进行处理。

两种方式差别并不大,第一种方式主要需要一个后台程序来完成这个扫描工作。

我在这里简单介绍下第二种方式。

它的核心处理就是System.Threading.Timer。这个定时类可以用于在后台定时执行用户提交操作,

它的使用方法:

System.Threading.TimerCallback t=new System.Threading.TimerCallback (你的处理方法);

System.Threading.Timer t = new System.Threading.Timer(t,null,1000,5000);

这一段说明是在启动1秒后每隔5秒就调用所指定的代理。

在具体实现时我定义了三个类。

1、BkExecItem用于保存用户提交操作,同时它也可以序列化到磁盘上,以免关键后台任务丢失。

2、BkExec用于执行。它通过反射来调用BkExecItem中所指定的方法。另外它中间还维护一个先入

先出队列Queue<BkExecItem>,这个队列记录全部的后台处理项。

3、BkManager完成定时器的初始化,模块的参数配置等功能。

呵,暂时总结到这里。下次我会将代码也贴上来,供大家参考下。

Trackback: http://tb.blog.csdn.net/TrackBack.aspx?PostId=1681816


呵.这回跟大家讨论下ASP.net 后台处理 ,并会把我们当前项目中应用的一个后台处理类的代码贴上来参考.

后台处理也是现在管理系统设计中需要考虑到的一个问题.

什么是后台处理,可以简单认为不是在用户进程处理中完成用户提交的操作,而是将这一处理放到服务端后台进程来处理.

加入后台处理后,可以提高前台用户的操作速度,改善用户操作体验.

对于一般用户来说他对于一个系统的基本要求就是响应及时,用户很难对一个提交操作后需要等待10秒以后的管理系统产生好感,但在实际系统运行中用户操作是很难在短时间内得到响应,所以这个时候后台处理就可以发挥作用了.

我在后面所帖代码中,将需要后台处理的任务均定义成一个ExecItem对象.用户提交操作后,系统将就操作转成一个ExecItem对象加入到BkExecManager(后台处理管理对象)中的一个先入先出的队列中.

网站在启动时会自动启动BkExecManager,而BkExecManager则启动一个定时器来定时处理后台任务队列.

在处理完成时BkExecManager就队列中移去任务对象,如果操作失败将以邮件方式通知管理员来完成问题处理.

呵.现在贴代码!

1,后台处理管理对象
public class BkExecManager
    {  //定时回调。
        private static TimerCallback timerDelegate;
        private static Timer stateTimer;
        private static BkExecer m_Execer;
        public static string DataPath;
        public static string BkManager = "XXXX";
        public static int BkBufSize = 100;

        private static int Interval = 10000;

        public static BkExecer Execer
        {
            get { return m_Execer; }
        }

        static BkExecManager()
        {
            DataPath = System.AppDomain.CurrentDomain.BaseDirectory + "BkItem\\";

            if (System.Configuration.ConfigurationManager.AppSettings["Interval"] != null)
                Interval = Convert.ToInt32(System.Configuration.ConfigurationManager.AppSettings["Interval"]);
            if (System.Configuration.ConfigurationManager.AppSettings["BkBufSize"] != null)
                BkBufSize = Convert.ToInt32(System.Configuration.ConfigurationManager.AppSettings["BkBufSize"]);
            if (System.Configuration.ConfigurationManager.AppSettings["BkManager"] != null)
                BkManager = System.Configuration.ConfigurationManager.AppSettings["BkManager"];
  

            m_Execer = new BkExecer();
           
            //初始化回调
            timerDelegate = new TimerCallback(m_Execer.DoBkExec);

            //初始化定时器
            stateTimer = new Timer(timerDelegate, null, 5000, Interval);

        }

        /// <summary>
        /// 停止定时器.
        /// </summary>
        static void BkExecQuit()
        {
            stateTimer.Dispose();
        }
    }


2,后台处理执行
public class BkExecer
    {
        //维护一
个前进前出的队列。
        private Queue<ExecItem> m_BkExecItemList;
        private static object lockHelper = new object();
        private static bool m_IsBusy = false;
        public static bool IsBusy
        {
            get
            {
                return m_IsBusy;
            }
        }

        public BkExecer()
        {
            m_BkExecItemList = new Queue<ExecItem>(BkExecManager.BkBufSize);

            ////读入待处理事项
            InitData();
        }

        private void InitData()
        {
            lock (lockHelper)
            {
                string[] fnl = Directory.GetFiles(BkExecManager.DataPath);
                foreach (string s in fnl)
                {
                    if (!s.Contains(BKExecItemState.出错.ToString()))
                    {
                        ExecItem ei = ExecItem.GetObject(s);
                        m_BkExecItemList.Enqueue(ei);
                    }

                }
            }
        }

        public void AddBkExecItem(ExecItem ei)
        {
            lock (lockHelper)
            {
                //锁定资源。
                m_BkExecItemList.Enqueue(ei);
            }
        }

        public void DoBkExec(object Msg)
        {
            ExecItem ei;


            while (m_BkExecItemList.Count > 0)
            {
                lock (lockHelper)
                {
                    ei = m_BkExecItemList.Dequeue();
                }

                int rv = -1;

                try
                {
                    BindingFlags flags = BindingFlags.InvokeMethod | BindingFlags.Instance |
                        BindingFlags.Public | BindingFlags.Static;

                    object t = ei.ExecItemClass.InvokeMember(ei.ExecItemMethed, flags, null, null, ei.ExecItemParamList);
                    if (t != null)
                        rv = Convert.ToInt32(t);
                    else
                        rv = 0;     //如果是无返回则直接设置零.
                }
                catch (Exception e)
                {
                    //更新Ei的状态,保存到磁盘。
                    ei.FinishBkExec(false, e.Message);
                }
                finally
                {
                    //更新Ei的状态,删除存件
                    //保存到磁盘。
                    if (rv >= 0)
                        ei.FinishBkExec(true, "");
                    else
                        ei.FinishBkExec(false, rv.ToString());
                }
            }  
        }
    }


3,任务对象

public enum BKExecItemState { 待执行, 完成, 出错 };

    [Serializable]
    /// <summary>
    /// 后台命令集合
    /// 直接将这些后台命令二进制序列化到WEb服务器上保存。
    /// 如果完成后则从Web服务器上删除。
    /// 如果异常则发邮件通知管理员。
    /// </summary>
    public class ExecItem
    {
        /// <summary>
        /// 磁盘文档名称 。
        /// </summary>
        private string BKStoreFileName = "";

        private string ErrMsg = "";


        private BKExecItemState m_ItemState;

        public BKExecItemState ItemState
        {
            get { return m_ItemState; }
        }

        private DateTime m_ExecItemExecTime;

        public DateTime ExecItemExecTime
        {
            get { return m_ExecItemExecTime; }

        }

        private DateTime m_ExecItemCreateTime;

        public DateTime ExecItemCreateTime
        {
            get { return m_ExecItemCreateTime; }

        }
        private string m_ExecItemName;

        public string ExecItemName
        {
            get { return m_ExecItemName; }

        }
        private Type m_ExecItemClass;

        public Type ExecItemClass
        {
            get { return m_ExecItemClass; }

        }
        private string m_ExecItemMethed;

        public string ExecItemMethed
        {
            get { return m_ExecItemMethed; }

        }
        private object[] m_ExecItemParamList;

        public object[] ExecItemParamList
        {
            get { return m_ExecItemParamList; }

        }

        private string m_Op;

        /// <summary>
        /// 后台任务对象
        /// </summary>
        /// <param name="objtype">对象类型</param>
        /// <param name="ExecMethod">调用方法</param>
        /// <param name="param">调用参数</param>
        /// <param name="ExecName">任务名</param>
        /// <param name="Op">提交人</param>
        /// <param name="SavetoDisk">是否保存到磁盘</param>
        public ExecItem(Type objtype, string ExecMethod, object [] param, string ExecName, string Op,bool SavetoDisk)
        {
            this.BKStoreFileName = String.Format("{0} {1} {2}.bin", DateTime.Now.ToString("yyyy-MM-dd HH-mm-ss"), ExecMethod, Op);
            this.m_ExecItemClass = objtype;
            this.m_ExecItemCreateTime = DateTime.Now;
            this.m_ExecItemExecTime = DateTime.Now;
            this.m_ExecItemMethed = ExecMethod;
            this.m_ExecItemName = ExecName;
            this.m_ExecItemParamList = param;
            this.m_ItemState = BKExecItemState.待执行;
            this.m_Op = Op;

            if (SavetoDisk)
            SaveToDisk();
        }

        private void SaveToDisk()
        {
            IFormatter formatter = new BinaryFormatter();
            Stream stream = new FileStream(BkExecManager.DataPath + BKStoreFileName, FileMode.Create, FileAccess.Write, FileShare.None);
            formatter.Serialize(stream, this);
            stream.Close();
        }

        private void SaveToDisk2()
        {
            //
            string basedir = System.AppDomain.CurrentDomain.BaseDirectory;
            this.BKStoreFileName = String.Format("{0} {1} {2} {3}.bin", m_ExecItemCreateTime.ToString("yyyy-MM-dd HH-mm-ss"), this.m_ExecItemMethed, m_Op, m_ItemState.ToString ());

            IFormatter formatter = new BinaryFormatter();

            Stream stream = new FileStream(BkExecManager.DataPath + BKStoreFileName, FileMode.Create, FileAccess.Write, FileShare.None);
            formatter.Serialize(stream, this);
            stream.Close();
        }

        public static ExecItem GetObject(string s)
        {
            IFormatter formatter = new BinaryFormatter();

            Stream stream = new FileStream(s, FileMode.Open, FileAccess.Read, FileShare.None);
            ExecItem e = (ExecItem)formatter.Deserialize(stream);
            stream.Close();
            return e;
        }

        public void FinishBkExec(bool DoneOk, string Msg)
        {
            string FileName = BkExecManager.DataPath + BKStoreFileName;
            m_ExecItemExecTime = DateTime.Now;

            if (File.Exists(FileName))
                File.Delete(FileName);

            if (!DoneOk)
            {
                m_ItemState = BKExecItemState.出错;
                ErrMsg = Msg;
                SaveToDisk2();
                MakeMail();
            }
        }

        private void MakeMail()
        {
            StringBuilder sb = new StringBuilder();
            sb.Append("提交人:").Append(this.m_Op).Append("<BR>");
            sb.Append("提交时间:").Append(this.ExecItemCreateTime).Append("<BR>");
            sb.Append("对象:").Append(this.m_ExecItemClass.Name).Append("<BR>");
            sb.Append("方法:").Append(this.m_ExecItemMethed).Append("<BR>");
            sb.Append("参数:");
            foreach (object o in this.m_ExecItemParamList)
                sb.Append(o.ToString()).Append(",");
            sb.Append("<BR>");
            sb.Append("执行时间:").Append(this.m_ExecItemExecTime).Append("<BR>");
            sb.Append("错误信息:").Append(this.ErrMsg).Append("<BR>");
            string mb = sb.ToString();

            //APP.Mail.Send(m_Op + ":" + m_ExecItemClass.Name + "后台处理错", mb, "", BkExecManager.BkManager, "");
        }
    }


具体调用方法为
1,首先新调一个后台任务对象.
2,将之加入到任务队列中.

      ExecItem ei = new ExecItem(typeof(CacheManager), "RefreshObject", new object[] { Objtype, Params, ct }, "缓存刷新", "", false);  //注意以后可以设置为false,即刷新任务不保存到磁盘,以免影响磁盘性能.
            BkExecManager.Execer.AddBkExecItem(ei);


现在这个对象在我们项目中运行良好.

后期还想继续完善这个对象.它现在的不足有 :没有让用户知道他提交的操作执行进度,操作结果等.

Trackback: http://tb.blog.csdn.net/TrackBack.aspx?PostId=1768124