Winform开发框架之通用定时服务管理2---如何开发定时服务应用

在上篇随笔《Winform开发框架之通用定时服务管理》介绍了我的框架体系中,通用定时服务管理模块的设计以及一些相关功能的展示。我们在做项目的时候,或多或少需要和其他外部系统或者接口进行数据交互,有些是单向的获取,有些是双向的操作。这个定时操作(可能是间隔的时间,也可以能是定在某一个时刻,也可以能是让它在某天某时刻运行),那么这就需要定时服务程序来管理了,通常我们把他寄宿在Windows服务里面(这也是一种最佳的方式),这种方式最好的地方,就是它的生命周期可以随着电脑的启动而启动,而且很少需要用户干预。

1、通用定时服务管理模块框架设计

首先我们回顾一下上面文章对通用定时服务管理模块的设计思路。

整个定时服务的插件设计框架如下所示。

Windows定时服务-文件视图如下所示:

 

 

2、如何进行定时服务应用的开发

虽然看起来还是有那么几个文件,其实由于是整个框架是基于插件式的架构,因此但我们开发定时服务应用的时候(如最底下的有黑框的部分),只需要引用插件模块WHC.MyTimingPlugIn.dll并实现ITimingPlugIn接口即可,如上面的WarningService.dll就是一个典型的例子。

这个WarningService项目就是一个很好的测试例子,它只有一个类,类实现接口ITimingPlugIn。

    public class TestService : ITimingPlugIn
    {
        #region ITimingPlugIn 成员

        /// <summary>
        /// 操作进度状态事件
        /// </summary>
        public event ProgressChangedEventHandler ProgressChanged;

        public bool Excute()
        {
            Thread.Sleep(1000);
            if (ProgressChanged != null)
            {
                ProgressChanged(this, new ProgressChangedEventArgs(20, "操作进行中...20%"));
            }

            //实际工作处理1

            Thread.Sleep(1000);
            if (ProgressChanged != null)
            {
                ProgressChanged(this, new ProgressChangedEventArgs(50, "操作进行中...50%"));
            }

            //实际工作处理2

            Thread.Sleep(1000);
            if (ProgressChanged != null)
            {
                ProgressChanged(this, new ProgressChangedEventArgs(80, "操作进行中...80%"));
            }

            //实际工作处理3:输出内容,作为处理的记录
            LogTextHelper.WriteLine(string.Format("{0}......{1}", this.Name, DateTime.Now));
            Thread.Sleep(1000);
            
            if (ProgressChanged != null)
            {
                ProgressChanged(this, new ProgressChangedEventArgs(100, "操作完成"));
            }

            return true;
        }

        /// <summary>
        /// 插件程序名称
        /// </summary>
        public string Name
        {
            get;
            set;
        }

        /// <summary>
        /// 插件详细配置
        /// </summary>
        public PlugInSetting Setting
        {
            get;
            set;
        }

        #endregion
    }

 

开发编译通过后,我们需要为该定时服务应用,在插件XML配置上增加一个这样的说明,让服务程序能够正常加载并识别。

<?xml version="1.0"?>
<ArrayOfPlugInSetting>
  <PlugInSetting>
    <!--插件程序名称-->
    <Name>测试名称</Name>
    <!--插件描述内容-->
    <Description>测试描述</Description>
    <!--运行同步服务的间隔时间(单位:分钟)-->
    <ServiceCycleMinutes>1</ServiceCycleMinutes>
    <!--Windows服务在固定时刻(0~23时刻)运行-->
    <ServiceRunAtHour>23</ServiceRunAtHour>
    <!--Windows服务在每月指定天运行,小时按ServiceRunAtHour的值-->
    <ServiceRunAtDay>1</ServiceRunAtDay>
    <!--运行模式,0为间隔分钟运行  1为固定时刻运行, 2为按月某天和小时  其他值为禁用-->
    <RunMode>0</RunMode>
    <!--插件的类型名称:插件类名,程序集名称-->
    <PlugInTypeName>WarningServcie.TestService,WarningServcie</PlugInTypeName>
  </PlugInSetting>
</ArrayOfPlugInSetting>

 

上面工作完成后,在正式部署到服务器正式环境前,我们需要检查开发模块是否正常执行,是否正常运行里面的逻辑。那就用到管理程序了。

运行这个程序,除了它具有安装服务、卸载服务、启动、停止、重新启动、刷新服务等这些服务操作外,还提供了DOS测试的功能,让我们在没有部署到Windows服务前,直接进行逻辑测试,很方便的哦。

运行,我们可以看到DOS窗口的输出内容了(我们在实现内部调用的

if (ProgressChanged != null)
{
ProgressChanged(this, new ProgressChangedEventArgs(20, "操作进行中...20%"));
}

就是为了在DOS或者其他通知界面上显示日志信息的。

当然,为了验证处理逻辑,刚才我们也在内部做了记录,我们查看Log/Log.txt日志文件后,我们看到输出的结果如下所示。我们通过日志进行记录,这样可以详细看到具体的操作了。

以上就是一个简单测试应用的实现和测试过程,其他的定时应用服务也是这样实现插件接口就可以部署了。界面管理、服务管理、插件管理这些都是通用模块负责的工作,不需要变动和修改。

3、基于实际WebService同步程序的开发

上面介绍的是一个简单的例子,在我们实际开发过程中,比这个例子肯定负责很多,不过过程是一样的,下面我们来看看我一个实际定时业务应用的具体开发吧。

和上面例子一样,添加一个项目,应用插件模块dll,然后实现接口的内容,不同的是这里引用了一个WebService进行操作,因为需要把Webservice里面的数据保存到本地数据库里面(也就是所谓的同步接口)。

以上的就是一个定时服务应用的类,它实现ITimingPlugIn接口,关键的部分就是如何实现Execute接口了。

由于Webservice接口返回的数据字段比较多,有些可能不一定是我们需要存储的,在实际中发现,有些如PK字段,还有一些以Specified结尾的字段,好像是自动增加上去的。这些我们可能都不需要写到数据库里面去,而且以后WebService可能会增加一些字段,所以得到下面的结论。

1)不能以反射WebService实体类作为基准字段存储。

2)考虑尽可能通用的保存数据,最好字段不用每次都硬编码到代码,因为很多内容的。

3)可以通过获取数据库表的字段作为基准,如果webService实体类也存在该字段,作为写入依据。

从上面的几个经验总结来看,我们需要写一个以数据库表为基准,编写一个通用的服务保存机制函数,来看看如何实现的。

首先通过WebService定义,创建好需要写入的数据库字段(字段必须和WebService同名哦)

然后引入一个辅助类,来获取数据库表字段的信息列表。

    /// <summary>
    /// 通过获取表的元数据方式获取字段信息的辅助类
    /// </summary>
    public class TableSchemaHelper
    {
        /// <summary>
        /// 获取指定表的元数据,包括字段名称、类型等等
        /// </summary>
        /// <param name="tableName">数据库表名</param>
        /// <returns></returns>
        private static DataTable GetReaderSchema(string tableName)
        {
            DataTable schemaTable = null;

            string sql = string.Format("Select * FROM {0}", tableName);
            Database db = DatabaseFactory.CreateDatabase();
            DbCommand command = db.GetSqlStringCommand(sql);
            try
            {
                using (IDataReader reader = db.ExecuteReader(command))
                {
                    schemaTable = reader.GetSchemaTable();
                }
            }
            catch (Exception ex)
            {
                LogTextHelper.Error(ex);
            }

            return schemaTable;
        }

        /// <summary>
        /// 获取指定数据表字段
        /// </summary>
        /// <param name="tableName">数据库表名</param>
        /// <returns></returns>
        public static List<string> GetColumns(string tableName)
        {
            DataTable schemaTable = GetReaderSchema(tableName);

            List<string> list = new List<string>();
            foreach (DataRow dr in schemaTable.Rows)
            {
                string columnName = dr["ColumnName"].ToString();
                list.Add(columnName);
            }
            return list;
        }

        /// <summary>
        /// 获取指定数据表字段,并转化为小写列表
        /// </summary>
        /// <param name="tableName">数据库表名</param>
        /// <returns></returns>
        public static List<string> GetColumnsLower(string tableName)
        {
            DataTable schemaTable = GetReaderSchema(tableName);

            List<string> list = new List<string>();
            foreach (DataRow dr in schemaTable.Rows)
            {
                string columnName = dr["ColumnName"].ToString();
                list.Add(columnName.ToLower());
            }
            return list;
        }

具体的接口实现函数如下所示。

        public bool Excute()
        {
            ShareAccService service = new ShareAccService();
            var list = service.getAccList4Deal(unitLogo, undertaker_c, 1, 10);

            int count = list.Length;
            int i = 1;
            foreach (shareEmitfileSimpleVO obj in list)
            {
                int step = Convert.ToInt32(100 * Convert.ToDouble(i) / list.Length);

                //保存列表信息
                SaveToDatabase(obj, "MAYOR_EMIT_LIST", "ACCID", obj.accid, step);
                
                //获取并保存明细信息
                shareAccVO accVo = service.getDetailAcc4Deal(unitLogo, undertaker_c, obj.accid, obj.emitid);
                SaveToDatabase(accVo, "MAYOR_EMIT_DETAIL", "ACCID", accVo.accid, step);

                //保存明细信息里面的复函信息
                if (accVo.shareEmitfileVOs != null)
                {
                    
                    foreach (shareEmitfileVO fileVo in accVo.shareEmitfileVOs)
                    {
                        SaveToDatabase(accVo, "MAYOR_EMIT_ANSWER", "id", fileVo.id, step);
                    }
                }

                //保存附件列表信息
                List<string> attachList = new List<string>();
                if (accVo.shareAttachmentVOs != null)
                {
                    foreach (shareAttachmentVO attach in accVo.shareAttachmentVOs)
                    {
                        attachList.Add(attach.id);
                        SaveToDatabase(attach, "MAYOR_EMIT_FILE", "id", attach.id, step);
                    }
                }
                i++;

            }
            return true;
        }

我们注意到,关键的逻辑其实就是看SaveToDatabase如何实现通用的数据库保存

首先,我们需要通过反射方法看看具体有哪些实体类字段属性。

 

PropertyInfo[] proList = ReflectionUtil.GetProperties(obj);

然后看看数据库字段列表

List<string> columnList = TableSchemaHelper.GetColumnsLower(targetTable);

获得这两个信息,我们就可以对他们进行比较,然后确定哪些数据写入数据库里面(安全的写入数据库)。

                PropertyInfo[] proList = ReflectionUtil.GetProperties(obj);
                Dictionary<string, object> recordField = new Dictionary<string, object>();

                try
                {
                    //为了避免接口变化以及WebService对象的一些额外字段干扰,以数据库字段为准
                    #region 组装字段语句
                    List<string> columnList = TableSchemaHelper.GetColumnsLower(targetTable);
                    foreach (PropertyInfo info in proList)
                    {
                        if (!recordField.ContainsKey(info.Name) && columnList.Contains(info.Name.ToLower()))
                        {
                            recordField.Add(info.Name, ReflectionUtil.GetProperty(obj, info.Name));
                        }
                    }

其中recordField就是记录了,我们需要写入数据库的字段名称和值,这样我们就方便构建相应的操作语句和参数值了。

参数化语句构建如下所示:

                    string fields = ""; // 字段名
                    string vals = ""; // 字段值
                    foreach (string field in recordField.Keys)
                    {
                        fields += string.Format("{0},", field);
                        vals += string.Format(":{0},", field);
                    }
                    fields = fields.Trim(',');//除去前后的逗号
                    vals = vals.Trim(',');//除去前后的逗号
                    string sql = string.Format("INSERT INTO {0} ({1}) VALUES ({2})", targetTable, fields, vals); 
                    #endregion

当然,我们写入前,为了避免重复同步,因此需要对以存在的记录进行判断,重复的跳过。

                    string existSql = string.Format("Select Count(*) from {0} WHERE {1}='{2}' ", targetTable, primaryKey, keyValue);
                    Database db = DatabaseFactory.CreateDatabase();
                    DbCommand command = db.GetSqlStringCommand(existSql);
                    bool hasExist = Convert.ToInt32(db.ExecuteScalar(command)) > 0;
                    if (!hasExist)
                    {

在数据库不存在的记录要添加到数据库里面,如下代码所示。

                        //不存在则要插入
                        command = db.GetSqlStringCommand(sql);

                        foreach (string field in recordField.Keys)
                        {
                            object val = recordField[field];
                            val = val ?? DBNull.Value;
                            if (val is DateTime)
                            {
                                if (Convert.ToDateTime(val) <= Convert.ToDateTime("1753-1-1"))
                                {
                                    val = DBNull.Value;
                                }
                            }

                            db.AddInParameter(command, field, TypeToDbType(val.GetType()), val);
                        }
                        
                        bool result = db.ExecuteNonQuery(command) > 0;
                        if (result)
                        {
                            string tips = string.Format("操作表【{0}】的记录成功,{1}={2}", targetTable, primaryKey, keyValue);
                            if (ProgressChanged != null)
                            {
                                ProgressChanged(this, new ProgressChangedEventArgs(step, tips));
                            }
                        }

完整的SaveToDatabase函数如下所示(为了他人方便,也方便自己日后使用。呵呵...):

        /// <summary>
        /// 保存指定的记录对象到数据库
        /// </summary>
        private void SaveToDatabase(object obj, string targetTable, string primaryKey, string keyValue, int step)
        {
            if (string.IsNullOrEmpty(targetTable) || string.IsNullOrEmpty(primaryKey) ||
                string.IsNullOrEmpty(keyValue)) 
                return;

            if (ProgressChanged != null)
            {
                ProgressChanged(this, new ProgressChangedEventArgs(step, string.Format("正在处理表【{0}】{1} = {2} 的记录。", targetTable, primaryKey, keyValue)));
            }

            if (obj != null)
            {
                PropertyInfo[] proList = ReflectionUtil.GetProperties(obj);
                Dictionary<string, object> recordField = new Dictionary<string, object>();

                try
                {
                    //为了避免接口变化以及WebService对象的一些额外字段干扰,以数据库字段为准
                    #region 组装字段语句
                    List<string> columnList = TableSchemaHelper.GetColumnsLower(targetTable);
                    foreach (PropertyInfo info in proList)
                    {
                        if (!recordField.ContainsKey(info.Name) && columnList.Contains(info.Name.ToLower()))
                        {
                            recordField.Add(info.Name, ReflectionUtil.GetProperty(obj, info.Name));
                        }
                    }

                    string fields = ""; // 字段名
                    string vals = ""; // 字段值
                    foreach (string field in recordField.Keys)
                    {
                        fields += string.Format("{0},", field);
                        vals += string.Format(":{0},", field);
                    }
                    fields = fields.Trim(',');//除去前后的逗号
                    vals = vals.Trim(',');//除去前后的逗号
                    string sql = string.Format("INSERT INTO {0} ({1}) VALUES ({2})", targetTable, fields, vals); 
                    #endregion
                                        
                    #region 判断指定键值的记录是否存在并写入新的

                    string existSql = string.Format("Select Count(*) from {0} WHERE {1}='{2}' ", targetTable, primaryKey, keyValue);
                    Database db = DatabaseFactory.CreateDatabase();
                    DbCommand command = db.GetSqlStringCommand(existSql);
                    bool hasExist = Convert.ToInt32(db.ExecuteScalar(command)) > 0;
                    if (!hasExist)
                    {
                        //不存在则要插入
                        command = db.GetSqlStringCommand(sql);

                        foreach (string field in recordField.Keys)
                        {
                            object val = recordField[field];
                            val = val ?? DBNull.Value;
                            if (val is DateTime)
                            {
                                if (Convert.ToDateTime(val) <= Convert.ToDateTime("1753-1-1"))
                                {
                                    val = DBNull.Value;
                                }
                            }

                            db.AddInParameter(command, field, TypeToDbType(val.GetType()), val);
                        }
                        
                        bool result = db.ExecuteNonQuery(command) > 0;
                        if (result)
                        {
                            string tips = string.Format("操作表【{0}】的记录成功,{1}={2}", targetTable, primaryKey, keyValue);
                            if (ProgressChanged != null)
                            {
                                ProgressChanged(this, new ProgressChangedEventArgs(step, tips));
                            }
                        }
                    } 
                    #endregion
                }
                catch (Exception ex)
                {
                    string tips = string.Format("操作表【{0}】的记录出错,{1}={2}", targetTable, primaryKey, keyValue);
                    if (ProgressChanged != null)
                    {
                        ProgressChanged(this, new ProgressChangedEventArgs(step, tips));
                    }
                    LogTextHelper.Error(tips);
                    string description = "";
                    foreach (string field in recordField.Keys)
                    {
                        description += string.Format("{0}={1},", field, recordField[field]);
                    }
                    LogTextHelper.Info(description);

                    LogTextHelper.Error(ex);
                }
            }
        }

开发完成后,我们在添加XML插件配置信息,如下所示

<?xml version="1.0"?>
<ArrayOfPlugInSetting>
  <PlugInSetting>
    <!--插件程序名称-->
    <Name>测试名称</Name>
    <!--插件描述内容-->
    <Description>测试描述</Description>
    <!--运行同步服务的间隔时间(单位:分钟)-->
    <ServiceCycleMinutes>1</ServiceCycleMinutes>
    <!--Windows服务在固定时刻(0~23时刻)运行-->
    <ServiceRunAtHour>23</ServiceRunAtHour>
    <!--Windows服务在每月指定天运行,小时按ServiceRunAtHour的值-->
    <ServiceRunAtDay>1</ServiceRunAtDay>
    <!--运行模式,0为间隔分钟运行  1为固定时刻运行, 2为按月某天和小时  其他值为禁用-->
    <RunMode>0</RunMode>
    <!--插件的类型名称:插件类名,程序集名称-->
    <PlugInTypeName>WarningServcie.TestService,WarningServcie</PlugInTypeName>
  </PlugInSetting>
  
  <PlugInSetting>
      <!--插件程序名称-->
    <Name>热线数据同步</Name>
    <!--插件描述内容-->
    <Description>测试描述</Description>
     <!--运行同步服务的间隔时间(单位:分钟)-->
    <ServiceCycleMinutes>1</ServiceCycleMinutes>
    <!--Windows服务在固定时刻(0~23时刻)运行-->
    <ServiceRunAtHour>23</ServiceRunAtHour>
     <!--Windows服务在每月指定天运行,小时按ServiceRunAtHour的值-->
    <ServiceRunAtDay>1</ServiceRunAtDay>
    <!--运行模式,0为间隔分钟运行  1为固定时刻运行, 2为按月某天和小时  其他值为禁用-->
    <RunMode>1</RunMode>
    <!--插件的类型名称:插件类名,程序集名称-->
    <PlugInTypeName>MayorHotlineService.DownDataService,MayorHotlineService</PlugInTypeName>
  </PlugInSetting>
</ArrayOfPlugInSetting>

这样开发完成后,我们需要对服务进行一次测试,确认逻辑正常。

最后利用管理界面的安装服务,把它部署上去就可以了,这样它就以Windows服务的形式进行运行,不用再进行干预了。

posted on 2013-01-06 11:47  伍华聪  阅读(5298)  评论(4编辑  收藏  举报

导航