• 提高编程效率专辑—数据导入工具①

    系列文章

    【C#】代码模板生成工具

    本文链接：https://blog.csdn.net/youcheng_ge/article/details/126890673

    【C#】MySQL数据库导入工具（批量Excel插入）
    本文链接：https://blog.csdn.net/youcheng_ge/article/details/126427323

    【C#】简单二维码制作和打印工具

    本文链接：https://blog.csdn.net/youcheng_ge/article/details/126884228

    【C#】最全单据打印源码（打印模板、条形码&二维码、字体样式、logo）

    本文链接：https://blog.csdn.net/youcheng_ge/article/details/129415723

    【C#】编号生成器（定义单号规则、固定字符、流水号、业务单号）

    本文链接：https://blog.csdn.net/youcheng_ge/article/details/129129787

    目录

    前言

    一、问题描述

    二、解决方案

    三、软件开发（源码）

    3.1 界面设计

    3.2 底层库--Excel数据读取类

    3.3 底层库--XML配置参数读写辅助类

    3.4 底层库--脚本生成器

    3.5 转换按钮单击事件

    3.6 保存按钮单击事件

    3.7 脚本生成方法（核心）

    四、成果展示

    五、资源链接 

    前言

    我能抽象出整个世界，但是我不能抽象你。 想让你成为私有常量，这样外部函数就无法访问你。 又想让你成为全局常量，这样在我的整个生命周期都可以调用你。 可惜世上没有这样的常量，我也无法定义你，因为你在我心中是那么的具体。

    哈喽大家好，本专栏为【项目实战】专栏，有别于【底层库】专栏，我们可以发现增加 了『问题描述』、『项目展示』章节，十分符合项目开发流程，让读者更加清楚项目解决的问题、以及产品能够达到的效果。本专栏收纳项目开发过程的解决方案，是我项目开发相对成熟、可靠方法的提炼，我将这些问题的解决思路梳理，撰写本文分享给大家，大家遇到类似问题，可按本文方案处理。

    本专栏会持续更新，不断完善，专栏文章关联性较弱（文章之间依赖性较弱，没有阅读顺序）。如果您对本专栏感兴趣，持续关注吧，我将带你用最简洁的代码，实现复杂的功能。大家有任何问题，可以评论区反馈，私信我。

    ·提示：本专栏为项目实战篇，未接触项目开发的同学可能理解困难，不推荐阅读。

    一、问题描述

    今天，我完成了【Excel导入工具】第一版，测试成功。本文主要和大家分享一下，我为什么要开发这个工具？

    我司推进【条码管理】，一来提高信息化水平，二来方便录入单据，此时就需要有个强大的后台库，能联想到用户想要录入的数据，或者说能够让用户“以选代输”，更加快捷、准确制单。

    我们是没有基础库的，但是公司有使用用友U8产品，所有U8中的基础数据可行。经协商，他们只肯开放API数据接口给我们。所以，我决定新建数据库，将数据导入我们的库中，为啥不直连呢?一是，我们为了明确职责，不希望扯皮，不影响原U8服务器性能；二是，用友物理库还是不肯开放给我们的，涉及保密可以理解。

    好了，上面是我遇见的情况，其实基础数据建档工作，你们肯定也有做过，我觉得会有如下几种情况：

    • 基础数据初始化工作，做企业ERP管理常会遇到，需协助业务部门创建基础档案，员工档案、部门档案、存货档案、供应商档案、仓库档案、财务科目等，往往业务人员提供一个Excel表，需要我们将数据导入系统。
    • 与外部系统对接，第三方软件公司对接，对方开放了API数据接口，你需要将获得的数据存储到自己的数据库中，这是我遇到的情况。
    • 同步表数据工作，当我们研发要修复一个隐蔽的bug，但是测试环境，缺乏真实业务数据，无法重现问题，需要还原某张表的数据，却不想还原整个库。
    • 跨平台数据转换工作，发生在新老系统更替，原先公司用的oracle数据库，现在要换Sql Server数据库，业务数据希望转换过去。

    二、解决方案

    我的想法是开发一个工具，可以将Excel表格转化成SQL插入语句，这样我们拿SQL语句放数据库里一执行就成功了。

    我暗自定了几点要求：

    • 工具通用型，支持任何表，不能说一个业务，开发一个工具，不得累死。
    • 支持Excel 97-2003 工作簿（*.xls）、Excel 工作簿(.xlsx)
    • 界面友好化，功能完善，能运用到多场景。

    三、软件开发（源码）

    3.1 界面设计

    C#窗体，第一步总是先设计界面。你们参考我，设计的界面吧。

    主页面：

     配置界面

    3.2 底层库--Excel数据读取类

    创建类ExcelHelper.cs，实现将Excel中sheet数据读取，并转换转换成DataTable格式。

    请阅读下文：

    C#底层库--Excel数据读取类（可读加密表格）

    本文链接：https://blog.csdn.net/youcheng_ge/article/details/126887445

    3.3 底层库--XML配置参数读写辅助类

    创建类AppConfig.cs，实现【配置】界面，参数的读取和写入。

    请阅读下文：

    C#底层库--XML配置参数读写辅助类（推荐阅读）

    本文链接：https://blog.csdn.net/youcheng_ge/article/details/129175304

    3.4 底层库--脚本生成器

    创建类CodeFactory.cs，实现SQL Insert 语句的生成，请复制以下代码：

    1. using System;
    2. using System.Data;
    3. using System.Text;
    4.  
    5. namespace ExcelImportTool
    6. {
    7.     public static class CodeFactory
    8.     {
    9.         /// 
    10.         /// 创建Insert语句（采用分批处理）
    11.         /// 
    12.         /// DataTable
    13.         /// 数据库表名
    14.         /// 每批数量
    15.         /// 
    16.         public static string CreateInsertSQLBatch(DataTable a_dtSource, string a_strTableName,int a_intBatchNum)
    17.         {
    18.             //insert语句
    19.             string str_Insert = $"INSERT INTO {a_strTableName} ({GetColumnsByDataTable(a_dtSource)})";
    20.  
    21.             bool l_bflag = false;
    22.             StringBuilder str_builder = new StringBuilder();
    23.  
    24.             //表格总行数
    25.             int int_RowCount = a_dtSource.Rows.Count;
    26.             //select语句，采用for循环便于计算行数
    27.             for (int i = 0; i < int_RowCount; i++)
    28.             {
    29.                 if (i % a_intBatchNum == 0)
    30.                 {
    31.                     if (l_bflag)
    32.                     {
    33.                         //以分号结尾，分批执行
    34.                         str_builder.Append(";");
    35.                     }
    36.                     str_builder.AppendLine();
    37.                     str_builder.AppendLine(str_Insert);
    38.                     l_bflag = false;
    39.                 }
    40.  
    41.                 if (l_bflag)
    42.                 {
    43.                     str_builder.AppendLine();
    44.                     str_builder.AppendLine("UNION ALL");
    45.                 }
    46.  
    47.                 DataRow dr = a_dtSource.Rows[i];
    48.  
    49.                 str_builder.Append("SELECT ");
    50.                 string text = string.Empty;
    51.                 for (int j = 0; j < a_dtSource.Columns.Count; j++)
    52.                 {
    53.                     text = text + "'" + dr[j].ToString() + "'" + ",";
    54.                 }
    55.                 //去掉末尾分号
    56.                 text = DelLastComma(text);
    57.                 str_builder.Append(text);
    58.                 l_bflag = true;
    59.             }
    60.  
    61.             return str_builder.ToString();
    62.         }
    63.  
    64.  
    65.         /// 
    66.         /// 创建Insert语句
    67.         /// 
    68.         /// DataTable
    69.         /// 数据库表名
    70.         /// 
    71.         public static string CreateInsertSQL(DataTable a_dtSource, string a_strTableName)
    72.         {
    73.             //insert语句
    74.             string str_Insert = $"INSERT INTO {a_strTableName} ({GetColumnsByDataTable(a_dtSource)})";
    75.  
    76.             bool l_bflag = false;
    77.             StringBuilder str_builder = new StringBuilder();
    78.             str_builder.AppendLine(str_Insert);
    79.  
    80.             //表格总行数
    81.             int int_RowCount = a_dtSource.Rows.Count;
    82.             //select语句，采用for循环便于计算行数
    83.             for (int i = 0; i < int_RowCount; i++)
    84.             {
    85.                 if (l_bflag)
    86.                 {
    87.                     str_builder.AppendLine("UNION ALL");
    88.                 }
    89.  
    90.                 DataRow dr = a_dtSource.Rows[i];
    91.  
    92.                 str_builder.Append("SELECT ");
    93.                 string text = string.Empty;
    94.                 for (int j = 0; j < a_dtSource.Columns.Count; j++)
    95.                 {
    96.                     text = text + "'" + dr[j].ToString() + "'" + ",";
    97.                 }
    98.                 //去掉末尾分号
    99.                 text = DelLastComma(text);
    100.                 str_builder.Append(text);
    101.                 str_builder.AppendLine();
    102.                 l_bflag = true;
    103.             }
    104.  
    105.             return str_builder.ToString();
    106.         }
    107.  
    108.  
    109.         /// 
    110.         /// 内部获取字段列表
    111.         /// 
    112.         ///  DataTable 
    113.         /// < returns > SQL 
    114.         private static string GetColumnsByDataTable(DataTable a_tbSchema)
    115.         {
    116.             string text = string.Empty;
    117.             for (int i = 0; i < a_tbSchema.Columns.Count; i++)
    118.             {
    119.                 string text2 = a_tbSchema.Columns[i].ColumnName;
    120.                 text = text + text2 + ",";
    121.             }
    122.             return DelLastComma(text);
    123.         }
    124.  
    125.  
    126.         /// 
    127.         /// 删除最后结尾的逗号
    128.         /// 
    129.         /// 源字符串
    130.         /// string
    131.         public static string DelLastComma(string a_strSource)
    132.         {
    133.             return a_strSource.Substring(0, a_strSource.LastIndexOf(","));
    134.         }
    135.  
    136.     }
    137. }

    扩展阅读，本库已经二次优化，方法已经汇总进《MySQLBuilder脚本构建类》中。

    C#底层库--MySQLBuilder脚本构建类（select、insert、update、in、带条件的SQL自动生成）

    本文链接：https://blog.csdn.net/youcheng_ge/article/details/129179216

    3.5 转换按钮单击事件

    没啥好讲解的，都可以看得懂吧

    1.         //转换
    2.         private void BTN_Change_Click(object sender, EventArgs e)
    3.         {
    4.             if (!File.Exists(this.text_ExcelDir.Text))
    5.             {
    6.                 FrmTips.ShowTipsInfo(this, "文件不存在，请检查！");
    7.                 return;
    8.             }
    9.  
    10.             ConvertSQL();
    11.         }

    3.6 保存按钮单击事件

    1.         //保存
    2.         private void BTN_Save_Click(object sender, EventArgs e)
    3.         {
    4.             string l_strFileName = DateTime.Now.ToString("yyyyMMddHHmmssff") + ".txt";
    5.  
    6.             FolderBrowserDialog fbd = new FolderBrowserDialog();
    7.             fbd.Description = "选择脚本保存位置";
    8.             fbd.SelectedPath = AppDomain.CurrentDomain.BaseDirectory;
    9.             DialogResult dialogResult = fbd.ShowDialog();
    10.             if (dialogResult == DialogResult.OK)
    11.             {
    12.                 string l_strDir = Path.Combine(fbd.SelectedPath, l_strFileName);
    13.                 Utils.FileWrite(richTextBox1.Text, l_strDir);
    14.                 FrmTips.ShowTipsSuccess(this, "保存成功！");
    15.  
    16.                 System.Diagnostics.Process.Start(l_strDir);
    17.             }
    18.         }

    3.7 脚本生成方法（核心）

    因为二次调用，所以单独出一个方法。转换、保存 按钮单击事件，均有调用此方法。

    1.        //转换SQL
    2.         private void ConvertSQL()
    3.         {
    4.             this.richTextBox1.Clear();
    5.             string l_strFileName = Path.GetFileNameWithoutExtension(this.text_ExcelDir.Text);
    6.  
    7.             ExcelHelper excelHelper = new ExcelHelper();
    8.             DataTable dt_Temp = excelHelper.ExcelToDataTableWhithEncryp(this.text_ExcelDir.Text);
    9.             if (dt_Temp == null || dt_Temp.Rows.Count==0)
    10.             {
    11.                 FrmTips.ShowTipsError(this, "表格读取为空！");
    12.                 return;
    13.             }
    14.  
    15.             //每批数量
    16.             decimal dec_num = 100;
    17.             decimal.TryParse(AppConfig.GetValue("batch_num"), out dec_num);
    18.  
    19.             //是否开启
    20.             bool b_Open = false;
    21.             bool.TryParse(AppConfig.GetValue("open_tag"), out b_Open);
    22.  
    23.             if (b_Open)
    24.             {
    25.                 int int_num = Convert.ToInt32(Math.Truncate(dec_num));
    26.                 richTextBox1.AppendText(CodeFactory.CreateInsertSQLBatch(dt_Temp, l_strFileName, int_num));
    27.             }
    28.             else
    29.             {
    30.                 richTextBox1.AppendText(CodeFactory.CreateInsertSQL(dt_Temp, l_strFileName));
    31.             }
    32.  
    33.             FrmTips.ShowTipsSuccess(this, "转换成功！");
    34.         }

    四、成果展示

    这里主要展示我开发完的程序，你们也可以在我的基础上进行个性化的修改。

    主界面

     

     点击复制按钮，拷贝脚本到数据库管理工具。

    好了，是不是很完美。

    提示：为了高性能执行，建议数据分批，在【配置】界面设置分批数量。 

    五、资源链接 

    工具名称：ExcelImportTool

    链接：https://pan.baidu.com/s/1NgZEGVzXDXecUxiqMmYAeg?pwd=858o 
    提取码：858o

  • 相关阅读:
    点分治学习笔记 / 洛谷 P3806【点分治】
    38. 【Android教程】Handler 消息传递机制
    Nginx实例配置详解
    未支付订单的过期删除策略
    spring复习（第二天上午）（黑马版）
    20221115使用google文档翻译SRT格式的字幕
    Prometheus+Consul 自助服务发现
    外贸SEO外链类型有哪些？外链建设如何做？
    libopenssl 实现私钥加密公钥解密
    Java异步实现的N种方式
  • 原文地址：https://blog.csdn.net/youcheng_ge/article/details/126427323