摘要：
---恢复内容开始---一，大数据类: 问：一亿条字符串，固定长度，其中有重复的两条数据，如何找到(不限制方法) 1.linux系统下一条命令 2.导入数据库添加非聚焦索引，一条select 命令 3.文件流写成1000个文件，并计算hash值 % 100 这样就有100个文件，开多线程并行计算ha... 阅读全文
摘要：
上次用客户端进行数据刷新的方式,和官方的Demo实现存在差异性,今天花了一点时间好好研究了一下后台时时刷新的方式.将写的代码重新update了一次,在这之前找过好多的资料,发现都没有找到好的例子,自己查了一下官方的DEMO然后本地实现了一次,结合Jqgrid的前端库,发现还是非常便捷的.不多说了... 阅读全文
摘要：
这几天想着将一个winform的工具上线到web上,因为对时时性的要求比较高,找朋友咨询了一下推荐了SignlarR 框架,比较强大.昨天才看到,今天研究了一下将里面的例子都拿出来共享.官方的参考:http://www.asp.net/signalr/overview/getting-started... 阅读全文
摘要：
人人都说25岁是一道坎，我却之后的一年时间才明白这道坎在哪里。 从毕业到现在快整2年了，回望刚参加工作时的羞涩，在到现在的种种变化，感觉2年时间过的很充实，也很有意义。 工资水平也从刚来的2k，到今天的过了及格线；从当初什么都不懂的技术新手，到现在水平上的显著提升；从之前和别人讲话都会... 阅读全文
摘要：
上期回顾:SSIS从理论到实战,再到应用(6)----SSIS的自带日志功能在抽取各种应用的数据时候，经常会遇到数据需要转换类型的操作，比如日期在源数据库是dbtime类型，在本地需要用到字符串，这个时候有两种常用的方案来解决：1.通过语法在源数据库进行类型转换，类似sqlserver的conver... 阅读全文
摘要：
上期回顾:SSIS从理论到实战,再到应用(5)----流程控制之Foreach循环 博主最近新负责了一个ssis大项目的架构，压力山大，所以都没有怎么正儿八经的更文章了，给园友们说声抱歉，接下来的一些文章可能都比较偏重于实用技巧方面^_^. 我们都知道，不论在任何一个项目，日志系统的重要意义都是不言... 阅读全文
摘要：
上期回顾:SSIS从理论到实战,再到应用(4)----流程控制之For循环 上一期讲了For循环，Foreach循环相比而言要更复杂一点，里面涉及变量的类型，数据接收问题，下面我用一个简单的示例来演示Foreach循环容器： 假设我们有这样一个需求: 从数据库中取出一列数据，循环输出这列数据的每个值 一，拖入sql任务，定义一个Object类型的变量接收取到的数据 二，设置好接收变量 三，拖入Foreach循环容器，设置循环类型及循环变量目标 四，定义循环的临时变量(类似代码段 foreach(var item in array ) 里面的item) 五，操作临时变... 阅读全文
摘要：
上期回顾:SSIS从理论到实战,再到应用(3)----SSIS包的变量，约束，常用容器 在SSIS体系中，控制流可能经常会遇到，比如你取得一列数据，需要循环这列数据然后做相应的操作时，就需要用到循环，下面，我来操作两种循环方式，FOR循环和Foreach循环.一，For循环 写过代码的知道，For循环的常用写法是这样的：For(var i = 0 ; i Var i = 0 EvalExpression => i i ++ 这样一对比就很容易明白For容器里面的操作了，我们来作这样一个操作，定义一个变量，每次让MessageBox弹出这样的一个值； 1，拖入For容器 2，在... 阅读全文
摘要：
上期回顾：SSIS从理论到实战,再到应用(2)----SSIS包的控制流首先我们来看看包里面的变量 SSIS包变量分为两种，一种是系统的内置变量，是一个SSIS包初使化都会自带的，一种是用户自己定义的变量。 在SSIS包中，常用的变量的类型包含以下：Int32，String,Boolean,DateTime,Object......二，让我们来看看包里面的约束(线) 如图中所示的线就是约束，官方的解释是这样的：优先约束在控制流中链接包中的可执行文件、容器和任务，并指定决定可执行文件是否运行的条件。在图中的表达就是，当“得到变量值”这一步执行成功后，并且满足优先约束中的条件的时候，才会执行”插. 阅读全文
摘要：
前文回顾:SSIS从理论到实战,再到应用(1)----创建自己的第一个包 上次说到创建了自己的第一个包，完成了简单的数据从数据库=>数据库，以及Excel文件=>数据库过程,这一次咱们回看看一个包里面到底有哪些好玩的元素构成: 咱们一般写过代码的人都知道，很多的看似很复杂的功能都是由：顺序，选择，循环构成的。SSIS也不例外，咱们可以看到SSIS包里面工具选项卡里面已经写出他的本质了： SSIS包里面功能元素包含以下图所示: 控制流元素：控制包的整体执行顺序，以及执行方式 数据流元素：控制数据Load(数据从哪里来，到哪里去) 我们先来看看控制流元素：SQ... 阅读全文