---江北

2018年5月5日

摘要：一、概述流程主要用来控制数据流程与数据流向应用则是提供一些工具类二、流程步骤 1.ETL元数据注入类似Java中的反射，在设计时不知道文件名、文件位置等，在真正执行时才知道具体的一些配置等信息具体介绍后续补充，官方Wikia:https://wiki.pentaho.com/display 阅读全文

posted @ 2018-05-05 22:02 ---江北阅读(12681) 评论(1) 推荐(1) 编辑

kettle学习笔记（六）——kettle转换步骤

摘要：一、概述转换步骤分类： 1. 增加新的列 2. 字符串处理 3. 行列变换 4. 排序/排重/字段选择 5. 其他转换步骤二、增加新的列 1.增加常量列增加一列常量的列其它增加列的操作大同小异，不一一赘述，只介绍计算器 2.计算器可以进行数值运算、日期运算等... 更多计算类型的介绍，参见阅读全文

posted @ 2018-05-05 17:34 ---江北阅读(18215) 评论(0) 推荐(1) 编辑

kettle学习笔记（五）——kettle输出步骤

摘要：一、概述数据库表： • 表输出 • 更新，删除，插入/更新 • 批量加载（mysql，oracle） • 数据同步文件： • SQL 文件输出 • 文本文件输出 • XML 输出 • Excel Output/Excel Writer 其他（报表、应用）二、数据库输出 1.表输出使用SQL的阅读全文

posted @ 2018-05-05 11:19 ---江北阅读(21802) 评论(0) 推荐(0) 编辑

2018年5月4日

kettle学习笔记（四）——kettle输入步骤

摘要：一、输入步骤概述输入步骤主要分为以下几类： • 生成记录/自定义常量 • 获取系统信息 • 表输入 • 文本文件输入 • XML 文件输入 • Json输入 • 其他输入步骤二、生成记录和自定义常量 1.生成记录由于生成记录每行都是一样的数据，所以便诞生了自定义常量数据来手工模拟数据 2.自定阅读全文

posted @ 2018-05-04 10:18 ---江北阅读(15826) 评论(0) 推荐(3) 编辑

2018年5月3日

kettle学习笔记（三）——kettle资源库、运行方式与日志

摘要：一、kettle资源库资源库是用来保存转换任务的，用户通过图形界面创建的的转换任务可以保存在资源库中。资源库可以使多用户共享转换任务，转换任务在资源库中是以文件夹形式分组管理的，用户可以自定义文件夹名称。 1.ketle资源库元数据 • 资源库资源库包括文件资源库、数据库资源库 Kettle 阅读全文

posted @ 2018-05-03 20:43 ---江北阅读(37441) 评论(1) 推荐(3) 编辑

kettle学习笔记（二）——kettle基本使用

摘要：一、子程序功能和启动方式介绍转换和作业： Kettle 的 Spoon 设计器用来设计转换（Transformation）和作业（Job）。 •转换主要是针对数据的各种处理，一个转换里可以包含多个步骤（Step）。 •作业是比转换更高一级的处理流程，一个作业里包括多个作业项（Job Entry）阅读全文

posted @ 2018-05-03 16:08 ---江北阅读(6826) 评论(2) 推荐(1) 编辑

2018年4月25日

Python3入门（十一）——IO编程

摘要：一、文件读写 python的文件操作和C是兼容的 1.读文本文件读文件操作如下：其中"r"表示read，读文件，再使用read()方法就把文件内容读取出来了和Java一样，操作文件需要close掉，并且强烈建议在finally中close，代码如下：但是！Python这里又支持了with操作阅读全文

posted @ 2018-04-25 18:03 ---江北阅读(887) 评论(0) 推荐(0) 编辑

Python3入门（十）——调试与测试

摘要：一、异常处理 1.try...except...finally... 这个也就是Java里的try...cath..finally...了，直接看经典代码：处理结果和意料是一样的：同样，可以并列捕捉多个异常：（此外在except后还可以接else:来处理没有异常）当然，以上的异常都是继承自Ba 阅读全文

posted @ 2018-04-25 11:48 ---江北阅读(1810) 评论(0) 推荐(0) 编辑

2018年4月24日

Python3入门（九）——面向对象OOP高级编程

摘要：一、使用__slots__限制属性绑定动态绑定实例的方法：但是这样，"new出来"的实例就可以为所欲为的绑定任意属性了。 Python中提供了__solts__来限制属性绑定，这样就只能动态绑定指定的属性了！ // 更多详细限制，不在此处赘述二、使用@property 上一章已经讲到，定义的属阅读全文

posted @ 2018-04-24 20:48 ---江北阅读(680) 评论(0) 推荐(0) 编辑

Python3入门（八）——面向对象OOP

摘要：一、概述老生常谈了，万物皆对象。Python作为一门面向对象的语言，也不例外直接看一个简单的类定义和实例化类的示例： // pass表示什么也不做二、类和实例这在Java等OOP语言中也很常见，这里不再赘述：类是抽象的模板，实例是具体的对象定义类通过class关键字，后面跟类名，并在类名后阅读全文

posted @ 2018-04-24 17:54 ---江北阅读(355) 评论(0) 推荐(0) 编辑

冰冻三尺，非一日之寒

公告