LynHou

摘要： 摘要： 在使用Agent Job时， 运行SSIS包的Run as账号，必须有SSIS中connection manager的连接权限。 如果没有连接权限，可以用创建proxy账号，并确保proxy账号有连接权限的方式来执行。 案例： 1. Package包中，用到了ODBC的方式连接到数据源，但是 阅读全文

摘要： # -*- coding: utf-8 -*- 中文用户一定先用这行来声明编码方式 爬虫： 爬虫是自动访问互联网，并且提取数据的程序 (从网络上获取非结构化的数据，ETL将这些数据转换为结构化数据存储，然后做分析挖掘) 爬虫的核心，是页面规律的探索和反爬机制的处理 爬虫的价值，互联网数据为我所用 轻 阅读全文

摘要： 为什么要用到cmd界面 在这里操作的是Scripy框架的指令，不是Python代码 Parse Scripy的回调函数 fiddler 用于爬取JS存储数据的页面 项目： 1. 创建一个scrapy项目 cmd--进入scrapy.exe目录--scrapy startproject TestScr 阅读全文

摘要： 应用领域： 1. 网络爬虫 2. 大数据分析与挖掘 3. 机器学习 4. web应用 5. 游戏开发 6. 自动化运维 入门学习网站： imooc，廖雪峰，黑马 环境变量 就是告诉电脑，你的程序安装在什么地方(.exe文件能被执行到) 也即在命令行下输入python时，能够被找到 python sh 阅读全文

摘要： Python3内置了sqlite SQLite是一个软件库，实现了自给自足的、无服务器的、零配置的、事务性的 SQL 数据库引擎 是在世界上最广泛部署的 SQL 数据库引擎 SQLite 源代码不受版权限制 下载安装： http://www.sqlite.org/download.html sqli 阅读全文

摘要： Pandas的功能： 1. 结构化的数据分析; 相比excel，可以处理更大量的数据和更好的性能 2. 对数据的清洗 阅读全文

摘要： 有三几个表table1 table2 table3 分别存储了每天夜、白、中三个班的生产记录； 三个表结构相同：c1(日期) , c2 (产量) ，两列均可为空；并且三个表中的日期并非一一对应； 现在希望通过sql语句获得查询结果记录：日期 、夜班产量、白班产量、中班产量； 下面给出Oracle环境 阅读全文

摘要： 参考： http://www.cnblogs.com/CareySon/p/5262311.html msdb中，有三张与Agent Job相关的系统表，需要了解一下 msdb.dbo.sysjobs msdb.dbo.sysjobactivity msdb.dbo.sysjobhistory 有些 阅读全文

摘要： 输出为XML的两种方法 1.用数据流, 将平面文件作为DES输出 在SQL里将要输出的数据查询成为单列的字符串: SELECT (SELECT * FROM A FOR XML ROOT('A'),ELEMENTS) AS A 转换该列的数据类型为 NTEXT 用平面文件DES接收转换后的列，并保存 阅读全文

摘要： 注意： 1~5都需要SSIS安装在对应的机器上. 一、直接在Data Tool里运行 右键选择要运行的包，然后直接选择运行包 二、使用SQL Server的Job作业 可以选择：a. File System，直接找到package所在的位置 b. SSIS Catelog，需要把package部署到 阅读全文