摘要：
1.从调度到airflow ETL，是英文 Extract，Transform，Load 的缩写，用来描述将数据从来源端经过抽取（extract）、转换（transform）、加载（load）至目的端的过程，合理安排三者以及三者子类的过程被称之为数据调度。 在数据调度中，数据流程之间的依赖主要是以下 阅读全文
摘要：
MySql数据库查询时，使用group_concat报错“Row XXX was cut by GROUP_CONCAT()”，查了下是因为group_concat有个最大长度的限制，超过最大长度就会被截断掉， 我们检查一下mysql的全局环境变量： mysql> SELECT @@global.g 阅读全文
摘要：
TEXT类型一般分为 TINYTEXT(255长度)、TEXT(65535)、 MEDIUMTEXT（int最大值16M），和LONGTEXT(long最大值4G)这四种，它被用来存储非二进制字符集，二进制字符集使用blob类型的字段来存储。 对于text列，插入时MySQL不会对它进行填充，并且s 阅读全文
摘要：
1.简介 做了一个excel的风控模板，里面含有宏，我用python的第三方xlwings部署到linux后发现，linux环境并不支持xlwings。 Python 程序都是脚本的方式，一般是在解析器里运行，如果要发布出去，需要提前安装解析器才可以运行。那么只能退而求其次，把所有代码封装成一个.e 阅读全文
摘要：
概述 Mysql从5.7.8版本开始支持JSON字段，可以高效的处理JSON文档。相比字符串字段，JSON字段有下面的几处优势： 自动的校验JSON格式，无效的文档会产生错误 优化的存储格式（结构化的二进制格式），访问数据时不需要额外的解析，可能通过键或者数组索引来直接该问数据，而不是读取整个字段。 阅读全文
摘要：
一、名词含义 我们在做产品推广时，最常见的合作方式有CPA/CPS/CPC/CPM，以及不常见的CPD/CPT/CPL，以下来详细解释这7个名词。 CPA：指的是按激活或者注册付费，比如一个激活，就是一个CPA。Cost Per Action 每行动成本 CPS：以实际销售产品数量来换算广告刊登金额 阅读全文
摘要：
什么是POP3协议： POP3是Post Office Protocol 3的简称，即邮局协议的第3个版本,它规定怎样将个人计算机连接到Internet的邮件服务器和下载电子邮件的电子协议。它是因特网电子邮件的第一个离线协议标准,POP3允许用户从服务器上把邮件存储到本地主机（即自己的计算机）上，同 阅读全文
摘要：
numpy.array插入一行或一列 import numpy as np a = np.array([[1,2,3],[4,5,6],[7,8,9]]) b = np.array([[0,0,0]]) c = np.insert(a, 0, values=b, axis=0) d = np.ins 阅读全文
摘要：
问题 1. 将DataFrame数据保存到mysql后，添加索引出现错误提示： BLOB/TEXT column used in key specification without a key length 2. mysql> CREATE INDEX credit_creditchannel_pa 阅读全文
摘要：
show full processlist; //列出当前的操作process，看到很多处于waiting的process，说明已经有卡住的proces。 这里我们看到是sending data的这条语句卡住了mysql + + + + + + + + + + + + | Id | User | H 阅读全文