摘要：
整体架构图 在Binlog实时采集方面，我们采用了阿里巴巴的开源项目Canal，负责从MySQL实时拉取Binlog并完成适当解析。Binlog采集后会暂存到Kafka上供下游消费。整体实时采集部分如图中红色箭头所示。 离线处理Binlog的部分，如图中黑色箭头所示，通过下面的步骤在Hive上还原一 阅读全文
摘要：
1、什么是SOA 面向服务的体系结构（Service-Oriented Architecture，SOA）是一个组件模型。 2、为什么要使用SOA 传统的架构，软件包是被编写为独立的（self-contained）软件，即在一个完整的软件包中将许多应用程序功能整合在一起。实现整合应用程序功能的代码通 阅读全文
摘要：
错误情况： 从下面错误来看，是安装build的依赖失败 解决方法： 下载setup.py文件来安装 1、先下载 pyinstaller的安装文件，下载地址：http://www.pyinstaller.org/downloads.html 2、我安装的是3.4版本，直接下载：pyinstaller 阅读全文
摘要：
1.新建项目 2选择django 3.接下来我们进入 djangotest目录输入以下命令，启动服务器： 0.0.0.0 让其它电脑可连接到开发服务器，8000 为端口号。如果不说明，那么端口号默认为 8000。 在浏览器输入你服务器的 ip（这里我们输入本机 IP 地址： 127.0.0.1:80 阅读全文
摘要：
错误情况： 解决方法： 到这个地址下载自己版本对应的资源 https://www.lfd.uci.edu/~gohlke/pythonlibs/#mysqlclient 如下图： 我这里首先下载了 mysqlclient-1.4.2-cp35-cp35m-win_amd64.whl 这个资源文件。 阅读全文
摘要：
遇到的问题： 解决方法： 首先，使用where pip找到我的pip的安装目录 其次，配置环境变量 环境变量已经配置，但是仍是使用的时候直接输入pip提示“Did not provide a command”。 此时我们只能使用pip3来执行相关的命令加以区分 验证一下是可以的了 阅读全文
摘要：
业务上所期望解决的问题——信用问题 首先从比特币说起，大家对比特币算力证明（POW）的名词应该不陌生，先不说其耗费大量的资源，从共识机制上来看，拥有超过50%的算力即可掌控整个比特币，无论从技术还是业务的角度都是一个风险极高的机制，但神奇的金融圈没有人会去触碰这样的底线，一旦有人拥有超过50%的算力 阅读全文
摘要：
(1).首先，Configuration读取Hibernate的配置文件和映射文件中的信息，即加载配置文件和映射文件，并通过Hibernate配置文件生成一个多线程的SessionFactory对象； (2).然后，多线程SessionFactory对象生成一个线程Session 对象；Sessio 阅读全文
摘要：
★ 淘宝搜索阶段 在2008-2012这个阶段，我们重点支持淘宝搜索的业务发展，随着淘宝商品量的不断增加，逐步引入Hadoop、Hbase等开源大数据计算和存储框架，实现了搜索离线系统的分布式化，有力地支持了淘宝搜索业务的发展。但是在这个阶段，我们支持的业务线只有淘系合计不到5个业务线，为此投入了大 阅读全文
摘要：
本人第一安装python-docx很不幸就出现了，如下的错误：（如果你也遇到同样的错误，不要慌可以参考下面解决方案，由于第一次处理这种错误，如有不对欢迎大家多多批评指正） 问题所在是因为我们的setuptools版本太低了 解决办法： 1.首先进行升级 pip install -U setuptoo 阅读全文