Hbase概念原理扫盲
摘要：一、Hbase简介 1、什么是Hbase Hbase的原型是google的BigTable论文，收到了该论文思想的启发，目前作为hadoop的子项目来开发维护，用于支持结构化的数据存储。 Hbase是一个高可靠性（存储在hdfs上，有副本机制），高性能，面向列，非关系型的数据库（类似redis），可
阅读全文
posted @
2019-12-27 23:39
bainianminguo
阅读(784)
推荐(1) 编辑
python通过http(multipart/form-data)上传文件的方法
摘要：之前写过一篇博客，说的如何python如何通过http下载文件，今天写一篇博客来介绍如下，python如何通过request库实现上传文件 这里主要是解决multipart/form-data这种格式的文件上传，基本现在http协议上传文件基本上都是通过这种格式上传 一、思路 一般情况下，如果我们往
阅读全文
posted @
2019-12-25 22:53
bainianminguo
阅读(21356)
推荐(4) 编辑
看完这篇博客，我保证你肯定会做接口测试了。
摘要：最近给公司的新员工培训web api接口测试，发现这一块的内部需求还比较大，不仅仅是新员工，包括一些经常写接口测试老员工，对接口也是似懂非懂的，所以我绝对有必要写一篇博客来普及下。 在我们公司内部，一般使用ruby或者python语言来做接口测试，这篇文件主要是讲解使用python语言来做接口测试。
阅读全文
posted @
2019-12-22 00:44
bainianminguo
阅读(2076)
推荐(3) 编辑
python的tqdm模块介绍
摘要：Tqdm 是 Python 进度条库，可以在 Python 长循环中添加一个进度提示信息用法：tqdm(iterator) 用法1 import time from tqdm import tqdm for i in tqdm(range(10)): #do something time.sleep
阅读全文
posted @
2019-12-19 09:37
bainianminguo
阅读(3366)
推荐(0) 编辑
python的memory_profiler模块使用
摘要：本文主要介绍了python内存分析工具： memory_profiler，可以展示每一行代码执行所增加的内存，方便做内存调优和排除bug memory_profiler是第三方模块，需要安装才能使用 1、直接打印结果到终端上 结果如下 2、定义输出到文件，定义结果保留的小数位 结果如下 Mem us
阅读全文
posted @
2019-12-12 19:39
bainianminguo
阅读(1817)
推荐(0) 编辑
python：json.decoder.JSONDecodeError: Expecting property name enclosed in double quotes问题解决
摘要：有如下一个文件，内容如下 { "test1": "/root/test/test1.template", "test2": "/root/test/test2.template", "test3": "/root/test/test3.template", "test4": "/root/test/
阅读全文
posted @
2019-12-12 11:46
bainianminguo
阅读(15558)
推荐(0) 编辑
HDFS原理概念扫盲
摘要：1、概述 hdfs文件系统主要设计为了存储大文件的文件系统；如果有个TB级别的文件，我们该怎么存储呢？分布式文件系统未出现的时候，一个文件只能存储在个服务器上，可想而知，单个服务器根本就存储不了这么大的文件；退而求其次，就算一个服务器可以存储这么大的文件，你如果想打开这个文件，效率会高吗 hdfs的
阅读全文
posted @
2019-12-05 00:00
bainianminguo
阅读(1339)
推荐(1) 编辑
zookeeper扫盲
摘要：一、zookeeper概述 a、zookeeper是一个开源的分布式的项目，为分布式业务提供协调服务的apache顶级项目 那什么是分布式的呢，通俗的说就是多个机器可以同时去处理一件事情 b、zookeeper相当于大数据生态体系的润滑剂，保存各个组件的配置文件；zoo是什么意思，动物园的意思，而大
阅读全文
posted @
2019-12-01 20:07
bainianminguo
阅读(431)
推荐(0) 编辑
