上一页 1 2 3 4 5 6 ··· 10 下一页
摘要: import requests r=requests.get("http://www.baidu.com") print(r.elapsed.microseconds) #单位是微秒 阅读全文
posted @ 2019-06-25 11:09 dragonliu 阅读(3404) 评论(0) 推荐(0) 编辑
摘要: 本次搭建使用的版本是CloudManager 1.15.1 阅读全文
posted @ 2019-06-17 19:23 dragonliu 阅读(218) 评论(0) 推荐(0) 编辑
摘要: 如果选择-flag x 就是不支持布尔型 阅读全文
posted @ 2019-04-28 12:59 dragonliu 阅读(368) 评论(0) 推荐(0) 编辑
摘要: 一、inputSplit 1.什么是block 块是以 block size 进行划分数据。 因此,如果群集中的 block size 为 128 MB,则数据集的每个块将为 128 MB,除非最后一个块小于block size(文件大小不能被 block size 完全整除)。例如下图中文件大小为 阅读全文
posted @ 2019-04-22 06:55 dragonliu 阅读(170) 评论(0) 推荐(0) 编辑
摘要: 一、HDFS初识 hdfs的概念: HDFS,它是一个文件系统,用于存储文件,通过目录树定位文件,其次,他是分布式的,由很多服务器联合起来 实现功能,集群中的服务器各有各自的角色 HDFS设计适合一次写入,多次读出的场景,且不支持文件的修改,适合用来做数据分析,并不适合做网盘等应用 HDFS的组成: 阅读全文
posted @ 2019-04-04 06:06 dragonliu 阅读(396) 评论(0) 推荐(0) 编辑
摘要: 今天整理下redis-cluster操作命令 一、Cluster操作命令 相关详情,附链接 https://www.cnblogs.com/wxd0108/p/5798332.html 阅读全文
posted @ 2019-04-01 18:20 dragonliu 阅读(3113) 评论(0) 推荐(0) 编辑
摘要: 通过tqdm库可以打造自己的进度条使用 1. pip安装 2.使用 3.效果展示 阅读全文
posted @ 2019-02-22 23:37 dragonliu 阅读(808) 评论(0) 推荐(1) 编辑
摘要: 想测试一行代码的运行时间,在python中比较方便,可以直接使用timeit: 在iPython中直接使用 timeit 模块 timeit 模块定义了接受两个参数的 Timer 类。两个参数都是字符串。 第一个参数是你要计时的语句或者函数。 传递给 Timer 的第二个参数是为第一个参数语句构建环 阅读全文
posted @ 2019-02-13 17:41 dragonliu 阅读(11016) 评论(0) 推荐(1) 编辑
摘要: # -*- coding: utf-8 -*- import boto3 from boto3.s3.transfer import TransferConfig # from s3transfer.manager import TransferConfig access_key = "xxx" secret_key = "xxx" cli = boto3.client( 's3', ... 阅读全文
posted @ 2019-01-28 15:43 dragonliu 阅读(597) 评论(0) 推荐(0) 编辑
摘要: Orm使用sqlites不识别问题 这个description sqlites的数据库不识别.解决方法 去掉description golang下载国内镜像 使用golang经常出现很多包都无法下载,导致整个项目无法使用. gopm 代替go 下载第三方依赖包 可以采用gopm从golang.org 阅读全文
posted @ 2019-01-10 17:18 dragonliu 阅读(722) 评论(0) 推荐(0) 编辑
上一页 1 2 3 4 5 6 ··· 10 下一页