摘要:
flask_apscheduler一款定时任务器 下载: pip install Flask-APScheduler 通过定义工厂函数注册app # SCHEDULER_OPEN为配置是否开启定时 if app.config.get("SCHEDULER_OPEN"): scheduler_init 阅读全文
摘要:
使用Flask-excel导出数据 安装: pip install Flask-Excel pip install pyexcel-xlsx # 导出xlsx pip install pyexcel-xls # 导出xls 注册app import flask_excel as excel exce 阅读全文
摘要:
Matplotlib不能显示中文问题 因matplotlib不支持中文字体,要想中文支持需要进行一些配置。(仅提供linux解决方式) 1.下载中文字体连接 。我用的是SimHei.ttf 2.查看本机的matplotlib配置文件:本机python环境执行如下代码得到路径 import matpl 阅读全文
摘要:
1.默认文件操作系统修改 在bin目录下:有个dfsadmin (hdfg dfsadmin xxx)是系统有关命令,集群管理命令。 如安全模式的控制:比如集群中一半的存储副本挂掉,将启动安全模式,客户端无法启动。好比如集群刚刚启动时候,需要启动事件,此时控制客户端无法写入也是安全模式控制。可以通过 阅读全文
摘要:
常见命令: # 将本地/myfield/a.txt文件上传到linux01的hdfs中。 hdfs dfg -put /myfield/a.txt hdfs://linux01:9000/ hadoop常用操作命令 注意:需先配置环境变量 列出根目录下所有目录或文件 hdfs dfs -ls / 列 阅读全文
摘要:
hadoop-01 大数据:指无法在一定时间范围内用常规软件工具进行捕捉,管理和处理的数据集合,是需要新的处理模式化才能具有更强决策力,洞察发现力和流程化能力的海量,高增长率和多样化的信息资产。 分为: HDFS:海量数据的存储 mapreduce:分布式运算框架 YARN:资源调度平台和监控平台 阅读全文
摘要:
CentOS虚拟机之间登录免密配置: 现有如下机器: 主机名 ip地址 linux01 10.0.0.134 linux02 10.0.0.131 linux03 10.0.0.132 需要在每台主机authorized_keys文件中配置包含主机(ssh密钥)。 第一步: # 每台机器配置对应连接 阅读全文
摘要:
day18 1.多线程概述 进程:一个程序运行,程序在内存中分配的那片空间。 线程:进程中一个执行单元执行路径 进程中至少有一个线程,如果进程中有多个线程,就是多线程的程序。 并行与并发: 并行:某一时间点,有多个程序同时执行,多核CPU运行 并发:某一时间段,有多个程序同时执行,并不是真正意义的同 阅读全文
摘要:
1.多线程概述 进程:一个程序运行,程序在内存中分配的那片空间。 线程:进程中一个执行单元执行路径 进程中至少有一个线程,如果进程中有多个线程,就是多线程的程序。 并行与并发: 并行:某一时间点,有多个程序同时执行,多核CPU运行 并发:某一时间段,有多个程序同时执行,并不是真正意义的同时执行。 为 阅读全文
摘要:
1.File及构造方法 FIle类的概述:文件和目录路径的抽象表示形式。 构造方法: public File(String pathname) public File(String oarent,String child) public File(File parent,String child) 阅读全文