懵懂的菜鸟

摘要： 一篇了解大数据架构及Hadoop生态圈 阅读建议，有一定基础的阅读顺序为1,2,3,4节，没有基础的阅读顺序为2,3,4,1节。 第一节 集群规划 大数据集群规划（以CDH集群为例），参考链接： https://www.cloudera.com/documentation/enterprise/la 阅读全文

摘要： Server包： Application启动类: CommandLinerRunner:此接口用于实现springboot启动时，加载默认配置，比如数据库初始化。 启动类的注解： @SpringBootApplication @EnableDiscoveryClient @EnableFeignCl 阅读全文

摘要： 通过hue进行数据导入： 1，create table demo_id(`id` string) row format serde 'org.apache.hadoop.hive.serde2.OpenCSVSerde' 2, load data inpath '/user/demo.csv' into table demo_id #sql数据筛选 create table `table_na... 阅读全文

摘要： Java基础知识整理 MVC Model: 常用javaBean实现，通过各种类对数据库进行获取，并封装在对象中。 View: 常用JSP实现，通过Jsp页面来展示我们从数据库中获取的数据。 Controller: 常用Servlet实现，通过Servlet来获取经过javabean包装过的对象，然 阅读全文

摘要： #切换到root用户 sudo -i #显示当前目录下文件 ls #显示当前目录下文件及详细信息 ll ls -l #显示当前路径 pwd #查看本机所有java进程的pid jps #清屏 clear #显示主机名称 hostname #查看所有环境变量 env #设置或显示环境变量 export #显示当前PATH环境变量 echo $PATH #查看系统版本 lsb_relea... 阅读全文

摘要： #pg_sql之增删改查 #修改： inset into table_name (id, name, age, address ) select replace(old_id,old_id,new_id),#old_id字段的old_id数据，替换为new_id replace(name,name,substring(concat('【新名字】'),name),1,20)),#name字段替换... 阅读全文

摘要： 附录： chromdriver.exe与chrome版本映射及下载链接 https://blog.csdn.net/mmayanshuo/article/details/78962398 阅读全文

摘要： r = request.get(url)r.status_code 获取响应状态码r.text 获取响应内容r.headers 获取响应头r.encoding 获取响应编码r.content 获取二进制响应内容r.json() 获取JSON响应内容 阅读全文

摘要： r 打开只读文件，该文件必须存在。 r+ 打开可读写的文件，该文件必须存在。 w 打开只写文件，若文件存在则文件长度清为0，即该文件内容会消失。若文件不存在则建立该文件。 w+ 打开可读写文件，若文件存在则文件长度清为零，即该文件内容会消失。若文件不存在则建立该文件。 a 以附加的方式打开只写文件。若文件不存在，则会建立该文件，如果文件存在，写入的数据会被加到文件尾，即文件原先的内容会被... 阅读全文

摘要： Pandas操作 python使用pandas读取csv import pandas as pd #数据筛选 usetTable = pd.read_csv(filename,header = 0) mask = True ^ userTable['ID'].isin(['',''])&..... show = userTable[mask] #例子，包含6105的行 userTable[u... 阅读全文