05 2018 档案

Hadoop之HBase
摘要：从BigTable说起： BigTable用于解决互联网的搜索问题 1. 建立互联网的索引 爬虫持续不断的抓取新的网页，这些网页每一页一行的存储到BIgTable中 MapReduce计算作业运行在整个表上，生成索引，为网络搜索应用做准备 2. 搜索互联网 用户发起网络搜索请求 搜索网络应用查询建立 阅读全文
posted @ 2018-05-26 23:21 式微胡不归 阅读(136) 评论(0) 推荐(0)
hadoop之HDFS
摘要：分布式文件系统HDFS 需要实现以下的一些目标： 1. 廉价的硬件设备 2. 流数据读写（和传统系统区别的地方，全部的数据一股脑的读取） 3. 大数据集（一个文件可能有时候大到好几个T） 4. 简单的文件模型（获取了批量处理的特性，只能追加，不可以修改） 5. 强大的跨平台特性（java开发的） H 阅读全文
posted @ 2018-05-24 22:02 式微胡不归 阅读(694) 评论(0) 推荐(0)
Matplotlib学习
摘要：# 做一个简称plt import matplotlib.pyplot as plt import numpy #制作点数据 # Return evenly spaced numbers over a specified interval. x = numpy.linspace(-1,1,50) y1 = 2*x + 1 y2 = x**2 #一个图形中放入两条线 plt.figure(n... 阅读全文
posted @ 2018-05-24 15:06 式微胡不归 阅读(135) 评论(0) 推荐(0)
spring拦截器
摘要：1、日志记录：记录请求信息的日志，以便进行信息监控、信息统计、计算PV（Page View）等。 2、权限检查：如登录检测，进入处理器检测检测是否登录，如果没有直接返回到登录页面； 3、性能监控：有时候系统在某段时间莫名其妙的慢，可以通过拦截器在进入处理器之前记录开始时间，在处理完后记录结束时间，从 阅读全文
posted @ 2018-05-22 17:58 式微胡不归 阅读(194) 评论(0) 推荐(0)
跟踪springmvc请求
摘要：1. 请求第一站是DispatcherServlet（调度servlet）属于一个前端控制器（front controller）。它的任务是将请求发送给springmvc的控制器（controller）。 2. dispatcherServlet 查询一个或者多个处理器映射，决定下一站在哪里。处理器 阅读全文
posted @ 2018-05-21 23:34 式微胡不归 阅读(229) 评论(0) 推荐(0)
pom.xml
摘要：springboot fastjson 阅读全文
posted @ 2018-05-20 22:29 式微胡不归 阅读(92) 评论(0) 推荐(0)
springbooot
摘要：Srpingboot记录 一、HelloWorld 依赖 <parent> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-parent</artifactId> <version>1.5.9.R 阅读全文
posted @ 2018-05-20 19:48 式微胡不归 阅读(395) 评论(0) 推荐(0)
7-挂载
摘要：挂载命令 在linux中，所有的存储都需要挂载才能用，类似与windows分配盘符。 光盘，u盘如果需要使用就必须要挂载 windows中使用u盘也是需要分配盘符的，只是他都是自动的 linux需要认为命令执行的 mount 查看系统中以及挂载的目录 阅读全文
posted @ 2018-05-15 20:29 式微胡不归 阅读(97) 评论(0) 推荐(0)
6-压缩解压缩命令
摘要：linux 压缩包格式 .zip .gz .bz2 .tar.gz .tar.bz2 linux 的.zip和windows的.zip是可以通用的。 linux 的gz格式是可以在windows中解压缩的。但是windows的.rar不可以在linux中用的 先打包再压缩 阅读全文
posted @ 2018-05-13 09:45 式微胡不归 阅读(89) 评论(0) 推荐(0)
5-帮助命令
摘要：man manual linux系统man查询命令等级与意义： apropos 命令 （找出相似的命令区别） pro 向前 pos放置 （适当的，相关的） 阅读全文
posted @ 2018-05-13 09:24 式微胡不归 阅读(84) 评论(0) 推荐(0)
4-文件搜索命令
摘要：linux的搜索命令多，功能强大 find 命令会遍历所有的文件名，比较耗费资源 locate 空格 文件名：搜索速度很快 数据库的更新频率是一天一次更新，强制更新命令是updatedb 缺点：只能按照文件名搜索 搜索规则配置(别的一些搜索命也会遵守这个配置文件的规则。 *-*-*-*- 想知道一个 阅读全文
posted @ 2018-05-12 23:46 式微胡不归 阅读(121) 评论(0) 推荐(0)
3-链接
摘要：硬链接：一个文件的两个访问点。不建议创建硬链接 （一个房间开了两个门） 创建硬链接，引用次数变为2 查看两个文件的i节点，发现一样 软连接：（一个门通向原来的那个门） 如果不在一个目录下，需要写绝对路径。 阅读全文
posted @ 2018-05-12 22:52 式微胡不归 阅读(127) 评论(0) 推荐(0)
centos相关
摘要：Centos记录 在虚拟机中没有IP地址 vi /etc/sysconfig/network-scripts/ifcfg-eth0 （centos7为ifcfg-ens33） 修改：ONBOOT=yes 安装openjdk1.8 yum -y install java-1.8.0-openjdk j 阅读全文
posted @ 2018-05-09 13:46 式微胡不归 阅读(163) 评论(0) 推荐(0)
2-目录处理命令
摘要：linux 一切都是文件 目录也是文件 普通文件保存数据，linux目录保存文件 1. 建立目录 mkdir 可以连续创建好几层的目录 2. 切换目录 3. pwd 4.rm 阅读全文
posted @ 2018-05-07 16:41 式微胡不归 阅读(85) 评论(0) 推荐(0)
1-命令格式
摘要：1. [root@localhost ~]# ~ 代表 家目录 如果是root 则是 /root （根目录下的root目录） 如果是user则是/home/user pwd 可以显示当前位置 # 表示管理员，$表示普通用户 2. 命令 选项 参数 3. ls 显示当前目录下有什么 -l (开头 -普 阅读全文
posted @ 2018-05-07 16:04 式微胡不归 阅读(134) 评论(0) 推荐(0)
spring的@Scheduled注解
摘要：@component （把普通pojo实例化到spring容器中，相当于配置文件中的 注意事项： 1、spring的@Scheduled注解 需要写在实现方法上 2、 定时器的任务方法不能有返回值（如果有返回值，spring初始化的时候会告诉你有个错误、需要设定一个proxytargetclass的 阅读全文
posted @ 2018-05-02 10:37 式微胡不归 阅读(179) 评论(0) 推荐(0)