摘要: 1. 上传spark-2.2.0-bin-hadoop2.7.tgz安装包到/home/dtouding目录下 2. 解压安装包到/bigdata/目录下,tar –zxvf spark-2.2.0-bin-hadoop2.7.tgz –C /bigdata/ 3. 修改配置文件: 1) mv sp 阅读全文
posted @ 2019-04-13 15:36 孤剑者 阅读(344) 评论(0) 推荐(0) 编辑
摘要: 安装Virtualbox 下载安装: 直接到官网上下载,https://www.virtualbox.org/wiki/Downloads 然后一键傻瓜式的安装即可。 设置默认虚拟电脑位置: 管理=》全局设定=》常规,设置默认虚拟电脑位置,之后创建的虚拟机都会在该文件夹下。 创建centos虚拟机 阅读全文
posted @ 2019-03-21 21:32 孤剑者 阅读(5283) 评论(0) 推荐(0) 编辑
摘要: 准备环境: 三台centos7虚拟机(Node-1,Node-2,Node-3) 配置虚拟机网络,保证三台机器可以互相ping通,并且和宿主机可以互相ping通。如果仅仅是作为虚拟机学习,可以关闭防火墙,避免后面的RPC端口或者web端口无法正常访问。 创建普通用户dtouding 安装jdk环境。 阅读全文
posted @ 2019-03-07 20:34 孤剑者 阅读(3324) 评论(0) 推荐(0) 编辑
摘要: 创建用户:useradd -m user1,-m表示同时创建用户主目录,默认会创建/home/user1目录 设置密码:passwd user1,然后就会出现设置密码的提示了 为新用户添加sudo权限:在/etc/sudoers中的添加和root一样的配置即可: 查询文件夹属主:ls -al dir 阅读全文
posted @ 2019-03-02 13:49 孤剑者 阅读(178) 评论(0) 推荐(0) 编辑
摘要: 页面缓存是应对高并发的一个比较常见的方案,当请求页面的时候,会先查询redis缓存中是否存在,若存在则直接从缓存中返回页面,否则会通过代码逻辑去渲染页面,并将渲染后的页面缓存到redis中,然后返回。下面通过简单的demo来描述这一过程: 一、准备工作: 1、新建一个springboot工程,命名为 阅读全文
posted @ 2019-01-06 16:09 孤剑者 阅读(3119) 评论(0) 推荐(0) 编辑
摘要: 在学习某网《java秒杀系统方案优化》的课程中,学到了一种springboot对传参的拦截统一处理的方式,特记录一下。 如后台方法一般需要根据token从Session中获取User对象,如果不想在每个方法中都添加这段逻辑,而是直接获取User对象,可以怎么做呢? 阅读全文
posted @ 2018-12-23 15:04 孤剑者 阅读(4849) 评论(0) 推荐(0) 编辑
摘要: Yml文件(novellist.xml)如下: novellist: list: - name: 笑傲江湖 type: 武侠 master: 令狐冲 author: 金庸 description: 小说以通过叙述华山派大弟子令狐冲的经历,反映了武林各派争霸夺权的历程。 - name: 诛仙 type 阅读全文
posted @ 2018-12-09 17:54 孤剑者 阅读(23960) 评论(0) 推荐(0) 编辑
摘要: 方式一:在springboot启动类上添加@EnableScheduling注解,然后创建具体的任务类,在方法上添加@Scheduled注解,并指明执行频率即可。如下: 阅读全文
posted @ 2018-12-02 14:57 孤剑者 阅读(1688) 评论(0) 推荐(0) 编辑
摘要: 一、如何发现需要优化的SQL 主要使用MySQL的慢查日志对有效率问题的SQL进行监控 第一步:启动慢查日志的监控 打开开关,将未使用索引的查询记录到慢查日志中 设置查询时间,当查询时间大于这个值,就记录到慢查日志中 打开开关,启动慢查日志监控 第二步:使用慢查日志分析工具比如mysqldumpsl 阅读全文
posted @ 2018-10-29 23:25 孤剑者 阅读(419) 评论(0) 推荐(0) 编辑
摘要: Oracle默认的事务隔离级别为读已提交,MySQL默认的事务隔离级别为可重复读。MySQL的事务隔离级别有以下四种: 读未提交。事务A可以读到事务B未提交的数据。会引起脏读。 Mysql设置事务隔离级别为读未提交: set session transaction isolation level r 阅读全文
posted @ 2018-08-19 20:55 孤剑者 阅读(1196) 评论(0) 推荐(0) 编辑