摘要:1.jar包 spring-aop.jar spring-bean.jar spring-context.jar spring-core.jar spring-web.jar spring-webmvc.jar 2.创建项目:Dynamic Web Project 第一个SpringMVC程序 Se
阅读全文
摘要:准备: 1.https://repo.spring.io/ui/ 2.artifactory >artfacts >plugins-release >org >springframework >spring选择需要的版本下载即可 或者直接进入这个网址https://repo.spring.io/ui
阅读全文
摘要:Spark: 1.Apache Spark是用于大规模数据处理的统一分析引擎 2.一款分布式内存计算的分析引擎 源数据层: 1.sdk日志埋点 2.日志文件:爬虫日志,业务日志 3.关系型数据库:mysql,oracle等 数据采集层: 1.离线:flume,sqoop,Nifi 2.实时:file
阅读全文
摘要:1.引入依赖: 2.定义Mapper接口并继承BaseMapper 3.MyBatisPlus原理解析:约定大于俗成 1>MyBatisPlus通过扫描实体类,并基于反射获取实体类信息作为数据库表信息 2>如果以上符合MyBatis-Plus的约定,就不需要制定表名和指段名字了;如果不符合MyBat
阅读全文
摘要:sql语句的执行顺序 from > where > group by > 聚合函数 > having > select > order by > limit
阅读全文
摘要:1.大数据特点:大,多,值,快,信,也称为5V 2.ETL是英文的缩写 Extract >Transform >Load 数据抽取 >数据转换 >数据加载 3.ETL的工作流程: 4.Kettle(水壶) >PDI 5.
阅读全文
摘要:大数据技术框架: 1.存储引擎 1>分布式文件系统HDFS:block,replication 2>NoSQL数据库:Hbase:Table,region 实时存储引擎 3>分布式消息队列Kafka:Topic,Partition 实时存储引擎 4>分布式搜索引擎:Elasticserarch:in
阅读全文