摘要:
第1章 需求分析 1.1 灵活查询的场景 数仓中存储了大量的明细数据,但是Hadoop存储的数仓计算必须经过MR,所以即时交互性非常糟糕。为了方便数据分析人员查看信息,数据平台需要提供一个能够根据文字及选项等条件,进行灵活分析判断的数据功能。 1.2 需求详细 输入参数 日期 查询数据的日期 关键字 阅读全文
2021年7月15日 #
2021年7月14日 #
摘要:
1)问题:遇到这些问题,不要直接Set 2)解决步骤一: 3)解决步骤二: 4)再次回到刚才的页面,发现爆红消失了,运行main方法,发现OK 5)如果以上设置你全部弄好了,但Idea中使用Maven打包时还是报如下错误,则在pom文件中添加如下插件,让Maven识别出JDK版本 <plugin> 阅读全文
摘要:
1)首先,打开环境配置,选择添加SFTP协议,输入名称(随意就行) 2)填写基本信息 3)打开文件传入窗口 阅读全文
摘要:
1)首先,如果你在Idea中,先退出你的项目 2)直接从Git或者码云中下载项目至Idea 3)输入地址信息并测试,成功之后进行Clone 4)下载完成且无报错,运行其中的一个类的main方法,发现也OK 5)若后续你修改了代码,且又想更新远程仓库的代码,则进行如下操作: 阅读全文
2021年7月13日 #
摘要:
一、Git简介 1. 是什么 Git是目前世界上最先进的分布式版本控制系统! 2. 能干吗 3. 集中式版本管理 经典产品: CVS、VSS、SVN 特点:由中央仓库统一管理,结构简单,上手容易! 不足: 1)版本管理的服务器一旦崩溃,硬盘损坏,代码如何恢复? 2)程序员上传到服务器的代码要求是完整 阅读全文
摘要:
1)首先登录GitHub:https://github.com 2)点击Settings 3)点击Developer settings 4)点击创建Token 阅读全文
摘要:
第1章 docker简介 1.1 什么是docker Docker 最初是 dotCloud 公司创始人 Solomon Hykes 在法国期间发起的一个公司内部项目,它是基于 dotCloud 公司多年云服务技术的一次革新,并于 2013 年 3 月以 Apache 2.0 授权协议开源,主要项目 阅读全文
2021年7月10日 #
摘要:
第1章 需求分析 1.1 简介 实时预警,是一种经常出现在实时计算中的业务类型。根据日志数据中系统报错异常,或者用户行为异常的检测,产生对应预警日志。预警日志通过图形化界面的展示,可以提醒监控方,需要及时核查问题,并采取应对措施。 1.2 需求说明 需求:同一设备,5分钟内三次及以上用不同账号登录并 阅读全文
2021年7月9日 #
摘要:
问题:新建了一个Maven工程,运行测试程序时控制台打印中文乱码 两种解决方案: 1)在启动程序中添加VM参数,将字符编码设置为UTF-8,再次运行,解决了 -Dfile.encoding=UTF-8 2)以上解决方式只是针对某个主程序,而不是解决了整个项目工程,所以我们提出第二种解决方案 (1)首 阅读全文
摘要:
第1章 ElasticSearch概述 1.1 什么是搜索? 百度:我们比如说想找寻任何的信息的时候,就会上百度去搜索一下,比如说找一部自己喜欢的电影,或者说找一本喜欢的书,或者找一条感兴趣的新闻(提到搜索的第一印象)。百度 != 搜索 1)互联网的搜索:电商网站,招聘网站,新闻网站,各种app 2 阅读全文