01 2021 档案
摘要:1 外部用户/外部主机 /var/log 在CentOS系统上,用户登录历史存储在以下这些文件中: /var/log/wtmp 用于存储系统连接历史记录被last工具用来记录最后登录的用户的列表 /var/run/utmp用于记录当前打开的会话被who和w工具用来记录当前有谁登录以及他们正在做什么,
阅读全文
摘要:文由 将ASCII等其他非Unicode字符与Unicode混合的"脏的、不规范的"编码文本转为正常文本。 源码 unicodetoString(String unicodeText) public class StringUtil { /** * 解码 */ /* public static St
阅读全文
摘要:简述 sqlplus :oracle公司提供用户操作oracle数据库的工具。 sqlplus是oracle原始数据操作的客户端,这种命令行的格式有着强大的逻辑性,如果经常使用会对数据库的理解加深很多。 安装所需的包: 1.oracle 客户端 2.sqlplus工具 安装 step1 下载客户端安
阅读全文
摘要:1 文由 项目使用场景:OLTP Oracle 数据导入到 OLAP HIVE 2 Sqoop简述 Apache Sqoop(TM) 是一款开源的ETL工具,设计用于在 Apache Hadoop和结构化数据存储(如传统的关系数据库)之间高效传输批量数据,其可以将一个关系型数据库(例如 : MySQ
阅读全文
摘要:hadoop 查看hadoop版本 # hadoop version SLF4J: Class path contains multiple SLF4J bindings. SLF4J: Found binding in [jar:file:/usr/sdp/2.6.0.0-1245/hadoop-
阅读全文
摘要:文由 需要在本地Windows系统电脑通过远程桌面(mstsc)另一台Windows服务器,将其内的数据拷贝过来。但却发生了这样的异常 解决方案 step1 Win+R step2 打开注册表: gpedit.msc step3 找到【CredSSP加密数据库修正】注册表的操作路径:计算机配置>>管
阅读全文
摘要:虽然作为数据分析或者商业分析师并不需要去做数据仓库,但在企业实际工作中,或多或少,还是需要接触或对接数仓部门,如提出需求、了解相关表的字段含义等,所以今天我们就简单说下数据分析师需要了解的 数据仓库基础知识。 1 维度建模理论与数仓分层思想 参考文献: 维度建模理论与数仓分层思想 - CSDN 1.
阅读全文
摘要:ORACLE数据导入/导出 工具介绍:EXP/IMP | EXPDP/IMPDP EXP和IMP是客户端工具程序,它们既可以在客户端使用,也可以在服务端使用。 EXPDP和IMPDP是服务端的工具程序,他们只能在ORACLE服务端使用,不能在客户端使用。 IMP只适用于EXP导出的文件,不适用于EX
阅读全文
摘要:1 helloworld @echo off call :helloworld helloworld goto :EOF :helloworld setlocal echo %1 endlocal&goto :EOF 2 比较日期的自定义函数 @echo off @rem case1 @rem ca
阅读全文
摘要:1 文由 为什么要把这么一个看似很简单的问题,还要以【转载】的方式专门用博客写出来? 主要是在编写crontab的自动化定时脚本的过程中,发现是这个错导致的自动化脚本频繁执行异常时,已经花了好几个小时了,故欲以此博文长个记性! 2021-01-08 执行1个自己编的定时脚本时,发现老报这个错: 20
阅读全文
摘要:1 文由 由于项目有这么一个数据同步需求: 【业务建设系统方】在Linux上将Oracle的全量数据(.dmp文件)定时推送到**【大数据平台建设方】**中的一台Linux服务器上; 然后,**【大数据平台建设方】**再将dmp文件(通过sshpass和openssh的ssh/scp制作定时传输脚本
阅读全文
摘要:1 yum获取rpm安装包 有时候你需要一个软件包在离线linux系统上安装,如果自己找软件包麻烦,可以linux yum下载需要的软件包. 准备工作是找一台能够联网的linux,并准备好了yum及yum源,一般我们用我们的vmware linux虚拟机就可以了。 方式1:yum自带工具(目前自测不
阅读全文
摘要:1 文由 阶段一:对WEB服务器HTTP通信的header设置了安全头(X-Content-Options:nosniff) 两个月前协助交付侧大哥处理、修复一个三级等保项目的第三方安全公司释出的安全漏洞,其中有1个低危漏洞(如下图示)涉及到对HTTP的header设置安全头(X-Frame-Opt
阅读全文