随笔分类 - 开发环境
摘要:将datax.tar.gz上传到服务器 # 解压 tar -zxvf datax.tar.gz -C /opt/software/ # 验证 python /opt/software/datax/bin/datax.py /opt/software/datax/job/job.json 查看详情 [
阅读全文
摘要:前提 已经案例jdk、hadoop、hive 主机名:master 映射:192.168.128.129 master 安装scala # 将scala-2.12.15.tgz上传到服务器 # 解压 tar -zxvf scala-2.12.15.tgz # 移动 mv scala-2.12.15
阅读全文
摘要:前提 已经安装了jdk、mysql、hadoop 主机名:master 映射:192.168.128.129 master 将apache-hive-2.3.9-bin.tar.gz上传到服务器 # 解压 tar -zxvf apache-hive-2.3.9-bin.tar.gz # 移动 mv
阅读全文
摘要:前提 已经安装了hadoop、mysql 将sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz上传到服务器 # 解压 tar -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz # 移动 mv /home/sqoop-1
阅读全文
摘要:前提 已经安装了jdk1.8、zookeeper3.6.3 主机名:master 映射:192.168.128.129 master 安装zookeeper单机版 # 将apache-zookeeper-3.6.3-bin.tar.gz上传到服务器 # 解压 tar -zxvf apache-zoo
阅读全文
摘要:导入sql脚本 速度较慢 导出sql脚本,导出速度快 导入csv 查看详情 报错3948 show variables like 'local_infile'; # 修改权限 set global local_infile = 1; SQL错误 (5): Out of memory (Needed2
阅读全文
摘要:配置maven仓库:窗口,首选项,连接,驱动,Maven,添加 https://repo.huaweicloud.com/repository/maven/ 上移至第1行 配置hive驱动:数据库,驱动管理器,Hadoop,Apache Hive,编辑 库,添加工件 填写hive-jdbc 选自hi
阅读全文
摘要:下载地址 安装 查看详情 双击安装程序 选择语言 同意 安装路径 连接mysql 创建数据库 编辑数据库 删除数据库 创建表 表名 主键,非空,自增 查看语句 查看表结构,修改表结构 查看表数据,修改表数据:数据,右键空白处,插入记录行,提交 执行sql 设置字体大小:工具,首选项,SQL
阅读全文
摘要:下载地址 安装 # 将redis压缩包上传到服务器/home/software,并解压 tar -zxvf redis-6.0.6.tar.gz # 安装gcc yum install gcc-c++ -y # 查看版本 gcc -v # 进入解压目录 cd redis-6.0.6 # 编译 mak
阅读全文
摘要:先确认hadoop是否启动成功,将hive的压缩包上传到服务器的/home/software目录下 # 修改权限 chmod 755 apache-hive-3.1.2-bin.tar.gz # 解压 tar -zxvf apache-hive-3.1.2-bin.tar.gz 全局配置 vim /
阅读全文
摘要:将压缩包上传到服务器 # 上传到/home/software路径 # 设置权限 chmod 755 hadoop-3.2.1.tar.gz # 解压 tar -zxvf hadoop-3.2.1.tar.gz # 配置 vim /etc/profile export HADOOP_HOME=/hom
阅读全文
摘要:先新建连接 打开终端 输入命令并执行 下载putty 将下载的putty放到winscp安装路径的putty文件夹下 点击选项 > 选项 > 应用程序,配置路径 如果报错,错误原因是没有加上引号 查看详情 在putty中打开 命令 > 在PuTTY中打开 winscp中打开文件使用外置编辑器EmEd
阅读全文
摘要:已安装mysql8 # 查看mysql状态 service mysqld status 查看详情 navicat连接mysql 新建数据库 新建表student,并添加数据 报错:java.sgl.SQLException: No suitable driver # 查看mysql版本 SELECT
阅读全文
摘要:双击安装程序显示管理员已阻止你运行此应用 win + r,输入gpedit.msc 双击"用户账户控制:以管理员批准运行所有管理员" 选择已禁用 重启电脑生效 双击安装 学习使用 查看详情 桌面右键[Tableau 2019.4]图标,打开文件夹所在位置C:\Program Files\Tablea
阅读全文
摘要:新建连接 输入名称和ip 点击连接 输入用户名 输入密码 直接拖动上传文件 [root@master ~]# yum install lrsz Loaded plugins: fastestmirror Loading mirror speeds from cached hostfile * bas
阅读全文
摘要:anaconda3与python对应版本 点击查看详情 anaconda3版本 基础python版本 Anaconda3-2024.02-1 Python 3.11.7 Anaconda3-2023.09-0 Python 3.11.5 Anaconda3-2023.07-2 Python 3.11
阅读全文
摘要:安装 查看详情 查看历史版本 双击安装程序 同意 为所有人安装 选择安装路径 点击安装 安装完成 不更新 不登录 配置 查看详情 找到最近添加的Anaconda Prompt 执行如下命令,修改为国内的源 conda config --add channels https://mirrors.tun
阅读全文