关闭页面特效
随笔分类 - 环境搭建与运维
大数据+人工智能+云计算运维
大数据集群运维（14）CentOS7.5搭建spark2.3.1集群
摘要：一 下载安装包 1 官方下载 官方下载地址：http://spark.apache.org/downloads.html 2 安装前提 Java8 安装成功 zookeeper 安装参考：CentOS7.5搭建Zookeeper3.4.12集群 hadoop 安装参考：CentOS7.5搭建Hado
阅读全文
大数据集群运维（13）CentOS7.5搭建Hive2.3.3
摘要：一 Hive的下载 软件下载地址：https://mirrors.tuna.tsinghua.edu.cn/apache/hive/ 这里下载的版本是：apache-hive-2.3.3-bin.tar.gz 官方安装配置文档：https://cwiki.apache.org/confluence/
阅读全文
大数据集群运维（12）JDK安装和环境变量配置（Win7版）
摘要：系统环境：Windows7 x64 安装JDK和JRE版本：1.8.0_191 1、下载JDK安装包 Oracle官网下载网址：https://www.oracle.com/technetwork/java/javase/downloads/index.html 选择需要下载的JDK版本，本人下载的
阅读全文
大数据集群运维（11）python第三方库大全
摘要：环境管理 管理 Python 版本和环境的工具 p：非常简单的交互式 python 版本管理工具。官网 pyenv：简单的 Python 版本管理工具。官网 Vex：可以在虚拟环境中执行命令。官网 virtualenv：创建独立 Python 环境的工具。官网 virtualenvwrapper：v
阅读全文
大数据集群运维（10）Pycharm下安装模块
摘要：方法一：使用Pycharm的终端安装 一、网络爬虫 1、安装requests包 作用：简洁且简单的处理HTTP请求的第三方库 网址：https://pypi.org/project/requests/ pip install requests 2、安装scrapy包 作用：快速、高层次的Web获取框
阅读全文
大数据集群运维（9）Pycharm下安装Numpy包
摘要：Numpy--Numerical Python，是一个基于Python的可以存储和处理大型矩阵的库。几乎是Python 生态系统的数值计算的基石，例如Scipy，Pandas，Scikit-learn，Keras等都基于Numpy。使用Numpy, 可以进行： ·数组和逻辑运算 ·傅里叶变换和图形操
阅读全文
大数据集群运维（8）windows环境下tensorflow cpu安装过程详解
摘要：写在最前： 在安装过程中遇到很多坑，一开始自己从官网下载了Python3.6.3或者Python3.6.5或者Python3.7.1等多个版本，然后直接pip install tensorflow或者从https://www.lfd.uci.edu/~gohlke/pythonlibs/下载制定的t
阅读全文
大数据集群运维（7）pycharm安装破解方法
摘要：1、pycharm专业版官方下载链接：http://www.jetbrains.com/pycharm/download/#section=windows正常下载并安装 2、从https://github.com/V7hinc/pycharm-crack下载所需工具，将破解工具JetbrainsCr
阅读全文
大数据集群运维（6）IntelliJ IDEA 创建JavaWeb项目
摘要：一、点击新建项目 二、建立Java EE项目（注意勾选的东西） 如果不是3.1也没事，根据Tomcat版本不同 三、设置项目名 四、进行Tomcat的项目部署配置 先点击run 再选择Edit Config.... 现在来设置Tomcat，点击左上角的加号（如果这里显示有Tomcat了就往下看） 拉
阅读全文
大数据集群运维（5）python下载及安装步骤
摘要：Python安装 1.浏览器打开网址:www.python.org 2.根据电脑系统选择下载 3.确定电脑系统属性，此处我们以win10的64位操作系统为例 4.安装python 3.6.3 双击下载的安装包 python-3.6.3.exe 注意要勾选：Add Python 3.6 to PATH
阅读全文
大数据集群运维（4）Maven的安装与配置
摘要：一、安装本地Maven 点此进入maven官网下载 选择左侧Download 点击箭头所指的链接进行下载，本文采用3.5.4进行安装 下载完成后，选择一个路径进行解压（本文选用 D:\JAVA\apache-maven-3.5.4 路径） 然后配置path环境变量,如图 系统变量:MAVEN_HOM
阅读全文
大数据集群运维（3）Scala]安装及环境配置（图文）
摘要：Window 上安装配置 1、Java（JDK）环境配置，详见 Java（JDK）环境 2、从 Scala 官网下载安装包：https://downloads.lightbend.com/scala/2.12.4/scala-2.12.4.msi 3、双击开始一步一步的安装； 4、同意 Licens
阅读全文
大数据集群运维（2）IntelliJ IDEA 下载安装与破解教程
摘要：一、首先到IDEA官网下载正版的IDEA 网址：https://www.jetbrains.com/idea/download/#section=windows 请直接用下面的链接下载 上面网址加载慢的话可以用这个链接直接跳转下载：https://download.jetbrains.com/ide
阅读全文
大数据集群运维（1）Hadoop + Hive + HBase + Kylin伪分布式安装
摘要：问题导读 1. Centos7如何安装配置？ 2. linux网络配置如何进行？ 3. linux环境下java 如何安装？ 4. linux环境下SSH免密码登录如何配置？ 5. linux环境下Hadoop2.7 如何安装？ 6. linux环境下Mysql 如何安装？ 7. linux环境下H
阅读全文
