摘要：——————————————————————————————————————————————————————————用户登录框示例import javax.swing.JButton;import javax.swing.JFrame;import javax.swing.JLabel;import
阅读全文
posted @ 2022-01-25 23:05
01 2022 档案
摘要：下载安装不再赘述 暂时还连接不上mongo数据库 需要开启虚拟机进入/usr/local/mongodb目录下 使用语句./bin/mongod --config /usr/local/mongodb/conf/mongod.conf 开启mongo服务 再次在IDEA中test connect 连
阅读全文
posted @ 2022-01-24 20:30
摘要：意思是说，我选择的运行设备的Android版本（deviceSdk），不符合（低于）我工程的编译设置中的最低Android版本要求（minSdk）。 解决办法是：在不影响运行功能的情况下，降低编译设置中的版本号。 具体步骤为： 1，在app的build.gradle中，将android代码块里面的m
阅读全文
posted @ 2022-01-23 21:06
摘要：一、安装JUnitGenerator V2.0。 1、通过网络安装。如下 2、手动下载插件安装。插件下载：https://plugins.jetbrains.com/idea/plugin/3064-junitgenerator-v2-0 。安装如下图所示： 3、安装完成重启IDEA，即可使用。 二
阅读全文
posted @ 2022-01-22 17:33
摘要：为Windows安装C编译器（MinGW-W64 GCC） 下载地址为： https://pan.baidu.com/s/10o1xCKnyu5HKiqyRpZmDrQ 提取码: karj 下载后是一个压缩文件，将它解压到指定的文件夹，可以是C盘 点开，进入它的“bin”子文件夹，然后复制路径“C:
阅读全文
posted @ 2022-01-21 22:28
摘要：首先在应用商店中下载Prettier-Code Formatter。 进行上面的操作之后开始下载。 下面开始设置prettier。 VSCode左下角的设置图标--》设置--》输入框中搜索settings,随便点一个 /* prettier的配置 */ "prettier.printWidth":
阅读全文
posted @ 2022-01-20 21:33
摘要：问题描述：安装Fz之后，连接centos7服务器，总是连接失败。。。 在win10上可以ping通虚拟机内的centos7服务器，在关闭了centos7防火墙之后仍然不起作用，随后排查到SSH配置问题 处理步骤： 1. 检查SSH是否安装 [root@client ~]# rpm -qa | gre
阅读全文
posted @ 2022-01-19 20:02
摘要：进入终端，然后对应目录，然后输入ls -lt可以看到例如：-rwxr-xr-x 1 abc staff 39 9 27 09:43 command.shabc就是拥有者staff就是组用户
阅读全文
posted @ 2022-01-18 19:01
摘要：一、Cent OS 7下重命名文件 mv：move 用移动文件命令就可以了，因为linux系统没有专门的重命名命令。 基本格式： 移动文件：mv 文件名 移动后路径 + 文件名 重命名文件：mv 文件名 修改后的文件名 示例：mv oldfilename newfilename （oldfilena
阅读全文
posted @ 2022-01-17 18:48
摘要：一：Kettle安装前JDK环境配置 由于Kettle是Java语言开发的，该软件的允许需要Java运行环境的依赖。需要先安装JDK,准备好Java软件的运行环境。安装jdk1.8版本 安装JDK不再赘述 二、 安装kettle7.1 1.下载地址： 7.1版本，http://mirror.bit.
阅读全文
posted @ 2022-01-16 20:32
摘要：一、下载sbt安装包 从sbt官网下载地址：https://www.scala-sbt.org/download.html 二、解压安装 tar -zxvf sbt-1.1.4.tgz # 解压 cd /usr/software/sbt/ # 进入解压目录 vim sbt # 新建一个名字为sbt的
阅读全文
posted @ 2022-01-15 19:47
摘要：关于SBT： SBT是Scala的构建工具，全称Simple Build Tool，类似于 Maven 或 Gradle。 GETTING STARTED WITH SCALA AND SBT ON THE COMMAND LINE sbt Reference Manual 要使用sbt，阅读完第一
阅读全文
posted @ 2022-01-14 19:32
摘要：使用xsync脚本循环同步文件到各个目标节点的相同目录下（需要用户具有root权限或者直接使用root用户创建xsync）1.sudo创建xsync文件（root用户可直接创建） xsync脚本源码： #!/bin/bash#1. 判断参数个数if [ $# -lt 1 ]then echo Not
阅读全文
posted @ 2022-01-13 19:05
摘要：一、实验目的 l 熟练使用 scrapy 爬虫框架； l 掌握通过关键词搜索爬取数据的方法； l 熟练编写 python 代码实现数据爬取； 二、实验原理 网络爬虫，是一种按照一定的规则，自动的抓取万维网信息的程序或者脚本。通俗来说就是模拟用户在浏览器上的操作，从特定网站，自动提取对自己有价值的信息
阅读全文
posted @ 2022-01-12 21:21
摘要：实验内容和要求 1．Spark SQL基本操作 将下列 JSON 格式数据复制到 Linux 系统中，并保存命名为 employee.json。 { "id":1 , "name":" Ella" , "age":36 } { "id":2, "name":"Bob","age":29 } { "i
阅读全文
posted @ 2022-01-11 20:06
摘要：2.编写独立应用程序实现数据去重 对于两个输入文件 A 和 B，编写 Spark 独立应用程序，对两个文件进行合并，并剔除其 中重复的内容，得到一个新文件 C。 在/root/spark-local/mycode/remdup目录下新建 mkdir -p src/main/scala目录 新建文件v
阅读全文
posted @ 2022-01-10 19:01
摘要：1. spark-shell 交互式编程 先下载数据集chapter5-data1.txt，然后将文件上传到Linux系统/home目录下 根据给定的实验数据，在 spark-shell 中通过编程来计算以下内容： （1）该系总共有多少学生 首先读取文件 以逗号为分隔分词 去重操作 取得总数 （2）
阅读全文
posted @ 2022-01-09 20:48
摘要：实验要求 实验一： 实验一中使用Scala基础编程，掌握Scala编程的基础知识就可以 使用到while循环 实验二： 实验二完成对类的编写定义 实验三： 结果： 实验三需要掌握Scala中一定函数式编程的知识 在代码中使用到两个函数（方法） 1.统计函数 2.输出函数
阅读全文
posted @ 2022-01-08 20:33
摘要：HDFS 常用操作 （1） 启动 Hadoop，在 HDFS 中创建用户目录“/user/hadoop”； 该命令中表示在HDFS中创建一个“/user/hadoop”目录，“–mkdir”是创建目录的操作，“-p”表示如果是多级目录，则父目录和子目录一起创建，这里“/user/hadoop”就是一
阅读全文
posted @ 2022-01-07 21:21
摘要：本地运行模式 1.将压缩包spark-3.0.0-bin-hadoop3.2.tgz上传到虚拟机中 2.上传完成后，解压缩到无中文无空格的目录当中 tar -zxvf spark-3.0.0-bin-hadoop3.2.tgz 3.解压完之后，重命名文件夹mv spark-3.0.0-bin-had
阅读全文
posted @ 2022-01-06 22:03
摘要：方法一： 从后往前计算出每层的星星数量与空格打印的数量 for (i <- 1 to 9){ val stars = 2*i-1 val spaces = 9-i println(" "*spaces+"*"*stars) } 方法二：引入变量 代码段更少 for (i <- 1 to 9 ; st
阅读全文
posted @ 2022-01-05 20:33
摘要：使用for循环打印99乘法表 package C04 object test3_Practice99 { //输出99乘法表 def main(args: Array[String]): Unit = { for(i <- 1 to 9){ for (j <- 1 to i){ print(s"${
阅读全文
posted @ 2022-01-05 20:06
摘要：1.分支控制if-else让程序有选择的执行，分支控制有三种：单分支，双分支，多分支———————————————————————————————————————————单分支双分支多分支 if-else返回语句的最后一行的值String Int公共父类Any————————————————————
阅读全文
posted @ 2022-01-05 20:02
摘要：文件读取与写入 package C02 import java.io.{File, PrintWriter}import scala.io.Source object test6_FileIO { def main(args: Array[String]): Unit = { //从文件中读取数据
阅读全文
posted @ 2022-01-04 20:00
摘要：Scala Java++Scala更适合大数据的处理 spark的底层用Scala编写 spark对集合类型数据处理有非常好的支持———————————————————————————————————————————————————————————— 创建Scala文件之前需要先添加框架创建Scal
阅读全文
posted @ 2022-01-03 18:49
摘要：1.安装Linux虚拟机 已经完成安装过 CentOS 7 2.使用Linux系统的常用命令 （1.）切换到目录/usr/bin下 （2.）查看目录/usr/local 下所有的文件； （3）进入/usr 目录，创建一个名为 test 的目录，并查看有多少目录存在； （4）在/usr 下新建目录 t
阅读全文
posted @ 2022-01-02 19:32
摘要：假期准备学习spark，在B站上了解过spark后才明白学习spark之前需要先学习Scala 首先Spark是由Scala语言开发的，所以开发过程中也需要使用到Scala语言 在IDEA中配置Scala环境如下： 1.在IDEA中新建一个maven，命名为scala 2.点击File，打开sett
阅读全文
posted @ 2022-01-01 15:56
