摘要:
今天我突然想起来建民老师布置的服务外包杯作业,我们组选的是歌声转化算法赛题 对于这个赛题,我搜索了部分资料: 语音转换,也被称为声音转换或语音变换,是一种用于改变人的语音特征的技术,同时保留语言内容和说话者的身份。它涉及修改源说话者的声音特性,使其听起来像目标说话者的声音。语音转换的目标是将源说话者 阅读全文
摘要:
一、RDD编程基础1、RDD创建 Spark采用textFile()方法从文件系统中加载数据创建RDD,该方法把文件的URI作为参数,这个URI可以是本地文件系统的地址、分布式文件系统HDFS的地址或者是AmazonS3地址等。 (1)从文件系统中加载数据 (2)从分布式文件系统HDFS中加载数据 阅读全文
摘要:
今天进行spark基础编程四——RDD 编程初级实践 一、实验目的 (1)熟悉 Spark 的 RDD 基本操作及键值对操作; (2)熟悉使用 RDD 编程解决实际具体问题的方法。 二、实验平台 操作系统:Ubuntu16.04 Spark 版本:2.1.0 三、实验内容和要求 1.spark-sh 阅读全文
摘要:
今天进行Spark基础实验三Spark 和 Hadoop 的安装。 一、实验目的 (1)掌握在 Linux 虚拟机中安装 Hadoop 和 Spark 的方法; (2)熟悉 HDFS 的基本使用方法; (3)掌握使用 Spark 访问本地文件和 HDFS 文件的方法。 二、实验平台 操作系统:Ubu 阅读全文
摘要:
1.Scala有两种类型的变量:val:是不可变的,在声明时就必须被初始化,而且初始化以后就不能再赋值;var:是可变的,声明的时候需要进行初始化,初始化以后还可以再次对其赋值。基本语法:val 变量名:数据类型 = 初始值var 变量名:数据类型 = 初始值类型推断机制(type inferenc 阅读全文
摘要:
一、实验目的 1.掌握 Scala 语言的基本语法、数据结构和控制结构; 2.掌握面向对象编程的基础知识,能够编写自定义类和特质; 3.掌握函数式编程的基础知识,能够熟练定义匿名函数。熟悉 Scala 的容器类库的基本 层次结构,熟练使用常用的容器类进行数据; 4.熟练掌握 Scala 的 REPL 阅读全文
摘要:
1、下载FileZilla 链接:https://pan.baidu.com/s/1SLCJWVnOGzsn3QSY83CYkw?pwd=WL17 提取码:WL17 2、安装 点击anyone 点击next 继续点击next 安装成功 本质和finalshell并无太大区别 阅读全文
摘要:
一、实验目的 (1)掌握 Linux 虚拟机的安装方法。Spark 和 Hadoop 等大数据软件在 Linux 操作系统 上运行可以发挥最佳性能,因此,本教程中,Spark 都是在 Linux 系统中进行相关操作,同 时,下一章的 Scala 语言也会在 Linux 系统中安装和操作。鉴于目前很多 阅读全文
摘要:
2、破解百度翻译 import requests import json if __name__ == '__main__': #UA伪装:让爬虫对应的请求载体身份标识伪装成某一款浏览器 headers = { 'User-Agent':'Mozilla/5.0 (Windows NT 10.0; 阅读全文
摘要:
今天进行数据爬取的几个练习 1、简易网页采集器 import requests if __name__ == '__main__':#UA检测 #UA伪装:让爬虫对应的请求载体身份标识伪装成某一款浏览器 headers = { 'User-Agent':'Mozilla/5.0 (Windows N 阅读全文