摘要：
为学习spark，虚拟机中开4台虚拟机安装spark3.0.0底层hadoop集群已经安装好，见ol7.7安装部署4节点hadoop 3.2.1分布式集群学习环境首先，去http://spark.apache.org/downloads.html下载对应安装包解压[hadoop@master ~]$ sudo tar -zxf spark-3.0.0-bin-without-hadoop.tgz ... 阅读全文
摘要：
准备4台虚拟机，安装好ol7.7，分配固定ip192.168.168.11 12 13 14，其中192.168.168.11作为master，其他3个作为slave，主节点也同时作为namenode的同时也是datanode，192.168.168.14作为datanode的同时也作为secondary namenodes首先修改/etc/hostname将主机名改为master、slave1、... 阅读全文
摘要：
参见：https://www.cnblogs.com/Dylansuns/p/6974272.html Linux安装JDK完整步骤检查一下系统中的jdk版本[hadoop@master ~]$ java -versionopenjdk version "1.8.0_222-ea"OpenJDK Runtime Environment (build 1.8.0_222-ea-b03)OpenJDK... 阅读全文
摘要：
配置无密码登陆本机ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsacat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keyschmod 0600 ~/.ssh/authorized_keys然后将~/.ssh/id_rsa.pub即公钥发送到对端机器，然后对端机器执行cat ~/id_rsa.pub >> ~/.ssh/autho... 阅读全文
摘要：
视频课程：北大的刘田老师的理论计算机基础书籍：1.《计算理论导引》，麻省理工，中文翻译本 2. 《computational complexity: a modern approach》，普林斯顿本质：通过学习这一个课程，解决什么问题是能计算的，什么是不能计算的？有多快，要用多少存储？以及采用什么计算模式？课程结构：针对上述课程关心的三个问题，分为三大块， 1）自... 阅读全文
摘要：
1.列表作为数据结构def MatrixProduct(a, b): temp2 = [] for i in range(len(a)): temp1 = [] for j in range(len(b[0])): total = 0 for k in range(len(... 阅读全文
摘要：
来自基友的一个问题：用python实现输入是一个二维list，一个可能的输入如下所示：Input_list = [ [”china”,”is”,”a”,”great”,”country”], [“usa”,”always”,”korea”],[“korea”,”has”,”lots of”,”database”],[“this’s”,”something”,”fan... 阅读全文
摘要：
教材官方在线书籍https://mitpress.mit.edu/sites/default/files/sicp/full-text/book/book.html官方太丑了，又别人重新排版优化：http://sarabander.github.io/sicp/然后UCB的python版本在线书籍也是CS61A课程的教科书：http://www-inst.eecs.berkeley.edu/~cs... 阅读全文
摘要：
感觉未来是大数据环境下的人工智能时代呀，不能被时代的马车抛弃，西瓜书这么出名，简要了解一下1 绪论1.1 引言机器学习定义：利用经验来改善计算机系统自身的性能 另外一种广泛被引用的英文定义：A computer program is said to learn from experience E with respect to some class of tasks T and performa... 阅读全文
摘要：
0 导学目的：掌握利用三维效果表达科学和工程数据的能力传播一种思想：可视化技术是数据之眼内容组织： 流体数据的标量可视化、矢量可视化实例 三维扫描数据（模型/地形）可视化实例 三维地球场景可视化实例 曲线UI交互控制可视化实例1 基础运用科学计算可视化的主要方法： 二维标量数据场：颜色映射法、等值线 阅读全文