摘要:
环境 spark-1.6 python3.5 一、wordcount 二、PVUV 阅读全文
摘要:
环境 spark-1.6 python3.5 一、python开发spark原理使用python api编写pyspark代码提交运行时,为了不破坏spark原有的运行架构,会将写好的代码首先在python解析器中运行(cpython),Spark代码归根结底是运行在JVM中的,这里python借助 阅读全文
摘要:
人工智能(Artificial Intelligence)、机器学习(Machine Learning)、深度学习(Deep Learning)。 人工智能:从概念提出到走向繁荣 1956年,几个计算机科学家相聚在达特茅斯会议,提出了“人工智能”的概念,梦想着用当时刚刚出现的计算机来构造复杂的、拥有 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 python3.6 1、介绍NumPy(Numerical Python的缩写)是一个开源的Python科学计算库。(1)使用NumPy,就可以很自然地使用数组和矩阵,N 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 python3.6 操作mysql数据库 1、安装pymysql模块pip install pymysql或者conda install pymysql 2、使用示例 相 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 python3.6 一、模块的使用和安装模块和C语言中的头文件以及Java中的jar包很类似,使用关键字import引入模块。 1、import module1,mudu 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 python3.6 一、设计模式1、单例模式确保某一个类只有一个实例,而且自行实例化并向整个系统提供这个实例,这个类称为单例类,单例模式是一种对象创建型模式。 2、工厂模 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 python3.6 一、面向对象编程1、概念(1)面向对象编程(OOP),是一种程序设计思想。OOP把对象作为程序的基本单元,一个对象包含了数据和操作数据的函数。面向对象 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 python3.6 一、文件的打开与关闭 使用open函数,可以打开一个已经存在的文件,或者创建一个新文件,使用close()关闭文件 格式:open(文件名,访问模式) 阅读全文
摘要:
环境 虚拟机:VMware 10 Linux版本:CentOS-6.5-x86_64 客户端:Xshell4 FTP:Xftp4 python3.6 Python不但能非常灵活地定义函数,而且本身内置了很多有用的函数,可以直接调用。 一、函数的定义与调用1、定义函数的格式:def 函数名(): 代码 阅读全文