09 2017 档案

spark链接hive并查询数据
摘要:首先启动 hadoop,mysql,hive 服务 {hadoop}/sbin/start-all.sh service mysqld start hive --service metastore& hive --service hiveserver2 & 最后启动spark 我是以python方式 阅读全文

posted @ 2017-09-26 09:48 潺潺水声 阅读(798) 评论(0) 推荐(0)

Python执行spark程序配置
摘要:spark没有配置Python环境变量的时候使用Python只用spark时候回出现 from pyspark import SparkConf,SparkContentImportError: No module named pyspark 所以要在环境变量中配置 打开 vim /etc/prof 阅读全文

posted @ 2017-09-23 19:33 潺潺水声 阅读(3239) 评论(0) 推荐(0)

spark安装(初级篇)
摘要:1.spark编译版安装 首先去官网下载 http://spark.apache.org/downloads.html 页面上有下载按键点击 之后选择对应的编译的Hadoop版本 2 下载完成之后解压 进入解压文件夹的bin目录 其中 spark-shell 是运行scale语言的命令窗口,pysp 阅读全文

posted @ 2017-09-23 19:18 潺潺水声 阅读(169) 评论(0) 推荐(0)

python3使用django1.11不支持MYSQL-python的解决办法
摘要:mysql-python不支持Python3,需使用pymysql代替,pip install pymysql后,打开django的源码,cd db/bin/backends/mysql,然后将下列代码写入__init__.py 阅读全文

posted @ 2017-09-17 10:24 潺潺水声 阅读(796) 评论(0) 推荐(0)

Django安装及环境配置
摘要:python 2.7 + django 1.11 首先是安装好python项目的机器,查看是否安装Django pip list 如果没有安装就 运行 pip install django 等待安装完成 接下来配置Django项目: 1、开始开发一个项目。 1.1、新建一个工作目录以存放你的项目代码 阅读全文

posted @ 2017-09-14 16:48 潺潺水声 阅读(202) 评论(0) 推荐(0)

python使用opencv实现人脸识别系统
摘要:1.首先安装过python环境,在这里就不过说 检测是否安装成功如下,在cmd中输入Python 2.安装numpy 现在开始安装numpy,打开cmd,输入pip install numpy 我的电脑已经安装过了,忘记截屏了。就在网上找了图片 测试是否成功 3.安装opencv 在官网自行下载,这 阅读全文

posted @ 2017-09-08 08:01 潺潺水声 阅读(1045) 评论(0) 推荐(0)

导航