05 2018 档案

RabbitMQ应用
摘要：RabbitMQ Win7安装1、下载erlang，原因在于RabbitMQ服务端代码是使用并发式语言erlang编写的，下载地址：http://www.erlang.org/downloads，双击.exe文件进行安装就好，安装完成之后创建一个名为ERLANG_HO... 阅读全文

posted @ 2018-05-31 17:29 疯狂的小萝卜头 阅读(128) 评论(0) 推荐(0) 编辑

Opencv识别图中人脸
摘要：#!/usr/bin/python#coding=utf-8# 识别图片中的人脸import face_recognitionjobs_image = face_recognition.load_image_file("C:/rlsb/jobs.jpg");obama... 阅读全文

posted @ 2018-05-25 16:30 疯狂的小萝卜头 阅读(194) 评论(0) 推荐(0) 编辑

基于Opencv自有模型识别人脸与人眼
摘要：#!/usr/bin/python# -*- coding: utf-8 -*-import cv2face_cascade = cv2.CascadeClassifier("D:/Open-cv/opencv/build/etc/haarcascades/haarc... 阅读全文

posted @ 2018-05-25 16:24 疯狂的小萝卜头 阅读(169) 评论(0) 推荐(0) 编辑

Opencv中KNN背景分割器
摘要：背景分割器BackgroundSubtractor是专门用来视频分析的，会对视频中的每一帧进行“学习”，比较，计算阴影，排除检测图像的阴影区域，按照时间推移的方法提高运动分析的结果。而且BackgroundSubtractor不仅可以用于背景分割，而且还可以提高背景检... 阅读全文

posted @ 2018-05-25 16:13 疯狂的小萝卜头 阅读(796) 评论(0) 推荐(0) 编辑

基于谷歌开源的TensorFlow Object Detection API视频物体识别系统搭建自己的应用（三）
摘要：基于上篇基于谷歌开源的TensorFlow Object Detection API视频物体识别系统搭建自己的应用（一），实现摄像头物体识别下载opencv的cv2包在Python官网即可下载opencv相关库，点击此处直接进入。 pip install opencv... 阅读全文

posted @ 2018-05-25 15:47 疯狂的小萝卜头 阅读(337) 评论(0) 推荐(0) 编辑

基于谷歌开源的TensorFlow Object Detection API视频物体识别系统搭建自己的应用（二）
摘要：基于上篇基于谷歌开源的TensorFlow Object Detection API视频物体识别系统搭建自己的应用（一），实现视频物体识别基于上篇，新建VideoTest.py，并将一个视频文件放入到object_detection目录下主要步骤如下： 1.使用 Vi... 阅读全文

posted @ 2018-05-25 15:23 疯狂的小萝卜头 阅读(368) 评论(0) 推荐(0) 编辑

基于谷歌开源的TensorFlow Object Detection API视频物体识别系统搭建自己的应用（一）
摘要：基于上篇安装运行谷歌开源的TensorFlow Object Detection API视频物体识别系统，搭建自己的应用。替换测试图片分析源码：官方测试图片放置在test_images目录下，名称格式为image{}.jpg（image+数字格式），循环两张（imag... 阅读全文

posted @ 2018-05-25 14:39 疯狂的小萝卜头 阅读(758) 评论(0) 推荐(0) 编辑

安装运行谷歌开源的TensorFlow Object Detection API视频物体识别系统
摘要：Linux安装参照官方文档：https://github.com/tensorflow/models/blob/master/research/object_detection/g3doc/installation.md安装Python下载地址https://www.... 阅读全文

posted @ 2018-05-25 13:57 疯狂的小萝卜头 阅读(354) 评论(0) 推荐(0) 编辑

Spark MLlib机器学习（一）——决策树
摘要：决策树模型，适用于分类、回归。 简单地理解决策树呢，就是通过不断地设置新的条件标准对当前的数据进行划分，最后以实现把原始的杂乱的所有数据分类。就像下面这个图，如果输入是一大堆追求一个妹子的汉子，妹子内心里有个筛子，最后菇凉也就决定了和谁约（举栗而已哦，不代表什么～大家... 阅读全文

posted @ 2018-05-18 15:19 疯狂的小萝卜头 阅读(224) 评论(0) 推荐(0) 编辑

Spark 计算人员三度关系
摘要：1、一度人脉：双方直接是好友 2、二度人脉：双方有一个以上共同的好友，这时朋友网可以计算出你们有几个共同的好友并且呈现数字给你。你们的关系是： 你->朋友->陌生人 3、三度人脉：即你朋友的朋友的朋友就是这个陌生人。你们的关系是 你->朋友->朋友->陌生人 4、四度... 阅读全文

posted @ 2018-05-17 13:09 疯狂的小萝卜头 阅读(567) 评论(0) 推荐(0) 编辑

Spark 计算人员二度关系
摘要：1、一度人脉：双方直接是好友 2、二度人脉：双方有一个以上共同的好友，这时朋友网可以计算出你们有几个共同的好友并且呈现数字给你。你们的关系是： 你->朋友->陌生人 3、三度人脉：即你朋友的朋友的朋友就是这个陌生人。你们的关系是 你->朋友->朋友->陌生人 4、四度... 阅读全文

posted @ 2018-05-17 11:35 疯狂的小萝卜头 阅读(549) 评论(0) 推荐(0) 编辑

Hadoop MapReduce实现人员二度关系运算
摘要：1、一度人脉：双方直接是好友 2、二度人脉：双方有一个以上共同的好友，这时朋友网可以计算出你们有几个共同的好友并且呈现数字给你。你们的关系是： 你->朋友->陌生人 3、三度人脉：即你朋友的朋友的朋友就是这个陌生人。你们的关系是 你->朋友->朋友->陌生人 4、四度... 阅读全文

posted @ 2018-05-17 11:11 疯狂的小萝卜头 阅读(377) 评论(0) 推荐(0) 编辑

neo4j图形数据库Java应用
摘要：CREATE(陈冠希:明星 {名称: "陈冠希"}),(王菲:明星 {名称: "王菲"}),(李亚鹏:明星 {名称: "李亚鹏"}),(瞿颖:明星 {名称: "瞿颖"}),(张柏芝:明星 {名称: "张柏芝"})... 阅读全文

posted @ 2018-05-09 16:27 疯狂的小萝卜头 阅读(3631) 评论(1) 推荐(0) 编辑

Spark2.0基于广播变量broadcast实现实时数据按天统计
摘要：package com.gm.hive.SparkHive;import java.text.SimpleDateFormat;import java.util.Arrays;import java.util.Collection;import java.util.D... 阅读全文

posted @ 2018-05-08 16:04 疯狂的小萝卜头 阅读(1722) 评论(0) 推荐(0) 编辑

Sprak2.0 Streaming消费Kafka数据实时计算及运算结果保存数据库代码示例
摘要：package com.gm.hive.SparkHive;import java.util.Arrays;import java.util.Collection;import java.util.HashMap;import java.util.List;impor... 阅读全文

posted @ 2018-05-07 14:42 疯狂的小萝卜头 阅读(1048) 评论(0) 推荐(0) 编辑

Spark2.0 Java实现将Hive运算结果保存到数据库
摘要：package com.gm.hive.SparkHive;import org.apache.spark.sql.Dataset;import org.apache.spark.sql.Row;import org.apache.spark.sql.SaveMode... 阅读全文

posted @ 2018-05-07 11:36 疯狂的小萝卜头 阅读(381) 评论(0) 推荐(0) 编辑

sqoop使用中文手册
摘要：文章转载自：http://www.zihou.me/html/2014/01/28/9114.html1. 概述本文档主要对SQOOP的使用进行了说明，参考内容主要来自于Cloudera SQOOP的官方文档。为了用中文更清楚明白地描述各参数的使用含义，本文档... 阅读全文

posted @ 2018-05-07 09:08 疯狂的小萝卜头 阅读(694) 评论(0) 推荐(0) 编辑

linux 根目录扩容
摘要：之前搭建了一个CentOS(7.0, x64)的VM，一直没留意它的硬盘空间。昨天，系统突然弹出警示，说 根目录 空间不足了。 这样的话，就只能给它增加空间呗。我自己其实已经增加过硬盘空间了，但是为了写这篇博客，我再一次添加了10GB的硬盘在虚拟机关机的前提下，先通过... 阅读全文

posted @ 2018-05-05 13:37 疯狂的小萝卜头 阅读(3561) 评论(0) 推荐(0) 编辑

Spark2.0集成Hive操作的相关配置与注意事项
摘要：前言已完成安装Apache Hive，具体安装步骤请参照，Linux基于Hadoop2.8.0集群安装配置Hive2.1.1及基础操作补充说明Hive中metastore（元数据存储）的三种方式：内嵌Derby方式Local方式Remote方式[一]、内嵌Derby方... 阅读全文

posted @ 2018-05-05 13:15 疯狂的小萝卜头 阅读(4618) 评论(0) 推荐(0) 编辑

总结可用的大数据分析软件对应版本
摘要：apache-flume-1.8.0-bin、kafka_2.11-0.10.0.0、spark-2.0.0-bin-hadoop2.7hadoop-2.8.0、hbase-1.2.6、apache-hive-2.1.1-bin、zookeeper-3.4.10、sq... 阅读全文

posted @ 2018-05-04 11:20 疯狂的小萝卜头 阅读(222) 评论(0) 推荐(0) 编辑

Linux安装Sqoop及基础使用
摘要：下载Sqoop官网地址http://sqoop.apache.org/wget http://mirrors.hust.edu.cn/apache/sqoop/1.4.7/sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz安装及配置解压tar -... 阅读全文

posted @ 2018-05-04 11:15 疯狂的小萝卜头 阅读(2707) 评论(0) 推荐(0) 编辑

Spark集成Kafka实时流计算Java案例
摘要：package com.test;import java.util.*;import org.apache.spark.SparkConf;import org.apache.spark.TaskContext;import org.apache.spark.api.... 阅读全文

posted @ 2018-05-03 16:39 疯狂的小萝卜头 阅读(1501) 评论(0) 推荐(0) 编辑

Linux基于Hadoop2.8.0集群安装配置Hive2.1.1及基础操作
摘要：前言安装Apache Hive前提是要先安装hadoop集群，并且hive只需要在hadoop的namenode节点集群里安装即可，安装前需保证Hadoop已启（动文中用到了hadoop的hdfs命令）。关于如何安装Hadoop集群请参照：CentOS7搭建Hadoo... 阅读全文

posted @ 2018-05-03 16:32 疯狂的小萝卜头 阅读(803) 评论(0) 推荐(0) 编辑

CentOS7搭建Hadoop2.8.0集群及基础操作与测试
摘要：环境说明示例环境主机名IP角色系统版本数据目录Hadoop版本master192.168.174.200nameNodeCentOS Linux release 7.4.1708 (Core) 2.8.0slave1192.168.129.201dataNodeCen... 阅读全文

posted @ 2018-05-03 14:30 疯狂的小萝卜头 阅读(157) 评论(0) 推荐(0) 编辑

< 2025年3月 >
日 一 二 三 四 五 六
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

统计

点击右上角即可分享
微信分享提示