2015 年 9月随笔档案 - 吴一达

爱奇艺笔试题

摘要：// aiqiyitest.cpp : 定义控制台应用程序的入口点。//#include "stdafx.h"#include using namespace std;int fun(int a,int b){ static int m =1,i=2; i+= m +1; m = i +a... 阅读全文

posted @ 2015-09-27 13:19 吴一达阅读(252) 评论(0) 推荐(0) 编辑

搜狗笔试题

摘要：#include #include using namespace std;int main(){ int pid; int num = 1; pid = fork(); if(pid > 0) { num ++; ... 阅读全文

posted @ 2015-09-26 17:26 吴一达阅读(142) 评论(0) 推荐(0) 编辑

360，京东，在线编程题

摘要：题目：讨论帖：点击打开链接 int main(){switch (getchar() - '0'){case 2: puts("3"); break;case 3: puts("25"); break;case 4: puts("253"); break;case 5: p... 阅读全文

posted @ 2015-09-25 23:37 吴一达阅读(147) 评论(0) 推荐(0) 编辑

-Dmaven.multiModuleProjectDirectory system propery is not set. Check $M2_HOME environment variable a

摘要：eclipse中使用maven插件的时候，运行run as maven build的时候报错 -Dmaven.multiModuleProjectDirectory system propery is not set. Check $M2_HOME environment variabl... 阅读全文

posted @ 2015-09-25 23:19 吴一达阅读(112) 评论(0) 推荐(0) 编辑

欢聚时代笔试题，滴滴出行编程题

摘要：感谢赛码网，奇怪的A题设计，bat一轮大企业过去，没A上去几道。 intel 笔试： 1.单链表逆置，双向链表删除 2.层次遍历二叉树 3.rand4（）生成rand9（） 4.非常多的各种指针操作。面试：完全的问项目 1.stl boost c++中的智能指针，以及其实现原... 阅读全文

posted @ 2015-09-25 23:19 吴一达阅读(204) 评论(0) 推荐(0) 编辑

解决Eclipse建立Maven项目后无法建立src/main/java资源文件夹的办法

摘要：建立好一个Maven项目后，如果Java Resources资源文件下没有src/main/java文件夹，并且在手动创建这个文件时提示“已存在文件”。这说明，在这个项目配置中已经有了src/main/java这个文件夹，至于为什么不显示，我暂时也还不清楚，希望谁明白了跟我下，谢了... 阅读全文

posted @ 2015-09-25 21:46 吴一达阅读(199) 评论(0) 推荐(0) 编辑

K-均值聚类算法(K-means)

摘要：K-means是一种无监督的学习,将相似的对象归到同一个簇中.可以将一批数据分为K个不同的簇,并且每个簇的中心采用簇中所含样本的均值计算而成. K-means算法的K值需要由用户指定,算法开始时随机选择K个初始点作为质心,然后将数据集中的每个点分配到一个簇中.那么,如何确定某... 阅读全文

posted @ 2015-09-25 16:55 吴一达阅读(379) 评论(0) 推荐(0) 编辑

maven -Dmaven.multiModuleProjectDirectory system propery is not set. Check $M2_HOME

摘要：遇到错误：-Dmaven.multiModuleProjectDirectory system propery is not set. Check $M2_HOME解决办法：在环境变量中设置M2_HOME。设置之后仍然报错，maven与你的IDE不兼容，建议换低版本的maven，或者根据不同的id... 阅读全文

posted @ 2015-09-25 12:29 吴一达阅读(129) 评论(0) 推荐(0) 编辑

Linux命令行快捷键

摘要：1,ctrl + a 跳至第一个字母,相当于home 2,ctrl + e 跳至最后一个字母,相当于end 3,ctrl + u 删除此处至最前面所有字符 4,ctrl + k 删除此处至末尾所有字符 5,ctrl + w 删除此处至左边单词(即... 阅读全文

posted @ 2015-09-24 10:42 吴一达阅读(145) 评论(0) 推荐(0) 编辑

Spark程序开发-环境搭建-程序编写-Debug调试-项目提交

摘要：1,使用IDEA软件进行开发. 在idea中新建scala project, File-->New-->Project.选择Scala-->Scala 2,在编辑窗口中完成WordCount程序的编写,完整程序如下: object WordCount { def main(ar... 阅读全文

posted @ 2015-09-24 10:33 吴一达阅读(788) 评论(0) 推荐(0) 编辑

IDEA中运行KafkaWordCount程序

摘要：1,从spark的example中找到KafkaWordCount.scala文件复制到idea编辑器中,引入包: 2,编辑configuration, (1)KafkaWordCountProducer 选择KafkaWordCount.scala中的KafkaW... 阅读全文

posted @ 2015-09-24 10:31 吴一达阅读(496) 评论(0) 推荐(0) 编辑

分析比较KafkaWordCount及DierctKafkaWordCount

摘要：参考spark官方文档,Spark Streaming + Kafka Integration Guide,其中提到Spark Streaming如何从Kafka中接收数据.主要有两种方法,一种是使用Receivers的旧方法,另一种是不使用Receivers的新方法(从Spark 1.3才... 阅读全文

posted @ 2015-09-24 10:31 吴一达阅读(214) 评论(0) 推荐(0) 编辑

IDEA中运行DirectKafkaWordCount程序

摘要：1,将SPARK_HOME中的DirectKafkaWordCount程序复制到idea中. 2,由于在KafkaWordCount中已引入相关jar包,此步可略过 3,配置configurations参数关于program arguments参数,程序中定义如下: /** *... 阅读全文

posted @ 2015-09-24 10:30 吴一达阅读(359) 评论(0) 推荐(0) 编辑

Spark1.4从HDFS读取文件运行Java语言WordCounts

摘要：Hadoop：2.4.0 Spark：1.4.0 Ubuntu 14.0 1、首先启动Hadoop的HDFS系统。 HADOOP_HOME/sbin/start-dfs.sh 2、在Linux中生成一个文件test.txt，保存在/home/testjars/目录下 3、通... 阅读全文

posted @ 2015-09-24 10:22 吴一达阅读(389) 评论(0) 推荐(0) 编辑

Spark SQL官方文档阅读--待完善

摘要：1,DataFrame是一个将数据格式化为列形式的分布式容器,类似于一个关系型数据库表. 编程入口:SQLContext 2,SQLContext由SparkContext对象创建也可创建一个功能更加全面的HiveContext对象,HiveContext是SQLContext的子类,... 阅读全文

posted @ 2015-09-24 10:21 吴一达阅读(345) 评论(0) 推荐(0) 编辑

Sql表注释

摘要：1 创建表的时候写注释create table test1( field_name int comment '字段的注释')comment='表的注释'; 2 修改表的注释alter table test1 comment '修改后的表的注释'; 3 修改字段的注释alter table ... 阅读全文

posted @ 2015-09-24 10:19 吴一达阅读(492) 评论(0) 推荐(0) 编辑

Ubuntu14.04安装配置星际译王词典

摘要：参考自:http://m.blog.csdn.net/blog/u014731529/25917149 平常总会遇到一些不认识的单词，汉字等等。一直使用Chrome 浏览器的翻译插件，不过插件的翻译总是那么简单，复制了去查又太麻烦了。于是，就在软件中心找到了星际译王，装完我立马感觉到... 阅读全文

posted @ 2015-09-24 10:17 吴一达阅读(431) 评论(0) 推荐(0) 编辑

Ubuntu中firefox设置成中文

摘要：进入 http://ftp.mozilla.org/pub/mozilla.org/firefox/nightly 按版本选择下去，帮助(help)-->关于,查看浏览器的版本号所以，目录是35.0.1-candidates/build1/linux-i686/xpi/ 选择其中的zh-CN... 阅读全文

posted @ 2015-09-24 10:16 吴一达阅读(666) 评论(0) 推荐(0) 编辑

Linux中的查找命令find

摘要：原文:http://blog.csdn.net/windone0109/article/details/2817792 查找目录：find /（查找范围） -name '查找关键字' -type d 查找文件：find /（查找范围） -name 查找关键字 -print ... 阅读全文

posted @ 2015-09-24 10:15 吴一达阅读(159) 评论(0) 推荐(0) 编辑

Ubuntu14.04安装配置Chrome浏览器

摘要：1.获取软件 32位版本: wget https://dl.google.com/linux/direct/google-chrome-stable_current_i386.deb 64位版本: wget https://dl.google... 阅读全文

posted @ 2015-09-24 10:14 吴一达阅读(187) 评论(0) 推荐(0) 编辑

Win7 Eclipse Hadoop2.4插件配置

摘要：准备工作： 1、下载hadoop2x-eclipse-plugin-master.zip Github地址：https://github.com/winghc/hadoop2x-eclipse-plugin 百度网盘地址：http... 阅读全文

posted @ 2015-09-24 10:12 吴一达阅读(191) 评论(0) 推荐(0) 编辑

Ubuntu文件中文乱码

摘要：如图,该文件在gedit打开中文显示正常在命令行中用vim打开,显示内容如下: 使用命令进行编码转换 iconv -f gbk -t utf8 ./SogouQ.mini > ./sougou.data 转换后vim中显示正常阅读全文

posted @ 2015-09-24 10:10 吴一达阅读(300) 评论(0) 推荐(0) 编辑

flume1.4.0 保存文件到hdfs错误调试

摘要：报错如下解决方案:将FLUME_HOME/lib目录下的jar文件,替换成HADOOP_HOME/share/hadoop/common/lib下版本更新的jar文件阅读全文

posted @ 2015-09-24 10:09 吴一达阅读(114) 评论(0) 推荐(0) 编辑

安装配置Kafka

摘要：1,下载kafka安装包,解压缩,tar -zxvf kafka_2.10-0.8.2.1.tgz 2,修改/etc/profile文件,增加KAFKA_HOME变量 3,进入KAFKA_HOME/config目录 (1)修改server.properties文件 broker.id=... 阅读全文

posted @ 2015-09-24 10:06 吴一达阅读(176) 评论(0) 推荐(0) 编辑

Hive drop table卡住的问题

摘要：在hive中,show tables,create 等命令能正常执行,删除表drop table x时,会出现卡住的现象. 进入mysql, show variables like 'char%' 可以看到按理说是正确的. 后面发现,是在建好hive数据库后,没有第一时间将ch... 阅读全文

posted @ 2015-09-24 10:04 吴一达阅读(2495) 评论(0) 推荐(1) 编辑

Spark MLlib数据类型

摘要：MLlib支持几种数据类型:本地向量(local vectors),和存储在一个简单机器中的矩阵(matrices),以及由一个或多个RDDs组成的分布式矩阵. 1,本地向量(Local Vector) 一个本地向量是由从0开始的整型下标和double型值组成,存储在一个... 阅读全文

posted @ 2015-09-24 09:57 吴一达阅读(342) 评论(0) 推荐(0) 编辑

Android必知必会-Handler可能引起的内存泄露

摘要：在Android开发中，编写多线程通常会使用到Thread和Handler,细心的朋友会发现，很常见的写法会被编辑器提示有问题，new Handler(){} 内的代码背景颜色会变成黄色。Android Studio的提示大概就是需要定义成静态之类的，以防止内存泄露问题。时间仓促，... 阅读全文

posted @ 2015-09-24 00:27 吴一达阅读(112) 评论(0) 推荐(0) 编辑

Spark Streaming + Flume整合官网文档阅读及运行示例

摘要：1,基于Flume的Push模式(Flume-style Push-based Approach) Flume被用于在Flume agents之间推送数据.在这种方式下,Spark Streaming可以很方便的建立一个receiver,起到一个Avro agent的作用.Fl... 阅读全文

posted @ 2015-09-23 15:56 吴一达阅读(287) 评论(0) 推荐(0) 编辑

Spark-streaming 连接flume

摘要：1,程序为spark的example中的FlumeEventCount示例 object FlumeEventCount { def main(args: Array[String]) { StreamingExamples.setStreamingLogLevels() //... 阅读全文

posted @ 2015-09-23 14:17 吴一达阅读(225) 评论(0) 推荐(0) 编辑

Spark-SQL连接MySql关系型数据库

摘要：本文主要分析Spark SQL官方文档中有关于JDBC To Other Databases部分，以MySQL数据库为例，结合数据读写操作的实例代码进行详细的分析。本文中的代码需要使用到Mysql JDBC连接jar包。一、从mysql读取数据 1、单表查询完... 阅读全文

posted @ 2015-09-23 11:58 吴一达阅读(417) 评论(0) 推荐(0) 编辑

Hadoop分布式存储系统HDFS

摘要：1、hadoop fs 指令 -ls -ls 查看指定路径的当前目录结构 -lsr -lsr 递归查看指定路径的目录结构 -du -du 统计目录下个文件大小 -dus -dus 汇总统计目录下文件(夹)大小 -count -count [-q] 统计文件(夹)数量 -mv -mv... 阅读全文

posted @ 2015-09-22 10:12 吴一达阅读(198) 评论(0) 推荐(0) 编辑

Hadoop-1.0.4伪分布安装与配置

摘要：1、采用伪分布模式安装将hadoop-****.tar.gz复制到linux的/usr/local目录下。 2、解压，重命名 #tar -xzvf hadoop-1.0.4.tar.gz #mv hadoop-1.0.4 hadoop 3、配置环境... 阅读全文

posted @ 2015-09-22 10:09 吴一达阅读(128) 评论(0) 推荐(0) 编辑

CentOS配置

摘要：1、在Vmware中安装好虚拟机。 2、客户机（即虚拟机中的centos）网络连接使用仅主机模式Host-only 3、在主机中网络配置上，配置IP地址 1、使用PieTTY远程连接该虚拟机 2、使用winSCP可以用于主机，客户机之间的文件传递将该会话保存，就不需要每次进... 阅读全文

posted @ 2015-09-22 10:07 吴一达阅读(185) 评论(0) 推荐(0) 编辑

win7 VMware CentOS桥接（bridge）模式网络配置

摘要：主要内容参考自： centos下vmware 桥接设置静态ip例子关于虚拟机网络配置的文章： Win7+VMware Workstation环境下的CentOS-Linux网络连接设置（推荐阅读） win7 访问本机的CentOS 6.3 上的web项目以及互相通信访问（ ... 阅读全文

posted @ 2015-09-22 10:03 吴一达阅读(371) 评论(0) 推荐(0) 编辑

最近在线笔试的一些感想和总结，阿里巴巴，腾讯，百度，360。c++研发，机器学习等岗位

摘要：持续更新中。。。 1.编程界牛人太多了，还是要好好a题，好好弄清楚基础算法，并且用代码实现 2.c/c++方向其实来回来去那么几道题，做好了记到脑子里。下面就是我打算把不会的，不清楚的都贴上来然后好好解析做一下： 1 2 3 ... 阅读全文

posted @ 2015-09-19 00:29 吴一达阅读(123) 评论(0) 推荐(0) 编辑

Android开发-Listview中显示不同的视图布局

摘要：1. 使用场景在重写ListView的BaseAdapter时，我们常常在getView()方法中复用convertView，以提高性能。convertView在Item为单一的同种类型布局时，能够回收并重用，但是多个Item布局类型不同时，convertView的回收和重用会出现... 阅读全文

posted @ 2015-09-15 20:53 吴一达阅读(145) 评论(0) 推荐(0) 编辑

nginx root、alias、location指令使用方法

摘要：一．nginx root指令1. Nginx配置相关配置如下图：通过配置root目录到“/wwwroot/html/”位置在用虚拟主机方法，主机名称是test，需要大家配置一下自己pc的host文件，另外需要配置server的nginx.conf文件，添加“include vhost/t.conf... 阅读全文

posted @ 2015-09-08 15:46 吴一达阅读(426) 评论(0) 推荐(0) 编辑

DB 查询分析器 6.04 在 Windows 10 上的安装与运行展示

摘要：DB查询分析器 6.04 在 Windows 10 上的安装与运行展示中国本土程序员马根峰（CSDN专访马根峰：海量数据处理与分析大师的中国本土程序员 http://www.csdn.net/article/2014-08-09/2821124）推出的个人作品----万能数据库查... 阅读全文

posted @ 2015-09-06 08:08 吴一达阅读(162) 评论(0) 推荐(0) 编辑

Install and run DB Query Analyzer 6.04 on Microsoft Windows 10

摘要：Install and run DB Query Analyzer 6.04 on Microsoft Windows 10 DB Query Analyzer is presented by Master Genfeng, Ma from Chinese Mainland. I... 阅读全文

posted @ 2015-09-01 07:54 吴一达阅读(185) 评论(0) 推荐(0) 编辑

09 2015 档案

导航

公告

搜索

常用链接

随笔档案