11 2014 档案

Git命令行下解决冲突
摘要：使用Git时，在pull、merge、rebase的过程中，经常会遇到conflict的情况。遇到conflict时，以上处理过程会终端，并且命令行中显示（xxx|MERGING）的状态（Windows下Git Bash中显示的状态）。命令行下解决冲突的方法为：使用任意的文本编辑工具编辑有冲突的文件... 阅读全文
posted @ 2014-11-25 21:05 StanZhai 阅读(18990) 评论(0) 推荐(2) 编辑
利用PhantomJS进行网页截屏，完美解决截取高度的问题
摘要：## 关于PhantomJS[PhantomJS](http://phantomjs.org/) 是一个基于WebKit的服务器端 JavaScript API。它全面支持web而不需浏览器支持，其快速，原生支持各种Web标准： DOM 处理, CSS 选择器, JSON, Canvas, 和 SV... 阅读全文
posted @ 2014-11-19 14:58 StanZhai 阅读(14701) 评论(5) 推荐(7) 编辑
通过js引用外部脚本（嘿嘿，方便直接在浏览器上调试抓取代码）
摘要：最近折腾爬虫，后端使用jQuery进行数据采集，一般都是先从浏览器中将采集代码调试好后直接放到后端跑了。有些网址没有引用jQuery，那调试起来就不方便了，可以用以下代码动态添加script标签，将jQuery引用到页面中。```var scriptBlock = document.createEl... 阅读全文
posted @ 2014-11-11 19:54 StanZhai 阅读(804) 评论(2) 推荐(0) 编辑
Spark在Hadoop集群上的配置(spark-1.1.0-bin-hadoop2.4)
摘要：运行Spark服务，需要在每个节点上部署Spark。可以先从主节点上将配置修改好，然后把Spark直接scp到其他目录。## 关键配置修改`conf/spark-env.sh`文件：```export JAVA_HOME=/usr/java/latestexport HADOOP_CONF_DIR=... 阅读全文
posted @ 2014-11-11 14:13 StanZhai 阅读(940) 评论(0) 推荐(0) 编辑
Hadoop 2.4.x集群安装配置问题总结
摘要：## 配置文件：/etc/profile```export JAVA_HOME=/usr/java/latestexport HADOOP_PREFIX=/opt/hadoop-2.4.1export HADOOP_COMMON_LIB_NATIVE_DIR=${HADOOP_PREFIX}/lib... 阅读全文
posted @ 2014-11-09 11:56 StanZhai 阅读(568) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示