摘要：
1. 相关软件版本 xshell: xmanager: pycharm: pycharm破解服务器：https://jetlicense.nss.im/ 2. 将相应的软件安装（pojie好） a> 启动xmanager passive，这个是用来接受linux转发过来的x11的： b> 设置xshell，使用ssh隧道将x11转发到windows机器上 在被设置的服务器上执行ech... 阅读全文
摘要：
一. pytorch官网上有安装说明： 但是在安装过程中，由于pip版本为1.5.4，需要先对pip版本进行升级才行，升级步骤如下： 1. sudo apt-get remove python-pip 2. 从https://pypi.python.org/pypi/pip#downloads，下载pip的源码： 3. 解压源码 4. 执行 sudo python setup.py i... 阅读全文
摘要：
背景: 编写了一个MapReduce程序，发现该程序内存占用非常多，需要有一种方法来分析内存详细的占用情况。 可以使用linux上的pmap –d 来看进程逻辑地址空间使用情况，但是会有很多anno区域，显然这不能够满足同学们的好奇心。 在这篇文章Eclipse远程调试HDP源代码中，提到使用JMX的方法对HDP进行远程调试。JMX（Java Management Ext... 阅读全文
摘要：
EasyPR是一款开源的中文车牌识别系统，项目地址。 在搭建的过程中，主要的问题是注意版本的兼容性，这里面的版本包括：opencv版本，g++版本以及cmake版本。 我使用的EasyPr版本信息如下： commit 569e7642c2342a31e4358831597f1bedf23258bc Merge: b88966b eb54c4c Author: liuruoze Date: ... 阅读全文
摘要：
操作系统： bigtop@bigtop-SdcOS-Hypervisor:~/py-faster-rcnn/tools$ cat /etc/issue Ubuntu 14.04.2 LTS \n \l Python版本： bigtop@bigtop-SdcOS-Hypervisor:~/py-faster-rcnn/tools$ python --version Python 2.7.6 pip版... 阅读全文
摘要：
使用的是自己编译的HDP2.3.0的源代码编译的集群，此文介绍如何使用Eclipse远程调试Hadoop内核源代码，以调试namenode为例进行介绍。 在/usr/hdp/2.3.0.0-2557/hadoop-hdfs/bin/hdfs.distro 目录下，添加如下内容，这个内容是让namenode在启动的时候，打开调试模式： 图片中的代码是（不要写错了）... 阅读全文
摘要：
登录到bigtop1上，vagrant ssh bigtop1 将/usr/lib/hadoop/libexec/init-hdfs.sh文件内容替换为: #!/bin/bash -ex # # Licensed to the Apache Software Foundation (ASF) under one or more # contributor license agreements... 阅读全文
摘要：
在Hadoop的每一个Project中，都有build-main.xml，如下图所示： 这个文件其实是通过maven-ant插件生成的，在hadoop的每一个Maven工程中，都有一个pom文件，在pom.xml文件中，有mkdir dir的动作： 阅读全文
摘要：
Check 两个地方： 1. 确保/etc/passwd中配置有/bin/bash （这个是用来控制补全）。 2. 在~/.bashrc中配置， export TERM=linux （这个是用来控制高亮） 阅读全文
摘要：
目的是要跑通这个单元测试:hadoop-hdfs/src/test/java/org/apache/hadoop/hdfs/TestClose.java 这个Java文件比较简单： /** * Licensed to the Apache Software Foundation (ASF) under one * or more contributor license agreements... 阅读全文