摘要: 前提:已经装好 java 1.8 和 hadoop 2.71. 下载解压放后的目录/Users/gao/spark-1.4.1-bin-hadoop2.62. 在~/.bash_profile 中加入 export PYTHONPATH=$PYTHONPATH:/Users/gao/spark-1.... 阅读全文
posted @ 2015-08-24 23:38 高山流的不是水 阅读(356) 评论(0) 推荐(0) 编辑
摘要: 打开新窗口:screen退出并保持程序的运行:ctrl+ad查看所有 screen:screen -ls进入某个 screen:screen -r session-id退出并终止程序:exit 阅读全文
posted @ 2015-08-24 19:42 高山流的不是水 阅读(231) 评论(0) 推荐(0) 编辑
摘要: 参数:-c :建立一个压缩文件的参数指令(create 的意思);-x :解开一个压缩文件的参数指令!-t :查看 tarfile 里面的文件!特别注意,在参数的下达中, c/x/t 仅能存在一个!不可同时存在!因为不可能同时压缩与解压缩。-z :是否同时具有 gzip 的属性?亦即是否需要用 gz... 阅读全文
posted @ 2015-08-21 10:29 高山流的不是水 阅读(140) 评论(0) 推荐(0) 编辑
摘要: 经测试,tokudb 的事务会锁表,不管有没有用到索引,触发器也会锁表,(可能触发器和事务的原理是一样的吧)。innodb 只会锁行。竟然把这么坑的数据库用到线上来了,这下坑爹了。 阅读全文
posted @ 2015-08-19 16:12 高山流的不是水 阅读(208) 评论(0) 推荐(0) 编辑
摘要: 连接池:在执行 connect()和execute()时,engine 对象会向连接池请求一个连接,默认的连接池是QueuePool,连接的数量是基于需求。当有多条语句执行时,QueuePool会将连接数量增加到默认值5,如果不够的话可以再增加,最多10个连接。engine 对象是连接池的总部,所以... 阅读全文
posted @ 2015-08-19 16:07 高山流的不是水 阅读(181) 评论(0) 推荐(0) 编辑
摘要: 如何释放空间?1. 先用 remove 命令删除数据2. repair。需要停机,即便你不停机的话 mongodb 自己也会锁住直到 repair 完成。注意要有足够的磁盘空间,需要额外一倍的空间,如果mongodb 占用了100G,那么 repair 时还需要额外的100G 空间。可以追加磁盘,然... 阅读全文
posted @ 2015-08-16 01:06 高山流的不是水 阅读(462) 评论(0) 推荐(0) 编辑
摘要: db.copyDatabase("from","to","127.0.0.1:16161");将127.0.0.1上的from库。拷贝到to库。这样做有一个额外的好处。就是from库中可能是删除过数据的库。看我们知道删除数据时磁盘空间是不会被释放的。参考博客里的另一篇文章:mongodb删除集合后磁... 阅读全文
posted @ 2015-08-15 22:21 高山流的不是水 阅读(4638) 评论(0) 推荐(0) 编辑
摘要: wgethttp://www.python.org/ftp/python/2.7.3/Python-2.7.3.tgz tar zxf Python-2.7.3.tgzcd Python-2.7.3./configure –prefix=/usr/local/python27makemake ins... 阅读全文
posted @ 2015-08-12 18:04 高山流的不是水 阅读(140) 评论(0) 推荐(0) 编辑
摘要: 虽然#define语句看起来象typedef,但实际上却有本质上的差别。对于#define来说,仅在编译前对源代码进行了字符串替换处理;而对于typedef来说,它建立了一个新的数据类型别名。由此可见,只是将pch1定义为指针变量,却并没有实现程序员的意图,而是将pch2定义成了char型变量。... 阅读全文
posted @ 2015-08-06 23:51 高山流的不是水 阅读(130) 评论(0) 推荐(0) 编辑
摘要: Objects are structures allocated on the heap. Special rules apply to the use of objects to ensure they are properly garbage-collected.Objects are neve... 阅读全文
posted @ 2015-08-06 16:03 高山流的不是水 阅读(162) 评论(0) 推荐(0) 编辑