摘要:
在搭建好的 resourceHA的环境下, 配置yarn yarn是 hadoop2以后的计算框架, 通过ResourceManager的调用, 将我们写的程序包分到各个nodeManager上, 由于hadoop的理念是移动计算, 所以NodeManager和 DataNode是同一个机器 在 $ 阅读全文
摘要:
之前建好了redis集群, 但没有找到集群重启的机制, 停电2次, 重新创建太麻烦, 于是写了个脚本辅助启动 redis的创建过程可以看: 然后, 直接放在父目录下就可以了 由于没有找到和shell交互的方式, 创建的时候需要输入一个yes, 所以吧集群创建和密码设置分开了 执行时, stop->c 阅读全文
摘要:
python3 中使用的是 PyMySQL模块, 取代了之前的 MysqlDB 模块, 其实使用都是一样的, 如果没有该模块的, 需要使用pip命令进行安装 安装完成以后, 就可以使用了 1, 获取链接 2, mysql的 CRUD操作 其中 CRUD操作, 需要mysql的事务操作, python 阅读全文
摘要:
java类中, 有一系列的装饰器, 尤其对文件的操作, python的装饰器比较简单, 直接上代码 然后, 可能会有带有参数的 阅读全文
摘要:
python的所有的异常都继承自基类: Exception 处理方式和java类似: 多个异常的捕捉, 可以使用连续的exept或者使用括号进行捕捉 python的异常还有一个else子句, 没有任何异常的时候去执行 自定义异常: 和其他语言一样, python也可以进行自定义异常, 并且抛出; 在 阅读全文
摘要:
新式类就是 class person(object): 这种形式的, 从py2.2 开始出现的 新式类添加了: 新式类的出现, 除了添加了大量方法以外, 还改变了经典类中一个多继承的bug, 因为其采用了广度优先的算法 粘贴一段官网上的作者解释 是说经典类中如果都有save方法, C中重写了save 阅读全文
摘要:
python中列表的使用最多, 常用的方法有: 对列表遍历的3种方式; 其他的: 1, 列表推导式 字典推导 2, 嵌套列表的转换 比如, 我想把一个 3 * 4 的列表转换为 4 * 3 的列表 enumerate返回的是一个迭代器对象, 里面包含一个yield, 可以返回函数的运行状态 我们也可 阅读全文
摘要:
在mongodb的bin目录下, 有一个mongoexport, 可用于数据的导出 导出文件到json中: 导出文件到csv中 可能会出现乱码, 用记事本另存utf-8 就可以了 在使用-q 查询条件过滤数据的时候,注意两边的 ’ (单引号) 当数据量很大时候,可以使用--skip 配合 --lim 阅读全文
摘要:
python的变量不需要声明, 但变量使用前必须复制, 因为python中所有的内容全部是对象 变量是没有类型的, 有类型的是指向内存对象的类型 此外, python还可以进行多变量的连续赋值 1, Number类型 python的math函数 2, str类型 另外: 字符串的运算有: >>>a 阅读全文
摘要:
前几天, 觉得python简单的不行, 没有仔细做笔记, 然后今天翻了下前几天看的东西, 还是记下来吧 对于python2.7 和 python3 , 建议使用python3 的模式编程, 然后使用python2.7 的包去运行 1, 头 python文件的头一般用来声明的, 个shell有些类似, 阅读全文