dataframe 差集
摘要：>>>data_a={'state':[1,1,2],'pop':['a','b','c']}>>>data_b={'state':[1,2,3],'pop':['b','c','d']}>>>a=pd.DataFrame(data_a)>>>a pop state0 a 11 b 12 c 2>>
阅读全文
posted @ 2018-09-29 11:05
09 2018 档案
使程序在Linux下后台运行
摘要：1. 在终端输入命令，使程序后台执行： nohup ./pso > pso.log 2>&1 & 解释：nohup就是不挂起的意思，将pso直接放在后台运行，并把终端输出存放在当前 目录下的pso.log文件中。当客户端关机后重新登陆服务器后，直接查看pso.log文件就可看执行结果（命令：#cat
阅读全文
posted @ 2018-09-29 04:09
pandas 合并数据
摘要：1. pandas 的merge,join 就不说了。 2. 神奇的： concat append 参考： PANDAS 数据合并与重塑（concat篇） 3.
阅读全文
posted @ 2018-09-28 19:44
mysql 当前时间
摘要：1. mysql 获取当前时间 select now() ,current_timestamp(),localtimestamp(),sysdate() ,curdate(),curtime(),utc_date() ; 2. # 获取当前时间24小时的事件 select date_sub(now(
阅读全文
posted @ 2018-09-28 17:29
钉钉机器人-实现监控通知功能-python
摘要：1. 首先得创建有 一个 钉钉群。（因为只能发群通知） 2. 添加机器人，得到一个url: 3. 开始写Python脚本：
阅读全文
posted @ 2018-09-26 14:06
hive常用语句
摘要：1. 删除分区 ALTER TABLE dms.tracklog_5min DROP PARTITION(DAY='${today}');ALTER TABLE table_name DROP IF EXISTS PARTITION(dt='2018-01-01', game_code='gcol'
阅读全文
posted @ 2018-09-26 09:51
pandas删除dataframe列
摘要：data2 = data.drop(data.columns[0,1,3,4,6,8,10], 1)
阅读全文
posted @ 2018-09-26 09:40
Python多线程-2（线程共享全局变量）
摘要：例子： python进阶之多线程对同一个全局变量的处理
阅读全文
posted @ 2018-09-21 15:52
Python多线程
摘要：一、进程和线程的区别： 简而言之： 一个程序至少有一个进程,一个进程至少有一个线程. 守护线程：当所有的非守护线程结束时，程序也就终止了，同时会杀死进程中的所有守护线程。 进程是资源分布的单元 线程是进程中真正执行代码的 进程运行起来，会有一个主线程进行运行 父子线程：相互独立运行，当所有的子线程执
阅读全文
posted @ 2018-09-21 15:13
坐标转换
摘要：坐标转换 原文链接：https://github.com/wandergis/coordtransform 地图坐标转换 -- 火星坐标与GPS坐标 https://www.cnblogs.com/sylvanas2012/p/5342530.html
阅读全文
posted @ 2018-09-19 11:59
为Python添加默认模块搜索路径
摘要：原文出处：https://www.douban.com/note/334738164/ 方法一:增加.pth文件，推荐！ 在site-packages添加一个路径文件，如mypkpath.pth， 必须以.pth为后缀，写上你要加入的模块文件所在的目录名称就是了。 site-packages文件夹路
阅读全文
posted @ 2018-09-19 11:40
python try详细说明（python的异常捕捉模块）
摘要：# 划重点： 1. 详解。参考链接
阅读全文
posted @ 2018-09-18 22:43
mongdb学习笔记
摘要：mongodb学习资源：https://www.runoob.com/mongodb pymongo基本语法 1. 查看所有数据库 2. 切换数据库 运行"use"命令，可以连接到一个指定的数据库。db查看当前数据库 > use local switched to db local > db loc
阅读全文
posted @ 2018-09-14 16:33
python在不同层级目录import模块的方法
摘要：python在不同层级目录import模块的方法
阅读全文
posted @ 2018-09-14 11:42
python 入门
摘要：学习任何教程时建议跳过Python的安装、环境配置、ide安装过程（这些过程太打击自信且不重要）。 直接下载安装如下软件，安装好后打开spyder代替黑命令框或者pycharm(超级吃内存)。 anaconda下载地址：（32位）https://mirrors.tuna.tsinghua.edu.c
阅读全文
posted @ 2018-09-14 00:07
windows中连接hive-客户端
摘要：参考连接：http://lxw1234.com/archives/2016/09/723.htm 这里主要介绍：Oracle SQL Developer 1. 下载，免安装包 SQL Developer 4.1.5。及hive对应jar包 （- 我的百度云链接：https://pan.baidu.c
阅读全文
posted @ 2018-09-12 17:10
shell中后台进程管理： ps -aux 详解
摘要：常用 查找进程id方法： ps -aux | grep "jupyter" 杀进程： kill -9 具体的PID 1、ps命令 要对进程进行监测和控制,首先必须要了解当前进程的情况,也就是需要查看当前进程,而ps命令就是最基本同时也是非常强大的进程查看命令.使用该命令可以确定有哪些进程正在运行和运
阅读全文
posted @ 2018-09-12 15:30
通过anaconda进行python多版本控制
摘要：恢复内容开始 linux与windows通用。 1. 假设电脑上已经转好anaconda3. (anaconda 默认装好了python3、jupyter、spyter) 2. 现在需求是：我想同时使用python2. 但是不想python2与python3冲突。 而且希望pip install 安
阅读全文
posted @ 2018-09-11 09:17
搭建java环境
摘要：1. JDK下载 与 安装 Java的JDK又称Java SE（以前称J2SE），是Sun公司的产本，由于Sun公司已经被Oracle收购，因此JDK可以在Oracle公司的官方网站（http://www.oracle.com/index.html）下载。 最新的下载链接：http://www.or
阅读全文
posted @ 2018-09-02 23:04
