06 2016 档案
摘要：转载自：http://blog.sina.com.cn/s/blog_85ead02a0101csci.html MYSQL千万级数据量的优化方法积累 1、分库分表 转载自：http://blog.sina.com.cn/s/blog_85ead02a0101csci.html MYSQL千万级数据
阅读全文
摘要：将mysql数据库内的表导出为execel格式文件： 方法1：mysql命令：select * into outfile '/tmp/test.xls' from table_name;（需要注意的是'/tmp'这一目标文件夹，如果换成其它文件夹可能会有写权限的问题，具体可以再另外尝试） 方法2：P
阅读全文
摘要：更新表中的字段： update 表名 set 字段=新值,… where 条件； UPDATE语法可以用新值更新原有表行中的各列。SET子句指示要修改哪些列和要给予哪些值。WHERE子句指定应更新哪些行。如果没有WHERE子句，则更新所有的行。如果指定了ORDER BY子句，则按照被指定的顺序对行进
阅读全文
摘要：代码备份命令： tar cvf 备份文件名 要备份的目录名 查看Linux服务器内存使用情况： 1、free命令 free -m [root@localhost ~]# free -m total used free shared buffers cachedMem: 1526 182 1344 0
阅读全文
摘要：最近项目需要将大量的压缩文件导入到数据库中，所以开始总结用Python批量处理的办法，本次是首先将这些压缩文件的文件名提取出来，然后导入到数据库中。 由于涉及到路径的读取处理，所以方法有os模块和commands模块，本次主要采用commands模块（有时间的话，一定要再探索一下os模块实现的方式）
阅读全文
摘要：alter 方法是我们在处理MySQL数据库中一个常见的方法，能帮助我们更好的处理数据库中的表 1.增加 数据库中表的字段：alter table table_name add [column] column_name 【此处添加的字段会在所有字段最后面的位置】； 2.删除数据库中表的字段：alte
阅读全文
摘要：目标：1个excel表内容导入到数据库中，例如：原始excel文件为 aaa.xls 首先：将aaa.xls 转换成aaa.txt ,注意当文件中含有中文字符时，可以通过notepad++打开，在“格式”下选择转存为utf8格式或者选择utf8格式再另存 即： txtFile = aaa.txt #
阅读全文
摘要：有一些爬虫的程序需要在后台运行，所以简单总结了一下nohup 的一些用法 基本命令：nohup command $; 运行之后出现nohup: ignoring input and appending output to `nohup.out' 表示运行成功 但是这里就只能这样挂着，要想继续应用这个
阅读全文
摘要：马上要开始数据相关的工作了，但是有时候会自觉不自觉的对一些最近火热的概念有些不太清晰的地方，所以在此整理一下这些概念，希望在以后的工作学习过程中，能结合自己的感受，不断进行完善。 大数据：（概念、实现、）数据采集、数据挖掘、数据清洗 深度学习： 机器学习： 自然语言处理：
阅读全文