摘要:
大数据导入实现过程中,出现最常见的两个问题:超出行数限制和内存溢出! 18天的数据,总共是500w条,如何将500w条记录存入excel中,我当时想过两种实现方式:PLSQL DEVELOPER和Java poi!PLSQL DEVELOPER 有两种实现方法: 1、在新建一个SQL WINDO... 阅读全文
摘要:
TCP/IP层次模型共分为五层:应用层HTTP、传输层TCP、网络层IP、数据链路层Data-link、物理层physical。 应用层—应用层是所有用户所面向的应用程序的统称。ICP/IP协议族在这一层面有着很多协议来支持不同的应用,如我们进行万维网(WWW)访问用到了HTTP协议、文件传输用... 阅读全文
摘要:
又是这个百无聊赖的问题,虽然问题芝麻点大,却让我们好找啊! 很久没有安装oracle了,今天安装11g的时候,用PLSQL Developer连接时,就出现了这个俗不可耐的问题:ORA-12154 TNS无法解析指定的连接标识符。我自认为安装的时候已经很小心翼翼了,结果还是出了纰漏,于是乎,我抱... 阅读全文
摘要:
View Code tips: ajax跨域请求,只支持get请求方式 async 是否异步 url 请求的地址,可带参 dataType 这个参数很重要,只有jsonp格式的数据才可以传过去 jsonp 注意这个参数,它的值作为一个函数名必须必须加在另一端传过来的json格式数据的前面。借... 阅读全文
摘要:
不仅list是有序集合,set也可以变为有序集合。/** * 给字符串时间的set排序 * @return 有序的set集合 */ public static Set getSort(){ Set st = new TreeSet(new Compa... 阅读全文
摘要:
最近在开发实战中,遇到了一个这样的技术情景:把log4j生成的日志文件定时刷进MySQL数据库,比如三个小时刷一次,那么每次刷数据的时候,如何控制文件读取是从上一次文件读取结束的地方开始继续读取的?并且本次要读取到文件结尾处。在网上各种搜索提问后,找到了一个叫RandomAccessFileJa... 阅读全文
摘要:
最近项目在做网站用户数据新访客统计,数据存储在MongoDB中,统计的数据其实也并不是很大,1000W上下,但是公司只配给我4G内存的电脑,让我程序跑起来气喘吁吁...很是疲惫不堪。 最常见的问题莫过于查询MongoDB内存溢出,没办法只能分页查询。这种思想大家可能都会想到,但是如何分页,确实... 阅读全文
摘要:
以下是官网原文地址: http://docs.mongodb.org/manual/tutorial/create-an-auto-incrementing-field/概要 MongoDB 的_id字段作为一个主键存在于所有文档的最顶层,_id必须是唯一的,而且总是具有唯一约束的索引。除了唯一... 阅读全文
摘要:
MongoDB Auto-Sharding 解决了海量存储和动态扩容的问题,但离实际生产环境所需的高可靠、高可用还有些距离,所以有了"Replica Sets + Sharding"的解决方案。 shard: 使用Replica Sets,确保每个数据节点都具有备份,自动容错转移,自动回复能力。... 阅读全文
摘要:
有些时候有于硬件资源有限,所以我们不得不进行一些回收工作,下面我们就要将刚刚启用的Shard Server 回收,系统首先会将在这个即将被移除的Shard Server 上的数据先平均分配到其它的Shard Server 上,然后最终在将这个Shard Server 踢下线, 我们需要不停的调用... 阅读全文