摘要:
转换 对象转JSON JSON转对象 说明 json字符串中的key应该与java对象的属性名相同 java对象中属性如果为private,则需要显示生成getter/setter方法;如果属性为public,则可以不必写getter/setter方法 java对象如果有自定义的构造方法,json字 阅读全文
摘要:
使用Redis进行简单的限流 限流 限流的目的是当系统的处理能力有限时,阻止计划外的请求继续对系统施压,通过对并发/请求进行限速或者一个时间窗口内的请求进行限速来保护系统,达到限制速率则可以拒绝服务。还有一个应用目的是用于控制用户的行为,比如在论坛中的发帖,回复等。一般是要控制某行为在规定时间内允许 阅读全文
摘要:
记HADOOP的学习 Hadoop起源 2004年,开发一款搜索引擎,nutch。nutch基于Lucence实现的搜索引擎,能够从互联网上抓取网页数据。抓取来的海量数据的存储问题。但是,这些海量数据都是非结构化数据,不能存在关系型数据库里。如果连数据的存储和管理都解决不了化,就谈不上后续为用户提供 阅读全文
摘要:
HADOOP学习之HDFS HDFS介绍 HDFS是hadoop自带的分布式文件系统,英文名为:Hadoop Distributed Filesystem,HDFS以流式数据访问模式来存储超大文件。根据设计,HDFS具有如下特点 HDFS特点 1. 支持超大文件 2. 检测和快速应对硬件故障 `在集 阅读全文