2022年3月15日
摘要: 开发搜索-OpenSearch, 是一款结构化数据搜索托管服务单应用亿级别文档查询, 毫秒级查询延迟,万级别qps 过程:import子系统数据导入模块->格式转换、数据解析->结构化数据存储系统->实时消息系统swift->HA3订阅swift中数据->内存构建索引并提供服务 提供简单、高效、稳定 阅读全文
posted @ 2022-03-15 21:08 wangsong412 阅读(624) 评论(0) 推荐(0) 编辑
  2021年4月22日
摘要: 1、Spring Boot用于快速、方便搭建单个微服务系统;框架理念为“默认大于配置”; 2、Spring Cloud关注全局服务治理框架;Spring cloud基于Spring boot; 3、Dubbo是阿里巴巴开源的服务治理框架; 中心组件对服务进行整合,将每个服务信息进行汇总,包括服务组件 阅读全文
posted @ 2021-04-22 20:41 wangsong412 阅读(84) 评论(0) 推荐(0) 编辑
  2021年3月16日
摘要: GC: Garbage Collection, 垃圾收集 java堆内存分: 新生代(1个Eden区, 2个Survivor区,比例:8:1:1)、老年代 GC要做的事情: 针对有限内存,将不用的对象清除,达到内存释放目的 GC机制递进理解: GC的区域在哪里, GC的对象是什么,GC的时机是什么? 阅读全文
posted @ 2021-03-16 20:49 wangsong412 阅读(62) 评论(0) 推荐(0) 编辑
  2021年1月29日
摘要: (转)https://blog.csdn.net/qianyongismydream/article/details/70258336 问题:有表 如下,要求取出各班前两名(允许并列第二)Table1+ + + + +| id |SName |ClsNo |Score|+ + + + +| 1 |A 阅读全文
posted @ 2021-01-29 16:49 wangsong412 阅读(240) 评论(0) 推荐(0) 编辑
  2021年1月20日
摘要: 大数据JSON流解析 背景 最近在做一个需求,需要每月从一个别的数据系统同步一次数据过来。数据量大概90W条左右,数据接口只提供了一个JSON接口,接口返回报文为JSON,并且没有任何分页。这个数据量如果直接使用普通方式解析的话,肯定内存溢出。 解决思路 我们要保证内存溢出,那么就不能把得的数据全部 阅读全文
posted @ 2021-01-20 12:11 wangsong412 阅读(751) 评论(0) 推荐(0) 编辑
  2020年12月16日
摘要: 关于http get和form表单post提交数据大小限制 httpget是通过url来传递数据,url不存在上限的问题,http协议也没有对utl长度做出限制,但是浏览器以及web服务器会对url长度做出限制,这个长度大小因浏览器以及服务器的不同而不同,一般在几kb之内。 关于form表达提交数据 阅读全文
posted @ 2020-12-16 16:35 wangsong412 阅读(103) 评论(0) 推荐(0) 编辑
  2020年12月2日
摘要: reduce是用来执行聚合操作的 reduce方法有三个override的方法: Optional<T> reduce(BinaryOperator<T> accumulator); T reduce(T identity, BinaryOperator<T> accumulator); <U> U 阅读全文
posted @ 2020-12-02 21:26 wangsong412 阅读(1123) 评论(0) 推荐(0) 编辑
摘要: Java 8的一个大亮点是引入Lambda表达式,使用它设计的代码会更加简洁。当开发者在编写Lambda表达式时,也会随之被编译成一个函数式接口。下面这个例子就是使用Lambda语法来代替匿名的内部类,代码不仅简洁,而且还可读。 没有使用Lambda的老方法: button.addActionLis 阅读全文
posted @ 2020-12-02 21:14 wangsong412 阅读(819) 评论(0) 推荐(0) 编辑
  2020年11月2日
摘要: between and 在记录条数大于1万条以上, 会使用索引(该字段建有索引), 小于1万条 会按照数据范围有选择的使用索引,大概 区间在18%以内会使用索引, 超出则全表扫 参考:http://www.51testing.com/html/85/132585-860191.html 阅读全文
posted @ 2020-11-02 20:44 wangsong412 阅读(125) 评论(0) 推荐(0) 编辑
  2020年10月12日
摘要: MYSQL主从用途1) MYSQL主从,有主库和从库,内容一般是一致,master/slave;2) 假设LAP(Linux+Apache+PHP)+MYSQL(单台),MYSQL属于单点故障,一旦MYSQL宕机,整合网站无法访问;3) 为了解决单点问题,引入MYSQL从库,从而保证网站数据库不宕机 阅读全文
posted @ 2020-10-12 19:39 wangsong412 阅读(93) 评论(0) 推荐(0) 编辑