Java List分批处理
摘要：
工作中经常遇到分批处理的问题，比如将一个List列表中的数据分批次保存至数据库中。如果列表中数据条目很大，比如1000万条以上，mysql中 max_allowed_packet 所能允许的最大数据包量不支持如此大的数据量，这种情况下一次性保存处理就会出现保存失败。另外，过大的数据条目数量，在保存时 阅读全文
posted @ 2021-01-26 00:36 论语 阅读(2666) 评论(0) 推荐(1) 编辑
粗粒度服务的执行时间统计算法实现及问题推广
摘要：
工作中遇到一个问题：随机的一系列时间片段，求其总的占有时间。本文提出一个算法，通过排序，将多元的数据关系转化成二元的数据关系，进而实现在O(n)时间复杂度（不算排序，算上排序O(n^2)的算法复杂度）内获得计算的结果。同时提出另外一种算法，不过要牺牲一定的空间复杂度。最后将该类问题进行推广，尝试讨论更一般的几何覆盖类问题。 阅读全文
posted @ 2019-04-11 20:46 论语 阅读(614) 评论(0) 推荐(0) 编辑
centos下安装myrocksdb
摘要：
承接上一篇，https://www.cnblogs.com/lunyu/p/10190364.html 。编译安装myrocks的整个过程，特别是第2步和第7步，让人冗长难耐。因此编译安装成功后省去这些步骤就显得很可贵了。这里，我提供了编译安装后的myrocks安装包，方便myrocksdb服务的的 阅读全文
posted @ 2019-01-08 20:59 论语 阅读(1519) 评论(0) 推荐(0) 编辑
在centos环境下编译安装myrocksdb
摘要：
rocksdb（https://rocksdb.org.cn/）是脸书（facebook）公司开源的一个key-value存储引擎，基于leveldb开发。rocksdb使用的是LSM存储引擎，纯c++编写。rocksdb具有很好的读写性能。但是rocksdb的实际操作需要很好的阅读rocksdb 阅读全文
posted @ 2018-12-28 19:34 论语 阅读(1637) 评论(0) 推荐(0) 编辑
