bonelee - 博客园

2016年12月30日

VoltDB介绍——本质：数据保存在内存，充分利用CPU，单线程去锁，底层数据结构未知

摘要：转自：http://blog.csdn.net/ransom0512/article/details/50440316 简介 VoltDB数据库是一个分布式，可扩展，shared-nothing的内存数据库。使用Java 写的存储过程来定义事务。使用标准SQL访问数据，使用并行的单线程处理方式确保数阅读全文

posted @ 2016-12-30 10:39 bonelee 阅读(1080) 评论(0) 推荐(0) 编辑

关于时间序列数据库的思考——（1）运用hash文件(例如：RRD,Whisper) （2）运用LSM树来备份(例如：LevelDB,RocksDB,Cassandra) （3）运用B-树排序和k/v存储(例如：BoltDB,LMDB)

摘要：转自：http://0351slc.com/portal.php?mod=view&aid=12 近期网络上呈现了有关catena、benchmarking boltdb等时刻序列存储办法的介绍，Go社区也有相似的谈论论题，呈现了seriesly、influxDB、prometheus等优异项目。原阅读全文

posted @ 2016-12-30 10:24 bonelee 阅读(1165) 评论(0) 推荐(0) 编辑

2016年12月29日

241. Different Ways to Add Parentheses——本质：DFS

摘要： re.split("(\D)", "2+3-1") ['2', '+', '3', '-', '1'] 阅读全文

posted @ 2016-12-29 23:02 bonelee 阅读(296) 评论(0) 推荐(0) 编辑

syslog简介——系统日志写入API

摘要：一、简介 syslog是Linux系统默认的日志守护进程。默认的主配置文件和辅助配置文件分别是/etc/syslog.conf和/etc/sysconfig/syslog文件。通常，syslog 接受来自系统的各种功能的信息，每个信息都包括重要级。/etc/syslog.conf 文件通知 sysl 阅读全文

posted @ 2016-12-29 19:53 bonelee 阅读(33675) 评论(0) 推荐(1) 编辑

splunk 索引过程

摘要：术语： Event ：Events are records of activity in log files, stored in Splunk indexes. 简单说，处理的日志或话单中中一行记录就是一个Event；Source type：来源类型，identifies the format 阅读全文

posted @ 2016-12-29 17:29 bonelee 阅读(3510) 评论(0) 推荐(0) 编辑

2016年12月28日

怎样打造一个分布式数据库——rocksDB, raft, mvcc，本质上是为了解决跨数据中心的复制

摘要：摘自：http://www.infoq.com/cn/articles/how-to-build-a-distributed-database?utm_campaign=rightbar_v2&utm_source=infoq&utm_medium=articles_link&utm_content 阅读全文

posted @ 2016-12-28 12:15 bonelee 阅读(10463) 评论(0) 推荐(0) 编辑

2016年12月27日

时间序列数据库选型——本质是列存储，B-tree索引，抑或是搜索引擎中的倒排索引

摘要：时间序列数据库最多，使用也最广泛。一般人们谈论时间序列数据库的时候指代的就是这一类存储。按照底层技术不同可以划分为三类。直接基于文件的简单存储：RRD Tool，Graphite Whisper。这类工具附属于监控告警工具，底层没有一个正规的数据库引擎。只是简单的有一个二进制的文件结构。基于K/ 阅读全文

posted @ 2016-12-27 20:19 bonelee 阅读(1423) 评论(0) 推荐(0) 编辑

lucene底层数据结构——底层filter bitset原理，时间序列数据压缩将同一时间数据压缩为一行

摘要：如何联合索引查询？所以给定查询过滤条件 age=18 的过程就是先从term index找到18在term dictionary的大概位置，然后再从term dictionary里精确地找到18这个term，然后得到一个posting list或者一个指向posting list位置的指针。然后再阅读全文

posted @ 2016-12-27 19:41 bonelee 阅读(4017) 评论(0) 推荐(0) 编辑

lucene底层数据结构——FST，针对field使用列存储，delta encode压缩doc ids数组，LZ4压缩算法

摘要：参考： http://www.slideshare.net/lucenerevolution/what-is-inaluceneagrandfinal http://www.slideshare.net/jpountz/how-does-lucene-store-your-data http://w 阅读全文

posted @ 2016-12-27 16:28 bonelee 阅读(8222) 评论(0) 推荐(5) 编辑

lucene字典实现原理——FST

摘要：转自：http://www.cnblogs.com/LBSer/p/4119841.html 1 lucene字典使用lucene进行查询不可避免都会使用到其提供的字典功能，即根据给定的term找到该term所对应的倒排文档id列表等信息。实际上lucene索引文件后缀名为tim和tip的文件实现阅读全文

posted @ 2016-12-27 15:47 bonelee 阅读(24074) 评论(4) 推荐(8) 编辑

将者，智、信、仁、勇、严也。

Hi，我是李智华，华为-安全AI算法专家，欢迎来到安全攻防对抗的有趣世界。

公告