上一页 1 ··· 211 212 213 214 215 216 217 218 219 ··· 270 下一页
2017年5月23日
splunk的bucket组织目录——时间序列，按照时间来组织目录
摘要： splunk的bucket组织目录：db_1481515116_1480695302_0db_1481537316_1481532688_1db_1481547598_1481539988_2db_1481617470_1481613403_3db_1481623046_1481619179_4db 阅读全文
posted @ 2017-05-23 10:14 bonelee 阅读(652) 评论(0) 推荐(0) 编辑
kafka的topic和分区策略——log entry和消息id索引文件
摘要： Topic在逻辑上可以被认为是一个在的queue，每条消费都必须指定它的topic，可以简单理解为必须指明把这条消息放进哪个queue里。 为了使得Kafka的吞吐率可以水平扩展，物理上把topic分成一个或多个partition，每个partition在物理上对应一个文件夹，该文件 夹下存储这个p 阅读全文
posted @ 2017-05-23 10:10 bonelee 阅读(4059) 评论(0) 推荐(0) 编辑
2017年5月22日
csharp OverflowException——超出数值范围会抛出异常
摘要： OverflowException 會在下列情況下執行階段擲回︰ 算術運算會產生作業所傳回的資料型別範圍之外的結果。 下列範例說明 OverflowException 超出範圍的乘法運算所擲回 Int32 型別。 C# int value = 780000000; checked { try { / 阅读全文
posted @ 2017-05-22 14:49 bonelee 阅读(1805) 评论(0) 推荐(0) 编辑
Elias-Fano编码算法——倒排索引压缩用，本质上就是桶排序数据结构思路
摘要： Elias-Fano编码过程如下：把一组整数的最低l位连接在一起，同时把高位以严格单调增的排序划分为桶。 Example: 2, 3, 5, 7, 11, 13, 24 Count in unary the size of upper bits “buckets” including empty o 阅读全文
posted @ 2017-05-22 12:16 bonelee 阅读(2448) 评论(0) 推荐(0) 编辑
2017年5月20日
倒排索引PForDelta压缩算法——基本假设和霍夫曼压缩同
摘要： PForDelta算法 PForDelta算法最早由Heman在2005年提出，它允许同时对整个chunk数据（例128个数）进行压缩处理。基础思想是对于一个chunk的数列（例128个），认为其中占多数的x%数据（例90%）占用较小空间，而剩余的少数1-x%（例10%）才是导致数字存储空间过大的异 阅读全文
posted @ 2017-05-20 14:27 bonelee 阅读(2203) 评论(1) 推荐(0) 编辑
Karma和Jasmine自动化单元测试——本质上还是在要开一个浏览器来做测试
摘要： 1. Karma的介绍 Karma是Testacular的新名字，在2012年google开源了Testacular，2013年Testacular改名为Karma。Karma是一个让人感到非常神秘的名字，表示佛教中的缘分，因果报应，比Cassandra这种名字更让人猜不透！ Karma是一个基于N 阅读全文
posted @ 2017-05-20 11:10 bonelee 阅读(468) 评论(0) 推荐(0) 编辑
2017年5月19日
倒排列表压缩算法汇总——分区Elias-Fano编码貌似是最牛叉的啊！
摘要： 来看看倒排索引压缩。压缩是拿CPU换IO的最重要手段之一，不论索引是放在硬盘还是内存中。索引压缩的算法有几十种，跟文本压缩不同，索引压缩算法不仅仅需要考虑压缩率，更要考虑压缩和解压性能，否则会解压太慢而起不到CPU换IO的作用。早期的索引设计里，在尝试了几十种编码之后，基本都确定性采用差分编码＋可变 阅读全文
posted @ 2017-05-19 17:46 bonelee 阅读(2684) 评论(1) 推荐(0) 编辑
格伦布编码——rice编码无非是golomb编码M为2^x的特例
摘要： 格伦布编码 格伦布编码是一种无失真资料压缩方法，由数学家所罗门·格伦布在1960年代提出。 Rice编码 Robert F. Rice提出Rice 编码，是以哥伦布编码为基础做改良而更简易的前置码。Rice编码可视为适应性编码的一种或是哥伦布编码的特例之一。哥伦布编码有一个可调整参数，可以是任一正整 阅读全文
posted @ 2017-05-19 16:57 bonelee 阅读(2729) 评论(1) 推荐(0) 编辑
golomb哥伦布编码——本质上就是通过0来区分商和余数
摘要： 哥伦布编码是一个针对整数的变长编码方式，详细介绍可以看维基百科。这里简单介绍下： 哥伦布编码使用指定的整数 M 把输入的整数分成两部分：商数 q、余数 r。 商数当做一元编码，而余数放在后面做为可缩短的二进制编码。 将整数变为一元编码非常简单：q 的一元编码结果就是 q 个 1 加上 1 个 0。如 阅读全文
posted @ 2017-05-19 16:12 bonelee 阅读(1341) 评论(0) 推荐(0) 编辑
electron利用nodejs+移动端技术跨平台桌面应用开发框架——记录下，类似node webkit！
摘要： Build cross platform desktop appswith JavaScript, HTML, and CSS Build cross platform desktop appswith JavaScript, HTML, and CSS Build cross platform d 阅读全文
posted @ 2017-05-19 14:47 bonelee 阅读(3194) 评论(0) 推荐(0) 编辑
上一页 1 ··· 211 212 213 214 215 216 217 218 219 ··· 270 下一页