papering - 博客园

2018年7月15日

摘要： hive/DerbyPolicy.java at 35605732b2041eee809485718bfd951cdfae0980 · apache/hive https://github.com/apache/hive/blob/35605732b2041eee809485718bfd951cdf 阅读全文

posted @ 2018-07-15 01:06 papering 阅读(237) 评论(0) 推荐(0) 编辑

没有到行、字段级别，到表级别、分区级别以及指定表的指定的读写权限

摘要：没有到行、字段级别，到表级别、分区级别以及指定表的指定的读写权限 Security - Apache Hive - Apache Software Foundation https://cwiki.apache.org/confluence/display/Hive/Security GRANT S 阅读全文

posted @ 2018-07-15 01:01 papering 阅读(165) 评论(0) 推荐(0) 编辑

如何在退出Hue后关闭Spark会话

摘要： https://mp.weixin.qq.com/s/QLu9XhDv1YuK19VCJsFXGw 阅读全文

posted @ 2018-07-15 00:48 papering 阅读(515) 评论(0) 推荐(0) 编辑

wrapper 基本原理

摘要： wrapper 基本原理阅读全文

posted @ 2018-07-15 00:40 papering 阅读(260) 评论(0) 推荐(0) 编辑

2018年7月14日

小程序移动端页面的跳转

摘要：减少、避免页面跳转单页无感跳转，避免用户为了单单实现页面跳转而操作阅读全文

posted @ 2018-07-14 12:22 papering 阅读(239) 评论(0) 推荐(0) 编辑

2018年7月13日

分区后的数据倾斜

摘要：分区后的数据倾斜阅读全文

posted @ 2018-07-13 18:05 papering 阅读(279) 评论(0) 推荐(0) 编辑

Remove FileUtil#copyMerge

摘要： [HADOOP-12967] Remove FileUtil#copyMerge - ASF JIRA https://issues.apache.org/jira/browse/HADOOP-12967 https://issues.apache.org/jira/secure/attachmen 阅读全文

posted @ 2018-07-13 16:38 papering 阅读(900) 评论(0) 推荐(0) 编辑

camus gobblin

摘要： ####Camus is being phased out and replaced by Gobblin. For those using or interested in Camus, we suggest taking a look at Gobblin. ####For instructio 阅读全文

posted @ 2018-07-13 14:10 papering 阅读(275) 评论(0) 推荐(0) 编辑

worker 启动时向 etcd 注册自己的信息，并设置一个带 TTL 的租约，每隔一段时间更新这个 TTL，如果该 worker 挂掉了，这个 TTL 就会 expire 并删除相应的 key。

摘要： 1、通过etcd中的选主机制，我们实现了服务的高可用。同时利用systemd对etcd本身进行了保活，只要etcd服务所在的机器没有宕机，进程就具备了容灾性。【实践】 https://github.com/etcd-io/etcd/blob/master/Documentation/op-guid 阅读全文

posted @ 2018-07-13 11:55 papering 阅读(831) 评论(0) 推荐(0) 编辑

gRPC错误码 http状态码 provide your APIs in both gRPC and RESTful style at the same time

摘要： How gRPC error codes map to HTTP status codes in the response https://github.com/grpc-ecosystem/grpc-gateway/blob/master/runtime/errors.go#L15 grpc-ec 阅读全文

posted @ 2018-07-13 11:54 papering 阅读(2193) 评论(0) 推荐(0) 编辑

rust

摘要： rust 阅读全文

posted @ 2018-07-13 11:53 papering 阅读(171) 评论(0) 推荐(0) 编辑

lz4 1

摘要： lz4 阅读全文

posted @ 2018-07-13 11:53 papering 阅读(132) 评论(0) 推荐(0) 编辑

剖析美团内部所采用的网站压力测试方案

摘要：剖析美团内部所采用的网站压力测试方案_网站优化_网站运营_脚本之家 https://www.jb51.net/yunying/443241.html 阅读全文

posted @ 2018-07-13 11:33 papering 阅读(244) 评论(0) 推荐(0) 编辑

2018年7月12日

TiKV 源码解析系列 - Raft 的优化

摘要： TiKV 源码解析系列 - Raft 的优化 https://zhuanlan.zhihu.com/p/25735592 TiKV 源码解析系列 - Raft 的优化在分布式领域，为了保证数据的一致性，通常都会使用 Paxos 或者 Raft 来实现。但 Paxos 以其复杂难懂著称，相反 Raf 阅读全文

posted @ 2018-07-12 23:02 papering 阅读(288) 评论(0) 推荐(0) 编辑

Region Range

摘要：三篇文章了解 TiDB 技术内幕 - 说存储| PingCAP https://pingcap.com/blog-cn/tidb-internal-1/ 对于一个 KV 系统，将数据分散在多台机器上有两种比较典型的方案：一种是按照 Key 做 Hash，根据 Hash 值选择对应的存储节点；另一种是阅读全文

posted @ 2018-07-12 22:44 papering 阅读(278) 评论(0) 推荐(0) 编辑

TiDB 是否支持其他存储引擎？

摘要： https://www.pingcap.com/docs-cn/FAQ/ 1.1.11 TiDB 是否支持其他存储引擎？是的，除了 TiKV 之外，TiDB 还支持一些流行的单机存储引擎，比如 GolevelDB、RocksDB、BoltDB 等。如果一个存储引擎是支持事务的 KV 引擎，并且能提阅读全文

posted @ 2018-07-12 22:32 papering 阅读(644) 评论(0) 推荐(0) 编辑

倒排索引获取指定单词的文档集合使用hash去重单词term 提高数据压缩率的方法

摘要：倒排索引源于实际应用中需要根据属性的值来查找记录。这种索引表中的每一项都包括一个属性值和具有该属性值的各记录的地址。由于不是由记录来确定属性值，而是由属性值来确定记录的位置，因而称为倒排索引(inverted index)。带有倒排索引的文件我们称为倒排索引文件，简称倒排文件(inverted fi 阅读全文

posted @ 2018-07-12 21:44 papering 阅读(476) 评论(0) 推荐(0) 编辑

feed流，图片在左还是右的区别是

摘要： feed流设计：那些谋杀你时间APP | 人人都是产品经理 http://www.woshipm.com/pd/773523.html 阅读全文

posted @ 2018-07-12 20:52 papering 阅读(246) 评论(0) 推荐(0) 编辑

t

摘要： t 阅读全文

posted @ 2018-07-12 20:29 papering 阅读(278) 评论(0) 推荐(0) 编辑

命令继承变父子进程变量作用域

摘要： Linux export命令 | 菜鸟教程 http://www.runoob.com/linux/linux-comm-export.html Linux export命令用于设置或显示环境变量。在shell中执行程序时，shell会提供一组环境变量。export可新增，修改或删除环境变量，供后阅读全文

posted @ 2018-07-12 15:12 papering 阅读(498) 评论(0) 推荐(0) 编辑

Rowkey is the Crux Rowkey Design

摘要： Apache HBase ™ Reference Guide http://hbase.apache.org/book.html#rowkey.design The Effect of ColumnFamily, RowKey and KeyValue Design on HFile Size : 阅读全文

posted @ 2018-07-12 14:11 papering 阅读(116) 评论(0) 推荐(0) 编辑

JVM的CPU资源占用过高问题的排查

摘要：互联网后端架构 https://mp.weixin.qq.com/s/LiqAy2DikbmZzqogb5XRdA JVM的CPU资源占用过高问题的排查互联网后端架构今天上午线上某应用的一台JVM的CPU占比突然飙高到192%，并且一直下不来，导致监控一直告警，好久没处理这种问题了，现在将问题阅读全文

posted @ 2018-07-12 09:21 papering 阅读(3571) 评论(0) 推荐(1) 编辑

2018年7月11日

GPG key

摘要： Creating GPG Keys - Fedora Project Wiki https://fedoraproject.org/wiki/Creating_GPG_Keys 阅读全文

posted @ 2018-07-11 09:39 papering 阅读(138) 评论(0) 推荐(0) 编辑

2018年7月10日

单点登录 Enterprise Single Sign-On

摘要：单点登录 CAS - Architecture https://apereo.github.io/cas/4.2.x/planning/Architecture.html 阅读全文

posted @ 2018-07-10 15:32 papering 阅读(164) 评论(0) 推荐(0) 编辑

hadoop-client

摘要： org.apache.hadoop hadoop-common 3.1.0 org.apache.hadoop hadoop-client 3.1.0Maven Repository: org.apache.hadoop » hadoop-client » 3.1.0 http://mvnrepository.com/artifact/org.apache.... 阅读全文

posted @ 2018-07-10 14:01 papering 阅读(325) 评论(0) 推荐(0) 编辑

啊

摘要：啊阅读全文

posted @ 2018-07-10 11:52 papering 阅读(523) 评论(0) 推荐(0) 编辑

2018年7月9日

svgo

摘要： SVG精简压缩工具svgo简介和初体验 SVG精简压缩工具svgo简介和初体验 « 张鑫旭-鑫空间-鑫生活 https://www.zhangxinxu.com/wordpress/2016/02/svg-compress-tool-svgo-experience/ 阅读全文

posted @ 2018-07-09 19:14 papering 阅读(249) 评论(0) 推荐(0) 编辑

Comparing Random and Sequential Access in Disk and Memory

摘要： The Pathologies of Big Data - ACM Queue https://queue.acm.org/detail.cfm?id=1563874 阅读全文

posted @ 2018-07-09 17:14 papering 阅读(385) 评论(0) 推荐(0) 编辑

顺序磁盘访问随即内存访问对比

摘要： The key fact about disk performance is that the throughput of hard drives has been diverging from the latency of a disk seek for the last decade. As a 阅读全文

posted @ 2018-07-09 17:11 papering 阅读(750) 评论(0) 推荐(0) 编辑

What is the difference between message queue pattern and publish-subscribe?

摘要： What is the difference between message queue pattern and publish-subscribe? - Quora https://www.quora.com/What-is-the-difference-between-message-queue 阅读全文

posted @ 2018-07-09 11:22 papering 阅读(372) 评论(0) 推荐(0) 编辑

mapr

摘要： Why Mapr | MapR https://mapr.com/why-mapr/ 阅读全文

posted @ 2018-07-09 10:53 papering 阅读(140) 评论(0) 推荐(0) 编辑

2018年7月8日

短信流控规则

摘要：此为运营商要求增加的流控限制，无法避免。超出后也容易被运营商拦截。测试阶段还请您更换号码进行测试，不便之处敬请谅解！我方的流控规则为：短信验证码：使用同一个签名，对同一个手机号码发送短信验证码，支持1条/分钟，5条/小时，10条/天。一个手机号码通过阿里云短信服务平台只能收到40条/天（天的阅读全文

posted @ 2018-07-08 21:06 papering 阅读(1086) 评论(0) 推荐(0) 编辑

2018年7月7日

js modify local file

摘要： https://stackoverflow.com/questions/4561157/is-it-possible-to-modify-a-html-file-from-which-the-script-is-called-using-js https://stackoverflow.com/qu 阅读全文

posted @ 2018-07-07 18:47 papering 阅读(211) 评论(0) 推荐(0) 编辑

An O(ND) Difference Algorithm and Its Variations (1986)

摘要： http://citeseerx.ist.psu.edu/viewdoc/summary?doi=10.1.1.4.6927 The problems of finding a longest common subsequence of two sequences A and B and a sho 阅读全文

posted @ 2018-07-07 18:32 papering 阅读(442) 评论(0) 推荐(0) 编辑

美团金融扫码付静态资源加载优化实践

摘要：美团金融扫码付静态资源加载优化实践https://mp.weixin.qq.com/s/yHvRoPk00NF_OGVZ4cBPdA ThunderJS 优化策略限制合并请求文件数实际业务使用中，我们发现由于没有对合并请求的文件数做限制，一次合并请求会合并过多的请求，特别是在扫码付这个项目中，导阅读全文

posted @ 2018-07-07 18:20 papering 阅读(278) 评论(0) 推荐(0) 编辑

前端遇上Go: 静态资源增量更新的新实践

摘要：前端遇上Go: 静态资源增量更新的新实践https://mp.weixin.qq.com/s/hCqQW1F8FngPPGZAisAWUg 前端遇上Go: 静态资源增量更新的新实践原创：洋河美团技术团队前天总第259篇 2018年第51篇为什么要做增量更新美团金融的业务在过去的一段时阅读全文

posted @ 2018-07-07 18:05 papering 阅读(853) 评论(0) 推荐(0) 编辑

0mq

摘要：阅读全文

posted @ 2018-07-07 18:01 papering 阅读(347) 评论(0) 推荐(0) 编辑

小程序短信验证码登录的实现与优化

摘要：小程序短信验证码登录的实现与优化阅读全文

posted @ 2018-07-07 11:21 papering 阅读(338) 评论(0) 推荐(0) 编辑

2018年7月6日

A Practical Introduction to Blockchain with Python

摘要： A Practical Introduction to Blockchain with Python // Adil Moujahid // Data Analytics and more http://adilmoujahid.com/posts/2018/03/intro-blockchain- 阅读全文

posted @ 2018-07-06 15:05 papering 阅读(144) 评论(0) 推荐(0) 编辑

numpy计算

摘要： import numpy as np import cv2 from PIL import Image #lenna.jpg # Create a black image #img=np.zeros((512,512,3), np.uint8) #Python-opencv划线/画圆/椭圆/添加文字 - CSDN博客 https://blog.csdn.net/gan_playe... 阅读全文

posted @ 2018-07-06 13:56 papering 阅读(214) 评论(0) 推荐(0) 编辑