随笔 - 368, 文章 - 0, 评论 - 56, 阅读 - 94万
  博客园  :: 首页  :: 联系 :: 管理

01 2018 档案

摘要:对于企业中常用的flume type 概括如下:ource(获取数据源): exec (文件) spoolingdir (文件夹) taildir(文件夹及文件的变动) kafka syslog http channel(管道): mem file kafka sink(将channel中的 数据发 阅读全文

posted @ 2018-01-31 00:13 天戈朱 阅读(1133) 评论(0) 推荐(0) 编辑

摘要:Cloudera 开发的分布式日志收集系统 Flume,是 hadoop 周边组件之一。其可以实时的将分布在不同节点、机器上的日志收集到不同的存储系统。Flume 初始的发行版本目前被统称为 Flume OG(original generation),属于 cloudera。但随着 Flume 功能 阅读全文

posted @ 2018-01-29 22:46 天戈朱 阅读(855) 评论(0) 推荐(0) 编辑

摘要:可调用接口参考地址(没有免费的午餐): https://www.juhe.cn/docs/api/id/11 http://vip.showji.com/locating/?m=13606401549 选后者,API地址: http://v.showji.com/Locating/showji.co 阅读全文

posted @ 2018-01-27 11:10 天戈朱 阅读(432) 评论(0) 推荐(0) 编辑

摘要:解决多维空间点索引需要解决2个问题,第一,如何把多维降为低维或者一维?第二,一维的曲线如何分形? 填充曲线(Space-filling curve) 在数学分析中,有这样一个难题:能否用一条无限长的线,穿过任意维度空间里面的所有点? 常见的有: Z阶曲线(Z-order curve)、皮亚诺曲线(P 阅读全文

posted @ 2018-01-27 11:10 天戈朱 阅读(8454) 评论(0) 推荐(4) 编辑

摘要:S2其实是来自几何数学中的一个数学符号 S²,它表示的是单位球。S2 这个库其实是被设计用来解决球面上各种几何问题的。值得提的一点是,除去 golang 官方 repo 里面的 geo/s2 完成度目前只有40%,其他语言,Java,C++,Python 的 S2 实现都完成100%了。看看怎么用 阅读全文

posted @ 2018-01-27 11:10 天戈朱 阅读(4745) 评论(2) 推荐(1) 编辑

摘要:需求:计算不同区域范围,X公里半径内实体店或场站覆盖率。 实现思路: 为了便于理解,将地球看成一个基于经纬度线的坐标系。将经度和纬度看成二维坐标系中的两个纬度,横轴表示经度[-180o, 0o),(0o, 180o],纵轴表示纬度[-90o, 0o),(0o, 90o]。 以最小纬度和经度对应坐标为 阅读全文

posted @ 2018-01-27 11:10 天戈朱 阅读(1910) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示