摘要： 我们以 FastTunnel 这个内网穿透工具为例，其中Server端的程序运行在Linux上，Client端的程序运行在Windows上。关于这个程序的配置请参考官方文档： 快速上手:快速搭建服务。为了避免每次手动启动程序，我们把它们做成开启自启动的服务，这样你就可以无缝使用远程桌面了。 Wind 阅读全文

摘要： 布隆过滤器，听过也学过，实际中没怎么用到，时间长了再接触这个概念就陌生了，说到底还是没有彻底掌握。为了真正理解一项技术或一个概念，最好还是从问题出发，所以布隆过滤器到底解决了什么问题呢？ 布隆过滤器可以用来检测一个元素是否属于某个集合。 上面的定义比较抽象，下面有些具体的例子（参考这篇文章的内容：h 阅读全文

摘要： 最近在读《左耳听风》，里面提到了一个匿名函数递归的例子，觉得很有趣，但是我觉得书里讲解的还是有点难懂，所以尝试用自己的理解把这个问题重新讲了一遍。注：本文中所用的代码示例会同时使用JavaScript，Python语言。 让我们先来看下面这段代码： // javascript (f => f(f)) 阅读全文

摘要： 有了Windows Terminal 你再也不需要其他任何终端了…… 下载 直接到Windows 10 自带的应用商店下载安装。参考： https://github.com/Microsoft/Terminal 配置ssh 参考： https://blog.csdn.net/u012814856/a 阅读全文

摘要： "" 生产环境的 Spark Job 都是跑在集群上的，毕竟 Spark 为大数据而生，海量的数据处理必须依靠集群。但是在开发Spark的的时候，不可避免我们要在本地进行一些开发和测试工作，所以如何在本地用好Spark也十分重要，下面给大家分享一些经验。 首先你需要在本机上安装好了Java，Scal 阅读全文

摘要： 什么是 Bucketing Bucketing 就是利用 buckets（按列进行分桶）来决定数据分区（partition）的一种优化技术，它可以帮助在计算中避免数据交换（avoid data shuffle）。并行计算的时候shuffle常常会耗费非常多的时间和资源. Bucketing 的基本原 阅读全文

摘要： 以前用Wordpress搭建过一个博客网站，Wordpress虽然安装简单，功能强大，但是对于个人建站来说有点复杂了。最近发现用Hexo建站很流行，于是将网站从Wordpress迁移到了Hexo。 Hexo是如何工作的？ 首先，Hexo是一个搭建静态网站的工具，所以Hexo生成的文章页面都是静态页面 阅读全文

摘要： 在互联网时代，相信几乎每个人都听说过「奥卡姆剃刀定律」，但是你真的懂它的意思吗？更进一步，你真的知道在实际中如何运用奥卡姆剃刀定律吗？ 我们先看一下百度百科对它的定义： 奥卡姆剃刀定律（Occam's Razor, Ockham's Razor）又称“奥康的剃刀”，它是由14世纪英格兰的逻辑学家、圣 阅读全文

摘要： 最近几年人工智能成为极其热门的概念和话题，可以说彻底出圈了。但人工智能的概念在1955年就提出来了，可以说非常古老。我在上小学的时候《科学》课本上就有人工智能的概念介绍，至今还有印象，但那些年AI正处于“寒冬”，很少在其他地方见到这个概念。现在人工智能这么热，普通人容易从科幻电影和媒体宣传上来理解人 阅读全文

摘要： 本文将分两部分来介绍如何在IntelliJ IDEA中运行Java/Scala/Spark程序： 基本概念介绍 在IntelliJ IDEA中创建和运行java/scala/spark程序 基本概念介绍 IntelliJ IDEA 本文使用版本为： ideaIC 2020.1 IDEA 全称 Int 阅读全文