大数据bb

摘要： 信息的度量和作用 克劳德 .艾尔伍德 .香农：信息论创始人，密西根大学学士，麻省理工学院博士。 1948年发表了划时代论文 - 通信的数学原理，奠定了现代信息论的基础。 信息的单位： 比特 （bit) 举例： 以32支球队争夺世界杯冠军 如果不知道任何球队的信息，每支球队得冠概率相等。以二分法预测， 阅读全文

摘要： 在Spark 2.x当中，实际上SQLContext和HiveContext是过时的，相反是采用SparkSession对象的sql函数来操作SQL语句的。使用这个函数执行SQL语句前需要先调用DataFrame的createOrReplaceTempView注册一个临时表，所以关键是先要将RDD转 阅读全文

摘要： 什么是代理模式 代理模式就是为一个对象提供一个代理对象，由这个代理对象控制对该对象的访问。 理解代理模式，可以对照生活中的一些具体例子，比如房产中介、二手车交易市场、经纪人等。 为什么要用代理模式 通过使用代理模式，我们避免了直接访问目标对象时可能带来的一些问题，比如：远程调用，需要使用远程代理来帮 阅读全文