01 2019 档案
摘要：统计网站pv和uv PV是网站分析的一个术语，用以衡量网站用户访问的网页的数量。 对于广告主，PV值可预期它可以带来多少广告收入。一般来说，PV与来访者的数量成正比，但是PV并不直接决定页面的真实来访者数量，如同一个来访者通过不断的刷新页面，也可以制造出非常高的PV。 1、什么是PV值 PV（pag
阅读全文
摘要：1.代码实现 2.结果 3.分析 1、AlexNet是比赛分类项目的2012年冠军，top5错误率16.4%，8层神经网络。 2、AlexNet中包含了几个比较新的技术点，首次在CNN中成功应用了Relu、Dropout、 Lrn等Trick。 3、运用Relu，解决Sigmoid在网络层次较深时的
阅读全文
摘要：1.代码 2.调用及执行结果 3.分析 给程序传参以达到程序能在执行之前就获取相关的参数而无需再运行中去要求传参数，这样既可以扩展程序的适应性也可以提高程序的执行效率。这样的设计也是很普遍的，像Linux 命令之后跟的参数（例如：tar -zxvf,rm -rf等），Python命令（例如：pip
阅读全文
摘要：结果1： 结果2： 信息交互 结果3： loop+react 结果4： Actor详解 1.Actor是一个通信模型，Scala提供了Actor的实现 2.Spark1.6之前集群节点之间通信使用的是Akka，Akka底层是Actor实现的。Spark1.6之后，节点的通信变成Netty 3.Act
阅读全文
摘要：1.简介 Scala的actor提供了一种基于事件的轻量级线程。只要使用scala.actors.Actor伴生对象的actor()方法，就可以创建一个actor。它接受一个函数值/闭包做参数，一创建好就开始运行。用!()方法给actor发消息，用receive()方法从actor接收消息。rece
阅读全文
摘要：一.下载安装Keras 如果你是安装的Anaconda组合套件，可以直接在Prompt上执行安装命令：pip install keras 注意：最下面为Successfully...表示安装成功！ 二.简介 Keras为图片数据输入提供了一个很好的接口，即Keras.preprocessing.im
阅读全文
摘要：结果1： 结果2：
阅读全文
摘要：一.场景 二.异常信息 三.原因 是因为使用getAs函数获取某列的数据时没有指明具体的类型，导致无法判断是否支持"<="或 ">="这类的运算符，因而会报错！ 三.解决方案 使用getAs时指明具体的类型！ 代码如下：
阅读全文
摘要：一.场景 1.绝大多数task执行得都非常快，但个别task执行极慢。比如，总共有100个task，97个task都在1s之内执行完了，但是剩余的task却要一两分钟。这种情况很常见。 2.原本能够正常执行的Spark作业，某天突然报出OOM(内存溢出)，观察异常栈，是我们写的业务代码造成的。这种情
阅读全文
摘要：Scala方法可以具有隐式参数列表，由参数列表开头的implicit关键字标记。如果参数列表中的参数没有像往常一样传递，Scala将查看它是否可以获得正确类型的隐式值，如果可以，将自动传递。 Scala将查找这些参数的位置分为两类： 1.Scala在调用包含有隐式参数块的方法时，将首先查找可以直接访
阅读全文
摘要：解析： 一个从类型S到类型T的隐式转换由一个函数类型 S => T的隐式值来定义，或者由一个可转化成所需值的隐式方法来定义。 隐式转换一般在下面两种情况下使用： 1.如果表达式e的类型为S，并且类型S不符合表达式的期望类型T。 2.在一个类型为S的实例对象e中调用e.show,如果被调用的show并
阅读全文
摘要：解析： 1.特质和抽象类可以定义一个抽象类型成员，这意味着类型可有具体实现来确定。 2.含有抽象类型成员的特质或类（classes）经常和匿名类的初始化一起使用。 结果：
阅读全文
摘要：1.把功能类似的代码放到一个目录下 2.导入该模块（直接导入该目录名称会报错） 目录结构： 模块代码展示： 导入测试代码： 测试： 3.创建__init__.py文件（表示该目录为一个模块） 4.编辑__init__.py文件，添加代码（集合里面的内容表示为该模块下要导入的文件名称） 5.重新导入测
阅读全文
摘要：控制反转（Inversion of Control，简称IoC），是面向对象编程中的一种设计原则，可以用来降低计算机代码之间的耦合程度。其中最常见的方式叫做依赖注入（Dependency Injection，简称DI），还有一种方式叫做“依赖查找”（Dependency Lookup）。通过控制反转
阅读全文
