摘要: 一,RDD 算子: 适用于 rdd 或 (k, v)类型 1,Transformation 类型算子 map : 转化每个元素,返回 1:1比例元素输出 filter(func) : 过滤元素 flapmap :同样转化元素, 1:N输出元素 mappation: 对分区进行map, 效率高,但数据 阅读全文
posted @ 2022-06-09 20:24 gaussen126 阅读(96) 评论(0) 推荐(0) 编辑
摘要: 一,java 代理的作用 1,RPC 远程调用中,客户端的代理对象被序列化 流,通过https 协议发送到Server端,然后反序列化为”代理对象“ 。实现远程调用。? 在客户端Client, RPC 给接口生成一个代理类,运行过程中实际绑定的是这个接口生成的代理类。这样在接口方法被调用的时候,它实 阅读全文
posted @ 2022-06-09 20:11 gaussen126 阅读(730) 评论(0) 推荐(0) 编辑
摘要: 一,numpy 的功能 支持大量的维度数组与矩阵运算,此外也针对数组运算提供大量的数学函数库。 二,代码练习 # coding=utf-8 import numpy as np import matplotlib as mpl # Ndarray set of same type elements 阅读全文
posted @ 2022-06-09 19:56 gaussen126 阅读(31) 评论(0) 推荐(0) 编辑
摘要: python 线性回归 阅读全文
posted @ 2022-06-09 19:48 gaussen126 阅读(30) 评论(0) 推荐(0) 编辑
摘要: 一,pandas功能 1,基于numpy , 分析结构化数据。 二,常用基础知识编码练习 包括数据类型,数据操作,比如索引,分片 ,分组聚合 ,排序 过滤等等数分常见操作代码 # coding=utf-8 import pandas as pd import numpy as np import s 阅读全文
posted @ 2022-06-09 19:43 gaussen126 阅读(71) 评论(0) 推荐(0) 编辑
摘要: shell 实例 代码 阅读全文
posted @ 2022-06-09 19:14 gaussen126 阅读(270) 评论(0) 推荐(0) 编辑