摘要:
Python的各种推导式 推导式comprehensions(又称解析式),是Python的一种独有特性。推导式是可以从一个数据序列构建另一个新的数据序列的结构体。 共有三种推导。 列表推导式 字典推导式 集合推导式 列表推导式 1.使用[]生成list var = [out_exp_put for 阅读全文
摘要:
闭包 概念:内部函数对外部函数作用域里变量的引用 例子 def fun(): 外部函数 a = 1 外部函数作用域里的变量 print('this is func') def func1(num): 内部函数也就是闭包函数 print('this is func1') print(num + a) 阅读全文
摘要:
zip函数描述 zip() 函数用于将可迭代对象作为参数,将对象中对应的元素打包成一个个元组,然后返回由这些元组组成的对象。 如果各个可迭代对象的元素个数不一致,则返回的对象长度与最短的可迭代对象相同。 利用 号操作符,与zip相反,进行解压。 zip函数语法 zip(iterable1,itera 阅读全文
摘要:
RDD的动作算子 reduce(func) 通过func函数聚集RDD中的所有元素,这个功能必须是可交换且可并联的。(符合结合律和交换律),func输入为两个元素,返回为一个元素。 def add(x,y): return x+y sc.parallelize([1, 2, 3, 4, 5]).re 阅读全文