摘要：
1.搜索字符在文件中枢输出行号 #grep -n 要搜索的字符(字符如含有特殊字符，有加引号，否则不用) filname grep -n 'hello' 1.txt 2. 查看文件具体行号的内容 # sed -n '行号，行号p' filename sed -n '12,12p' filname 注 阅读全文
摘要：
这里以将Apache的日志写入到ElasticSearch为例，来演示一下如何使用Python将Spark数据导入到ES中。 实际工作中，由于数据与使用框架或技术的复杂性，数据的写入变得比较复杂，在这里我们简单演示一下。 如果使用Scala或Java的话，Spark提供自带了支持写入ES的支持库，但 阅读全文
摘要：
熟悉linux的朋友应该知道在linux中可以使用crontab设置定时任务。可以通过命令crontab -e编写任务。当然也可以直接写配置文件设置任务。 但是有时候希望通过脚本自动设置，比如我们应用程序部署时等。有需求当然就得想办法解决，不然在程序猿界混（一群自得其乐的猿）。 下面进入正题，开始想 阅读全文
摘要：
使用threading模块中的Timer函数 from threading import Timer import time def execute_func(name, age, gender, hobby): print(f"name is {name}, age is {age}, gende 阅读全文
摘要：
分布式进程指的是将Process进程分布到多台机器上，充分利用多态机器的性能完成复杂的任务 分布式进程在python 中依然要用到multiprocessing 模块。multiprocessing模块不但支持多进程，其中managers子模块还支持把多进程分布到多台机器上。可以写一个服务进程作为调 阅读全文
摘要：
文章目录课程大纲（HDFS详解）学习目标：HDFS基本概念篇 1.1HDFS前言 1.2HDFS的概念和特性 HDFS基本操作篇 2.1HDFS的shell(命令行客户端)操作 2.1.1 HDFS命令行客户端使用 2.2 命令行客户端支持的命令参数 2.3 常用命令参数介绍 HDFS原理篇hdfs 阅读全文
摘要：
代码 from collections import Counter ll=['1','1','2','3'] dic=dict(Counter(ll)) print(dic) print([k for k,v in dic.items() if v>=2]) 阅读全文
摘要：
代码 from urllib.parse import quote,unquote,urlencode print(quote('https://www.cnblogs.com/?a=bc&d=f')) print(urlencode({'a':'b','b':'c'}))#https%3A//ww 阅读全文
只有注册用户登录后才能阅读该文。 阅读全文
只有注册用户登录后才能阅读该文。 阅读全文