摘要：
背景：笔者作为一名刚接触python语言的新手，在实际的项目中，遇到过一些中文编码问题，初次遇到这些问题的时候，刚开始显得有些手足无措，也不知从何查起。常言道：有问题，找度娘！当我打开www.baidu.com后，并键入遇到的问题时，才发现这个问题非常泛滥，几乎可以用霸屏来形容（心中窃喜，终于有救了 阅读全文
摘要：
1.配置file associations File->Preferences->settings->Text Editor->Files,编辑settiings.json: “files.associations”: {“.pc”: “c”,} 之后重启vscode。 这样任何以pc为扩展名的文件 阅读全文
摘要：
本篇文章将会讲解在电脑完全离线的情况下，如何搭建环境，没看过在线环境搭建的建议先看一下上篇文章，与本文重复的内容将不会再次讲解，大部分操作都在上一篇文章中。转载自https://mp.weixin.qq.com/s/n7zyDFOeHd9K5oSKz7Zg9Q。 一、 下载vsCode安装包及rem 阅读全文
摘要：
spark提供了web-ui接口、外部命令等多种方法监视spark程序的执行状态。利用spark的监视功能，可以方便的查看spark应用程序执行的状态，具体包括：1）stage和tasks列表信息 2）RDD大小和内存使用情况 3）环境信息 4）executors信息。 1.web-ui 接口 可以 阅读全文
摘要：
以前在进行搜索引擎rank-svm排序模型训练时，直接使用python读取的HDFS日志文件、统计计算等预处理操作再进行svm模型，最终产生出训练模型。现在回想一下，数据预处理这一块完全可以使用spark进行，而且看起来更“正规一点”和高大上，并借机接触一下大数据。pyspark的安装折腾了一上午， 阅读全文
摘要：
这篇文章主要介绍了python sort、sorted高级排序技巧,本文讲解了基础排序、升序和降序、排序的稳定性和复杂排序、cmp函数排序法等内容,需要的朋友可以参考下 Python list内置sort()方法用来排序，也可以用python内置的全局sorted()方法来对可迭代的序列排序生成新的 阅读全文
摘要：
今天在windows下使用notepad++写了个python脚本，传到linux服务器执行后提示：-bash: ./logger.py: usr/bin/python^M: bad interpreter: No such file or directory 1.原因分析 这是不同系统编码格式引起 阅读全文
摘要：
1.安装scikit-learn 1.1Scikit-learn 依赖 Python (>= 2.7 or >= 3.3), NumPy (>= 1.8.2), SciPy (>= 0.13.3). 分别查看上述三个依赖的版本， python -V 结果：Python 2.7.3 python -c 阅读全文
摘要：
最近阅读了以redis官网关于--raw参数的解释，其功能有两个： 1.按数据原有格式打印数据，不展示额外的类型信息 例如：使用命令发送方式（redis在使用时有命令发送方式和交互方式两种）创建一个key，命名为kuyin:number，值为1，如下： 然后，把kuyin:number加1，如下： 阅读全文
摘要：
现代操作系统普遍采用虚拟内存管理（Virtual Memory Management）机制，这需要处理器中的MMU（Memory Management Unit，内存管理单元）提供支持。首先引入 PA 和 VA 两个概念。 1.PA（Physical Address） 物理地址 如果处理器没有MMU 阅读全文
摘要：
最近使用shell编写一个备份和替换f服务器程序的脚本replace.sh，初衷是为了节约人力的重复机械的劳动。在脚本编写过程中，由于疏忽多打了一个空格，出现了一个不符合预期的情况。 1.先看一下出问题的replace.sh 清单1：replace.sh 执行脚本，运行结果如下： 多打了一个空格，之 阅读全文