08 2018 档案
摘要：git commit 提交的时候，出现*** Please tell me who you are. git config --global 。。。问题 1 $ git commit -a -m 'v6' 2 3 *** Please tell me who you are. 4 5 Run 6 7
阅读全文
摘要：概述：pycharm当前来讲是python最优秀的IDE。 1. 官网下载安装包 2.解压 3. cd 到解压的bin文件中 4.执行sh ./pycharm.sh 5.锁定到图标中
阅读全文
摘要：常用的第三方包或工具 富文本编辑器 缓存 全文检索 celery 布署 富文本编辑器 借助富文本编辑器，管理员能够编辑出来一个包含html的页面，从而页面的显示效果，可以由管理员定义，而不用完全依赖于前期开发人员 此处以tinymce为例，其它富文本编辑器的使用可以自行学习 使用编辑器的显示效果为：
阅读全文
摘要：缓存 一句话总结：缓存可以对view、模板、数据进行缓存可以设置缓存在不同的地方（本地内存、redis、系统文档）可以为服务器节省性能、减少用户等待时间。 对于中等流量的网站来说，尽可能地减少开销是必要的。缓存数据就是为了保存那些需要很多计算资源的结果，这样的话就不必在下次重复消耗计算资源 Djan
阅读全文
摘要：全文检索 全文检索不同于特定字段的模糊查询，使用全文检索的效率更高，并且能够对于中文进行分词处理 haystack：django的一个包，可以方便地对model里面的内容进行索引、搜索，设计为支持whoosh,solr,Xapian,Elasticsearc四种全文检索引擎后端，属于一种全文检索的框
阅读全文
摘要：数据库、表、字段、行 问：查询姓黄或洪的男生分析：数据从哪来，哪个表stu条件：姓黄或洪name or and 男生gender答：select * from stu where gender=1 and (name like '黄%' or name like '洪%') distinct条件：w
阅读全文
摘要：安装 下载必要组件 nginx下载地址 nginx下载地址 http://nginx.org/en/download.html pcre库下载地址，nginx需要【解析正则】 http://sourceforge.net/projects/pcre/files/pcre/ zlib下载地址，ngin
阅读全文
摘要：三、xargs xargs - build and execute command lines from standard input 在使用find命令的-exec选项处理匹配到的文件时， find命令将所有匹配到的文件一起传递给exec执行。但有些系统对能够传递给exec的命令长度有限制，这样在
阅读全文
摘要：find 由于find具有强大的功能，所以它的选项也很多，其中大部分选项都值得我们花时间来了解一下。即使系统中含有网络文件系统( NFS)，find命令在该文件系统中同样有效，只要你具有相应的权限。 在运行一个非常消耗资源的find命令时，很多人都倾向于把它放在后台执行，因为遍历一个大的文件系统可能
阅读全文
摘要：sed sed意为流编辑器（Stream Editor），在Shell脚本和Makefile中作为过滤器使用非常普遍，也就是把前一个程序的输出引入sed的输入，经过一系列编辑命令转换为另一种格式输出。sed和vi都源于早期UNIX的ed工具，所以很多sed命令和vi的末行命令是相同的。 sed命令行
阅读全文
摘要：awk sed以行为单位处理文件，awk比sed强的地方在于不仅能以行为单位还能以列为单位处理文件。awk缺省的行分隔符是换行，缺省的列分隔符是连续的空格和Tab，但是行分隔符和列分隔符都可以自定义，比如/etc/passwd文件的每一行有若干个字段，字段之间以:分隔，就可以重新定义awk的列分隔符
阅读全文
摘要：执行脚本： 编写一个简单的脚本test.sh： #! /bin/sh cd .. ls Shell脚本中用#表示注释，相当于C语言的//注释。但如果#位于第一行开头，并且是#!（称为Shebang）则例外，它表示该脚本使用后面指定的解释器/bin/sh解释执行。如果把这个脚本文件加上可执行权限然后执
阅读全文
摘要：自定义菜单 现在，我们有了网页链接地址，可以跳转到显示获取的个人信息的网页。但我们不想每次都手动输入这个冗长的链接地址，怎么办？ 我们可以把链接地址嵌入到微信公众号的菜单里面。 可是，测试平台不提供友好的界面操作，怎么办？ 那就，调用微信的设置自定义菜单接口！ 创建自定义菜单 关于菜单 菜单类型 接
阅读全文
摘要：视图 视图接受Web请求并且返回Web响应 视图就是一个python函数，被定义在views.py中 响应可以是一张网页的HTML内容，一个重定向，一个404错误等等 响应处理过程如下图： URLconf 在settings.py文件中通过ROOT_URLCONF指定根级url的配置 urlpatt
阅读全文
摘要：MVC 大部分开发语言中都有MVC框架 MVC框架的核心思想是：解耦 降低各功能模块之间的耦合性，方便变更，更容易重构代码，最大程度上实现代码的重用 m表示model，主要用于对数据库层的封装 v表示view，用于向用户展示结果 c表示controller，是核心，用于处理请求、获取数据、返回结果
阅读全文
摘要：数据库命令：创建create database 数据库名 charset=utf8;删除drop database 数据库名;查看所有数据库：show databases;使用数据库：use 数据库名; 表命令：create table 表名(列...);唯一标识的要求：id 类型：int unsi
阅读全文
摘要：推荐的python电子书 python学习路线图 优先级 入门:python核心编程 提高:python cookbook 其他 (1).数据分析师 需要有深厚的数理统计基础，但是对程序开发能力不做要求。 需要熟练使用主流的数据挖掘（或统计分析）工具如Business Analytics and B
阅读全文
摘要：机器视觉 从 Google 的无人驾驶汽车到可以识别假钞的自动售卖机，机器视觉一直都是一个应用广 泛且具有深远的影响和雄伟的愿景的领域。 我们将重点介绍机器视觉的一个分支：文字识别，介绍如何用一些 Python库来识别和使用在线图片中的文字。 我们可以很轻松的阅读图片里的文字，但是机器阅读这些图片就
阅读全文
摘要：select distinct * from 表名where ...group by ...having ...order by ...limit ... 关系的问题（1）是什么样的对应关系（2）存储关系的字段，使用什么类型（3）存入数据时错了怎么办？ 查：学生姓名及所在的班级名称分析：stu,cl
阅读全文
摘要：ubuntu软件安装与卸载 更新Ubuntu软件下载地址 1. 寻找国内镜像源 所谓的镜像源：可以理解为提供下载软件的地方，比如Android手机上可以下载软件的91手机助手；iOS手机上可以下载软件的AppStore 2. 备份Ubuntu默认的源地址 3. 更新源服务器列表 4. 更新源 做完此
阅读全文
摘要：Linux常用服务器构建-ftp服务器 ftp服务器 FTP 是File Transfer Protocol（文件传输协议）的英文简称，而中文简称为“文传协议”。 用于Internet上的控制文件的双向传输。 同时，它也是一个应用程序（Application）。基于不同的操作系统有不同的FTP应用程
阅读全文
摘要：Requests: 让 HTTP 服务人类 虽然Python的标准库中 urllib2 模块已经包含了平常我们使用的大多数功能，但是它的 API 使用起来让人感觉不太好，而 Requests 自称 “HTTP for Humans”，说明使用更简洁方便。 Requests 唯一的一个非转基因的 Py
阅读全文
摘要：urllib2 的异常错误处理 在我们用urlopen或opener.open方法发出一个请求时，如果urlopen或opener.open不能处理这个response，就产生错误。 这里主要说的是URLError和HTTPError，以及对它们的错误处理。 URLError URLError 产生
阅读全文
摘要：Handler处理器 和 自定义Opener opener是 urllib2.OpenerDirector 的实例，我们之前一直都在使用的urlopen，它是一个特殊的opener（也就是模块帮我们构建好的）。 但是基本的urlopen()方法不支持代理、cookie等其他的HTTP/HTTPS高级
阅读全文
摘要：urllib2默认只支持HTTP/HTTPS的GET和POST方法 urllib.urlencode() urllib 仅可以接受URL，不能创建 设置了headers 的Request 类实例； 但是 urllib 提供 urlencode 方法用来GET查询字符串的产生，而 urllib2 则没
阅读全文
摘要：urllib2库的基本使用 所谓网页抓取，就是把URL地址中指定的网络资源从网络流中读取出来，保存到本地。 在Python中有很多库可以用来抓取网页，我们先学习urllib2。 urllib2 在 python3.x 中被改为urllib.request urlopen d 我们先来段代码： 执行写
阅读全文
摘要：HTTP代理神器Fiddler Fiddler是一款强大Web调试工具，它能记录所有客户端和服务器的HTTP请求。 Fiddler启动的时候，默认IE的代理设为了127.0.0.1:8888，而其他浏览器是需要手动设置。 工作原理 Fiddler 是以代理web服务器的形式工作的，它使用代理地址：1
阅读全文
摘要：HTTP和HTTPS HTTP协议（HyperText Transfer Protocol，超文本传输协议）：是一种发布和接收 HTML页面的方法。 HTTPS（Hypertext Transfer Protocol over Secure Socket Layer）简单讲是HTTP的安全版，在HT
阅读全文
摘要：手机App抓包爬虫 1. items.py 2. spiders/douyu.py 3. 设置setting.py 4. pipelines.py 在项目根目录下新建main.py文件,用于调试 执行程序 阳光热线问政平台 http://wz.sun0769.com/index.php/questi
阅读全文
摘要：repost :https://blog.csdn.net/tianjinjianzhan 一、基础知识篇： Http Header之User-Agent User Agent中文名为用户代理，是Http协议中的一部分，属于头域的组成部分，User Agent也简称UA。它是一个特殊字符串头，是一种
阅读全文
摘要：从零搭建Redis-Scrapy分布式爬虫 Scrapy-Redis分布式策略： 假设有四台电脑：Windows 10、Mac OS X、Ubuntu 16.04、CentOS 7.2，任意一台电脑都可以作为 Master端 或 Slaver端，比如： Master端(核心服务器) ：使用 Wind
阅读全文
摘要：Scrapy 框架 Scrapy是用纯Python实现一个为了爬取网站数据、提取结构性数据而编写的应用框架，用途非常广泛。 框架的力量，用户只需要定制开发几个模块就可以轻松的实现一个爬虫，用来抓取网页内容以及各种图片，非常之方便。 Scrapy 使用了 Twisted['twɪstɪd](其主要对手
阅读全文
摘要：页面解析和数据提取 一般来讲对我们而言，需要抓取的是某个网站或者某个应用的内容，提取有用的价值。内容一般分为两部分，非结构化的数据 和 结构化的数据。 非结构化数据：先有数据，再有结构， 结构化数据：先有结构、再有数据 不同类型的数据，我们需要采用不同的方式来处理。 非结构化的数据处理 正则表达式
阅读全文
摘要：1、为什么学习Python？ 2、通过什么途径学习的Python？ 3、Python和Java、PHP、C、C#、C++等其他语言的对比？ C，它是现代编程语言的基础，在现代应用中使用不多。现在最主要的应用就是单片机，比如遥控器，仪表盘之类，直接操纵硬件，所以C语言至今仍不可取代。 PHP是用来做网
阅读全文
摘要：常见网络攻击 1. tcp半链接攻击 tcp半链接攻击也称为：SYN Flood (SYN洪水) 是种典型的DoS (Denial of Service，拒绝服务) 攻击 效果就是服务器TCP连接资源耗尽，停止响应正常的TCP连接请求 1.1 正常链接时的情况 1.2 半链接攻击时的情况 2. dn
阅读全文
摘要：socket简介 1.本地的进程间通信（IPC）有很多种方式，例如 队列 同步（互斥锁、条件变量等） 以上通信方式都是在一台机器上不同进程之间的通信方式，那么问题来了 网络中进程之间如何通信？ 2. 网络中进程之间如何通信 首要解决的问题是如何唯一标识一个进程，否则通信无从谈起！ 在本地可以通过进程
阅读全文
摘要：子网掩码 要想理解什么是子网掩码，就不能不了解IP地址的构成。互联网是由许多小型网络构成的，每个网络上都有许多主机，这样便构成了一个有层次的结构。IP地址在设计时就考虑到地址分配的层次特点，将每个IP地址都分割成网络号和主机号两部分，以便于IP地址的寻址操作。 IP地址的网络号和主机号各是多少位呢？
阅读全文
摘要：正则表达式 以前我们用grep在一个文件中找出包含某些字符串的行，比如在头文件中找出一个宏定义。其实grep还可以找出符合某个模式（Pattern）的一类字符串。例如找出所有符合xxxxx@xxxx.xxx模式的字符串（也就是email地址），要求x字符可以是字母、数字、下划线、小数点或减号，ema
阅读全文
摘要：Linux核心命令 运维内容 strace netstat perf top pidstat mpstat dstat vmstat slabtop free top tcpdump ip nicstat dtrace ping dtrace blktrace iptop iostat stap 文
阅读全文
摘要：shell习题训练 1.求2个数之和 2.计算1-100的和 3.将一目录下所有的文件的扩展名改为bak 4.编译当前目录下的所有.c文件： 5.打印root可以使用可执行文件数，处理结果: root's bins: 2306 6.打印当前sshd的端口和进程id，处理结果: sshd Port&&
阅读全文
摘要：Shell脚本的调试方法 Shell提供了一些用于调试脚本的选项，如下所示： -n 读一遍脚本中的命令但不执行，用于检查脚本中的语法错误 -v 一边执行脚本，一边将执行过的脚本命令打印到标准错误输出 -x 提供跟踪执行信息，将执行的每一条命令和结果依次打印出来 使用这些选项有三种方法： 一是在命令行
阅读全文
摘要：运维第一工具-shell编程 shell历史 Shell的作用是解释执行用户的命令，用户输入一条命令，Shell就解释执行一条，这种方式称为交互式（Interactive），Shell还有一种执行命令的方式称为批处理（Batch），用户事先写一个Shell脚本（Script），其中有很多条命令，让S
阅读全文
摘要：应用：TFTP客户端 1. TFTP协议介绍 TFTP（Trivial File Transfer Protocol,简单文件传输协议） 是TCP/IP协议族中的一个用来在客户端与服务器之间进行简单文件传输的协议 特点： 简单 占用资源小 适合传递小文件 适合在局域网进行传递 端口号为69 基于UD
阅读全文
摘要：单进程服务器 1. 完成一个简单的TCP服务器 2. 总结 同一时刻只能为一个客户进行服务，不能同时为多个客户服务 类似于找一个“明星”签字一样，客户需要耐心等待才可以获取到服务 当服务器为一个客户端服务时，而另外的客户端发起了connect，只要服务器listen的队列有空闲的位置，就会为这个新客
阅读全文
摘要：交换机、路由器、服务器组网 1. 通信过程（pc+switch+router+server） 较为复杂的通信过程如：访问 www.baidu.com 注意：一定要配置 PC：IP、NETMASK、DFGATEWAY、DNS ROUTER：IP、NETMASK、路由表 总结 DNS服务器用来解析出IP
阅读全文
摘要：理解 使用网络能够把多方链接在一起，然后可以进行数据传递 所谓的网络编程就是，让在不同的电脑上的软件能够进行数据传递，即进程之间的通信 tcp/ip简介 1. 什么是协议 有的说英语，有的说中文，有的说德语，说同一种语言的人可以交流，不同的语言之间就不行了 为了解决不同种族人之间的语言沟通障碍，现规
阅读全文
摘要：pexpect Pexpect 是 Don Libes 的 Expect 语言的一个 Python 实现，是一个用来启动子程序，并使用正则表达式对程序输出做出特定响应，以此实现与其自动交互的 Python 模块。 Pexpect 的使用范围很广，可以用来实现与 ssh、ftp 、telnet 等程序
阅读全文
摘要：元类 1. 类也是对象 在大多数编程语言中，类就是一组用来描述如何生成一个对象的代码段。在Python中这一点仍然成立： 但是，Python中的类还远不止如此。类同样也是一种对象。是的，没错，就是对象。只要你使用关键字class，Python解释器在执行的时候就会创建一个对象。 下面的代码段： 将在
阅读全文
摘要：python是动态语言 1. 动态语言的定义 动态编程语言 是 高级程序设计语言 的一个类别，在计算机科学领域已被广泛应用。它是一类 在运行时可以改变其结构的语言 ：例如新的函数、对象、甚至代码可以被引进，已有的函数可以被删除或是其他结构上的变化。动态语言目前非常具有活力。例如JavaScript便
阅读全文
摘要：python基础语言 python基础语言 迭代器 迭代是访问集合元素的一种方式。迭代器是一个可以记住遍历的位置的对象。迭代器对象从集合的第一个元素开始访问，直到所有的元素被访问完结束。迭代器只能往前不会后退。 1. 可迭代对象 以直接作用于 for 循环的数据类型有以下几种： 一类是集合数据类型，
阅读全文
摘要：什么是运维 术语名词 IDC--（Internet Data Center)互联网数据中心，主要服务包括整机租用、服务器托管、机柜租用、机房租用、专线接入和网络管理服务等。广义上的IDC业务，实际上就是数据中心所提供的一切服务。客户租用数据中心的服务器和带宽，并利用数据中心的技术力量，来实现自己对软
阅读全文
摘要：下面是我写了一道题！！！在满足函数的封闭原则下，实现了打印函数的不定长参数，打印函数的执行时间？ 谁可以谁可以实现下面打印函数的调用方式？？？ 还有一道题吧觉得自己的解法比较笨拙，题目是用一个函数实现一个序列的相邻去重，这个sequence可以是字符串、列表、和元组。 思路是：先将原来的所以得序列实
阅读全文
摘要：装饰器 装饰器是程序开发中经常会用到的一个功能，用好了装饰器，开发效率如虎添翼，所以这也是Python面试中必问的问题，但对于好多初次接触这个知识的人来讲，这个功能有点绕，自学时直接绕过去了，然后面试问到了就挂了，因为装饰器是程序开发的基础知识，这个都不会，别跟人家说你会Python, 看了下面的文
阅读全文
摘要：闭包 1. 函数引用 运行结果: 2. 什么是闭包 运行结果： 3. 闭包再理解 内部函数对外部函数作用域里变量的引用（非全局变量），则称内部函数为闭包。 启动python解释器 4. 看一个闭包的实际例子： 这个例子中，函数line与变量a,b构成闭包。在创建闭包的时候，我们通过line_conf
阅读全文
摘要：函数返回值(一) <1>“返回值”介绍 现实生活中的场景: 我给儿子10块钱，让他给我买包烟。这个例子中，10块钱是我给儿子的，就相当于调用函数时传递到参数，让儿子买烟这个事情最终的目标是，让他把烟给你带回来然后给你对么，，，此时烟就是返回值 开发中的场景： 定义了一个函数，完成了获取室内温度，想一
阅读全文
摘要：局部变量 <1>什么是局部变量 如下图所示: 局部变量 <1>什么是局部变量 如下图所示: 局部变量 <1>什么是局部变量 如下图所示: <2>小总结 局部变量，就是在函数内部定义的变量 不同的函数，可以定义相同的名字的局部变量，但是各用个的不会产生影响 局部变量的作用，为了临时保存数据需要在函数中
阅读全文
摘要：函数参数(一) 思考一个问题，如下： 现在需要定义一个函数，这个函数能够完成2个数的加法运算，并且把结果打印出来，该怎样设计？下面的代码可以吗？有什么缺陷吗？ 为了让一个函数更通用，即想让它计算哪两个数的和，就让它计算哪两个数的和，在定义函数的时候可以让函数接收数据，就解决了这个问题，这就是 函数的
阅读全文
摘要：递归函数 <1>什么是递归函数 通过前面的学习知道一个函数可以调用其他函数。 如果一个函数在内部不调用其它的函数，而是自己本身的话，这个函数就是递归函数。 <2>递归函数的作用 举个例子，我们来计算阶乘 n! = 1 * 2 * 3 * ... * n 解决办法1: 看阶乘的规律 解决办法2: 原理
阅读全文
摘要：模块进阶 Python有一套很有用的标准库(standard library)。标准库会随着Python解释器，一起安装在你的电脑中的。 它是Python的一个组成部分。这些标准库是Python为你准备好的利器，可以让编程事半功倍。 用标准库 hashlib 应用实例 用于注册、登录.... 运行结
阅读全文
摘要：import导入模块 1. import 搜索路径 从上面列出的目录里依次查找要导入的模块文件 ' ' 表示当前路径 2. 重新导入模块 模块被导入后，import module不能重新导入模块，重新导入需用 测试模块内容 调用模块中的方法 修改测试模块 重新加载模块 循环导入 1. 什么是循环导入
阅读全文
摘要：私有化 xx: 公有变量 _x: 单前置下划线,私有化属性或方法，from somemodule import *禁止导入,类对象和子类可以访问 __xx：双前置下划线,避免与子类中的属性命名冲突，无法在外部直接访问(名字重整所以访问不到) __xx__:双前后下划线,用户名字空间的魔法对象或属性。
阅读全文
摘要：作用域 什么是命名空间 比如有一个学校，有10个班级，在7班和8班中都有一个叫“小王”的同学，如果在学校的广播中呼叫“小王”时，7班和8班中的这2个人就纳闷了，你是喊谁呢！！！如果是“7班的小王”的话，那么就很明确了，那么此时的7班就是小王所在的范围，即命名空间 globals、locals 在之前
阅读全文
摘要：进制、位运算 1、什么是进制 1）理解个X进制的概念 : 每一位 只允许出现 0~X-1 这几个数字,逢X进一,基是X, 每一位有一个权值大小是X的幂次。 其表示的数值可以写成按位权展开的多项式之和。 十进制: 每一位只允许出现0~9这十个数字,逢十进1,基是十,每一位数字有一个 权值大小是十的幂次
阅读全文
摘要：==、is 总结 is 是比较两个引用是否指向了同一个对象（引用比较）。 == 是比较两个对象是否相等。 深拷贝、浅拷贝 1. 浅拷贝 浅拷贝是对于一个对象的顶层拷贝 通俗的理解是：拷贝了引用，并没有拷贝内容 2. 深拷贝 深拷贝是对于一个对象所有层次的拷贝(递归) 3. 拷贝的其他方式 分片表达式
阅读全文
摘要：调试--pdb pdb是基于命令行的调试工具，非常类似gnu的gdb（调试c/c++）。 调试--pdb pdb是基于命令行的调试工具，非常类似gnu的gdb（调试c/c++）。 调试--pdb pdb是基于命令行的调试工具，非常类似gnu的gdb（调试c/c++）。 执行时调试 程序启动，停止在第
阅读全文
摘要：编码风格 错误认知 这很浪费时间 我是个艺术家 所有人都能穿的鞋不会合任何人的脚 我善长制定编码规范 正确认知 促进团队合作 减少bug处理 提高可读性，降低维护成本 有助于代码审查 养成习惯，有助于程序员自身的成长 pep8 编码规范 Python Enhancement Proposals ：p
阅读全文
摘要：内建函数 Build-in Function,启动python解释器，输入dir(__builtins__), 可以看到很多python解释器启动后默认加载的属性和函数，这些函数称之为内建函数， 这些函数因为在编程时使用较多，cpython解释器用c语言实现了这些函数，启动解释器 时默认加载。 这些
阅读全文
摘要：垃圾回收 1. 小整数对象池 整数在程序中的使用非常广泛，Python为了优化速度，使用了小整数对象池， 避免为整数频繁申请和销毁内存空间。 Python 对小整数的定义是 [-5, 257) 这些整数对象是提前建立好的，不会被垃圾回收。在一个 Python 的程序中，所有位于这个范围内的整数使用的
阅读全文
摘要：Shell脚本语法 条件测试：test、 [ ] 命令test或[可以测试一个条件是否成立，如果测试结果为真，则该命令的Exit Status为0，如果测试结果为假，则命令的Exit Status为1（注意与C语言的逻辑表示正好相反）。例如测试两个数的大小关系： itcast@ubuntu:~$ v
阅读全文
摘要：知识点汇总 1.HTML HTML5新特性，语义化 浏览器的标准模式和怪异模式 xhtml和html的区别 使用data-的好处 meta标签 canvas HTML废弃的标签 IE6 bug，和一些定位写法 css js放置位置和原因 什么是渐进式渲染 html模板语言 meta viewport
阅读全文
摘要：配置 nginx.conf配置文件,基本就分为以下几块： main events { .... } http { .... upstream myproject { ..... } server { .... location { .... } } server { .... location {
阅读全文
摘要：Scrapy 和 scrapy-redis的区别 Scrapy 是一个通用的爬虫框架，但是不支持分布式，Scrapy-redis是为了更方便地实现Scrapy分布式爬取，而提供了一些以redis为基础的组件(仅有组件)。 pip install scrapy-redis Scrapy-redis提供
阅读全文
摘要：爬虫(Spider)，反爬虫(Anti-Spider)，反反爬虫(Anti-Anti-Spider) 之间恢宏壮阔的斗争... Day 1 小莫想要某站上所有的电影，写了标准的爬虫(基于HttpClient库)，不断地遍历某站的电影列表页面，根据 Html 分析电影名字存进自己的数据库。 这个站点的
阅读全文
摘要：为什么要做爬虫？ 首先请问：都说现在是"大数据时代"，那数据从何而来？ 企业产生的用户数据：百度指数、阿里指数、TBI腾讯浏览指数、新浪微博指数 数据平台购买数据：数据堂、国云数据市场、贵阳大数据交易所 政府/机构公开的数据：中华人民共和国国家统计局数据、世界银行公开数据、联合国数据、纳斯达克。 数
阅读全文
摘要：1.1 Ping命令的使用 ping检测网络故障步骤： ping 127.0.0.1 ping环绕指针检测是否在计算上anzhaung了TCP/IP协议及配置是否正确 ping本机IP这个命令被被送到我们计算机所配置的IP地址，计算机始终保持对该ping命令作出答，如果没有则表明本地配置或安装存在问
阅读全文
摘要：微信开发原理 被动回复：粉丝发消息，公众号回复消息。 主动告知：公众号主动给粉丝发消息，例如文字、语音、图文。 内嵌网页：利用内嵌网页链接跳转到网页的形式，向粉丝展示信息内容，或者实现复杂的交互业务逻辑。 明确需求 公众号主要通过 公众号消息会话 公众号内网页 来为用户提供服务的。 1. 公众号消息
阅读全文
