独狼

摘要： 一、MongoDB简介 MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。 MongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。它支持的数据结构非常松散，是类似json的bso 阅读全文

摘要： 一、导入sqlite数据库模块 从Python2.5以后，sqlite3成为内置模块，不需要额外安装，只需要导入即可 import sqlite3 二、创建/打开数据库 sqlite3模块中使用connect方法创建/打开数据库，需要指定数据库路径。若数据库存在则打开，不存在则创建一个新的数据库 c 阅读全文

摘要： SQLite 数据库，是一个非常轻量级自包含(lightweight and self-contained)的DBMS，它可移植性好，很容易使用，很小，高效而且可靠。 SQLite嵌入到使用它的应用程序中，它们共用相同的进程空间，而不是单独的一个进程。从外部看，它并不像一个RDBMS，但在进程内部， 阅读全文

摘要： XPath 是一门在 XML 文档中查找信息的语言。XPath 用于在 XML 文档中通过元素和属性进行导航。 XPath 含有超过 100 个内建的函数。这些函数用于字符串值、数值、日期和时间比较、节点和 QName 处理、序列处理、逻辑值等等。 XPath 是 W3C 标准,XPath 于 19 阅读全文

摘要： Scrapy是一个专业的、高效的爬虫框架，它使用专业的Twisted包（基于事件驱动的网络引擎包）高效处理网络通信，使用lxml（专业的XML处理包）、cssselect高效地提取HTML页面的有效信息，同时它也提供了有效的线程管理一、安装Scrapy: pip3 install scrapy二、创 阅读全文

摘要： Python对HTML正文抽取后存储为两种格式：JSON和CSV 一、存储为JSON： Python对JSON文件的操作分为编码和解码，通过JSON模块来实现。编码过程是把Python对象转换成JSON对象的一个过程，常用的两个函数是dumps和dump函数。两个函数的唯一区别就是dump把Pyth 阅读全文

摘要： 一、强大的BeautifulSoup：BeautifulSoup是一个可以从html或xml文件中提取数据的Python库。它能够通过你喜欢的转换器实现惯用的文档导航、查找、修改文档的方式。在Python开发中，主要用的是BeautifulSoup的查找提取功能，修改功能很少使用 1、安装Beaut 阅读全文

摘要： 一、urllib实现： urllib是Python中的内置模块 实现一个完整的请求与响应模型：urllib提供一个基础函数urlopen，通过向指定的url发出请求来获取数据。 import urllib.request response = urllib.request.urlopen('http 阅读全文

摘要： pygal是一个SVG图表库。SVG是一种矢量图格式。全称Scalable Vector Graphics – 可缩放矢量图形。用浏览器打开svg，可以方便的与之交互。 import pygal #准备数据 data =[[5,4.0,5,5,5], [4.8,2.8,4.8,4.8,4.9], [ 阅读全文

摘要： 使用Matplotlib提供的pie()函数绘制饼图 import matplotlib.pyplot as plt import matplotlib.font_manager as fm #字体管理器 #准备字体 my_font = fm.FontProperties(fname="/usr/s 阅读全文