01 2018 档案

摘要:牛顿方法 本次课程大纲: 1、 牛顿方法:对Logistic模型进行拟合 2、 指数分布族 3、 广义线性模型(GLM):联系Logistic回归和最小二乘模型 复习: Logistic回归:分类算法 假设给定x以为参数的y=1和y=0的概率: 求对数似然性: 对其求偏导数,应用梯度上升方法,求得: 阅读全文
posted @ 2018-01-31 18:04 巅峰之斗 阅读(322) 评论(0) 推荐(0)
摘要:冒泡排序 冒泡排序(英语:Bubble Sort)是一种简单的排序算法。它重复地遍历要排序的数列,一次比较两个元素,如果他们的顺序错误就把他们交换过来。遍历数列的工作是重复地进行直到没有再需要交换,也就是说该数列已经排序完成。这个算法的名字由来是因为越小的元素会经由交换慢慢“浮”到数列的顶端。 冒泡 阅读全文
posted @ 2018-01-29 09:41 巅峰之斗 阅读(173) 评论(0) 推荐(0)
摘要:python大战机器学习——模型评估、选择与验证 1、损失函数和风险函数 (1)损失函数:常见的有 0-1损失函数 绝对损失函数 平方损失函数 对数损失函数 (2)风险函数:损失函数的期望 经验风险:模型在数据集T上的平均损失 根据大数定律,当N趋向于∞时,经验风险趋向于风险函数 2、模型评估方法 阅读全文
posted @ 2018-01-26 10:45 巅峰之斗 阅读(326) 评论(0) 推荐(0)
摘要:财经数据 http://tushare.org/trading.html#id2 阅读全文
posted @ 2018-01-25 09:29 巅峰之斗 阅读(951) 评论(0) 推荐(0)
摘要:from sklearn import preprocessing # normalize the data attributes normalized_X = preprocessing.normalize(X) # standardize the data attributes standard 阅读全文
posted @ 2018-01-24 14:49 巅峰之斗 阅读(181) 评论(0) 推荐(0)
摘要:为了理解和应用机器学 习技术,你需要学习 Python 或者 R。这两者都是与 C、Java、PHP 相类似的编程语言。但是,因为 Python 与 R 都比较年轻, 而且更加“远离”CPU,所以它们显得简单一些。相对于R 只用于处理数据,使用例如机器学习、统计算法和漂亮的绘图分析数据, Pthon 阅读全文
posted @ 2018-01-22 18:51 巅峰之斗 阅读(719) 评论(0) 推荐(0)
摘要:注:本文是在http://www.111cn.net/sys/CentOS/63645.htm,http://www.cnblogs.com/kylinlin/p/5198233.html的基础上加以改动的!版权归alex.shu,kylinlin所有。 1.首先介绍一下:scrapy-redis框 阅读全文
posted @ 2018-01-19 18:44 巅峰之斗 阅读(426) 评论(0) 推荐(0)
摘要:一.目的。 在教程(二)(http://blog.csdn.net/u012150179/article/details/32911511)中使用基于Spider实现了自己的w3cschool_spider,并在items.py中定义了数据结构, 在pipelines.py中实现获得数据的过滤以及保 阅读全文
posted @ 2018-01-18 19:49 巅峰之斗 阅读(603) 评论(1) 推荐(0)
摘要:Python版本管理:pyenv和pyenv-virtualenvScrapy爬虫入门教程一 安装和基本使用Scrapy爬虫入门教程二 官方提供DemoScrapy爬虫入门教程三 命令行工具介绍和示例Scrapy爬虫入门教程四 Spider(爬虫)Scrapy爬虫入门教程五 Selectors(选择 阅读全文
posted @ 2018-01-17 10:30 巅峰之斗 阅读(1781) 评论(0) 推荐(0)
摘要:Scrapy介绍 Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架。 可以应用在包括数据挖掘,信息处理或存储历史数据等一系列的程序中。 所谓网络爬虫,就是一个在网上到处或定向抓取数据的程序,当然,这种说法不够专业,更专业的描述就是,抓取特定网站网页的HTML数据。抓取网页的一般方法 阅读全文
posted @ 2018-01-16 19:06 巅峰之斗 阅读(234) 评论(0) 推荐(0)
摘要:from PIL import Image import pytesseract from pytesseract import * rep={'O':'0', #替换列表 'I':'1','L':'1', 'Z':'2', 'S':'8' }; def initTable(threshold=14 阅读全文
posted @ 2018-01-16 19:02 巅峰之斗 阅读(336) 评论(0) 推荐(0)
摘要:1.安装Pillow 2.安装tesseract-ocr github地址: https://github.com/tesseract-ocr/tesseract You can either Install Tesseract via pre-built binary package or bui 阅读全文
posted @ 2018-01-16 18:04 巅峰之斗 阅读(985) 评论(0) 推荐(0)
摘要:最近想要抓取拉勾网的数据,最开始是使用Scrapy的,但是遇到了下面两个问题: 目前不会处理使用JS模板引擎生成的HTML页面,用POST的提交参数的话,接口统一,也没有必要使用Scrapy,所以就萌生了自己写一个简单的Python爬虫的想法。 本文中的部分链接可能需要FQ。 参考资料: 一个爬虫的 阅读全文
posted @ 2018-01-16 13:50 巅峰之斗 阅读(852) 评论(0) 推荐(0)
摘要:#!/usr/bin/env python# -*- coding:utf-8 -*-import urllib2import reclass Spider: def __init__(self): # 初始化起始页位置 self.page = 1 # 爬取开关,如果为True继续爬取 self.s 阅读全文
posted @ 2018-01-15 20:05 巅峰之斗 阅读(248) 评论(0) 推荐(0)
摘要:Urllib2 总结 介绍 Urllib2是用于获取URLs(统一资源定位符)的一个Python模块。它以urlopen函数的形式提供了非常简单的接口。能够使用各种不同的协议来获取网址。它还提供一个稍微复杂的接口用于处理常见的情况:如基本身份验证、cookies、proxies(代理)等。这些是由h 阅读全文
posted @ 2018-01-15 16:38 巅峰之斗 阅读(231) 评论(0) 推荐(0)
摘要:GitHub地址 https://github.com/zhangxiaomeng1/python 阅读全文
posted @ 2018-01-15 10:16 巅峰之斗 阅读(170) 评论(0) 推荐(0)
摘要:在我们日常上网浏览网页的时候,经常会看到一些好看的图片,我们就希望把这些图片保存下载,或者用户用来做桌面壁纸,或者用来做设计的素材。 我们最常规的做法就是通过鼠标右键,选择另存为。但有些图片鼠标右键的时候并没有另存为选项,还有办法就通过就是通过截图工具截取下来,但这样就降低图片的清晰度。好吧~!其实 阅读全文
posted @ 2018-01-13 17:33 巅峰之斗 阅读(475) 评论(0) 推荐(0)
摘要:一、Django中的异步请求 Django Web中从一个http请求发起,到获得响应返回html页面的流程大致如下:http请求发起 -- http handling(request解析) -- url mapping(url正则匹配找到对应的View) -- 在View中进行逻辑的处理、数据计算 阅读全文
posted @ 2018-01-10 15:03 巅峰之斗 阅读(1048) 评论(0) 推荐(0)
摘要:一:使用的工具 haystack是django的开源搜索框架,该框架支持Solr, Elasticsearch, Whoosh, **Xapian搜索引擎,不用更改代码,直接切换引擎,减少代码量。 搜索引擎使用Whoosh,这是一个由纯Python实现的全文搜索引擎,没有二进制文件等,比较小巧,配置 阅读全文
posted @ 2018-01-10 14:11 巅峰之斗 阅读(2327) 评论(0) 推荐(0)
摘要:1.缓存的简介 在动态网站中,用户所有的请求,服务器都会去数据库中进行相应的增,删,查,改,渲染模板,执行业务逻辑,最后生成用户看到的页面. 当一个网站的用户访问量很大的时候,每一次的的后台操作,都会消耗很多的服务端资源,所以必须使用缓存来减轻后端服务器的压力. 缓存是将一些常用的数据保存内存或者m 阅读全文
posted @ 2018-01-10 11:43 巅峰之斗 阅读(3571) 评论(0) 推荐(0)
摘要:使用的是CKeditor这个模块 1.安装: 2.将ckeditor注册到settings.py文件中, 并添加ckeditor的url到你项目的urls.py文件中 3.在models.py文件中使用ckeditor的富文本字段RichTextField替换TextField就行,用法不变。 4. 阅读全文
posted @ 2018-01-10 11:14 巅峰之斗 阅读(2890) 评论(0) 推荐(0)
摘要:一.前言 根据官网的文档配置,出现了问题,出于‘内事问谷歌,外事更得问谷歌’的原则,在Stack Overflow找到了解决方案。本文只针对Django1.9配置,至于Django的其他版本,还请参考其它资料。 二.项目树状图 以上是项目的一级树状图,static文件夹中放静态文件(css,js等) 阅读全文
posted @ 2018-01-09 17:02 巅峰之斗 阅读(4986) 评论(0) 推荐(0)
摘要:之前的一篇文章中介绍了url的基本用法[Django的url用法] 解析的过程可以概括为URL request -> view calling 同时,django又提供了另一种解析方式 - Reverse resolution of URLs 它的解析过程为 view calling -> URL 阅读全文
posted @ 2018-01-09 14:42 巅峰之斗 阅读(560) 评论(0) 推荐(0)
摘要:在编程的过程中,我们经常会重复性的写了很多的代码,比如一个页面的框架部分,这样我又多少个页面就得写上多少次,这样既不好维护,也不够高效,所以我们引出了html的模板继承部分。 1、写好一个html文件。 2、下面有个新的html文件需要继承上面这个html。 直接在这个新的html文件的最顶端,写上 阅读全文
posted @ 2018-01-09 14:42 巅峰之斗 阅读(963) 评论(0) 推荐(0)
摘要:除了使用easy_insatll和pip工具安装Python第三方库外还可以使用pycharm安装Python第三方库,步骤如下: 1.打开pycharm,点击File,再点击settings 2.点击settings之后再点击project下面的project Interpreter将会出现如下界 阅读全文
posted @ 2018-01-09 11:55 巅峰之斗 阅读(8351) 评论(0) 推荐(0)
摘要:翻译www.djangobook.com之第四章:Django模板系统 The Django Book:第4章 Django模板系统revised by xin_wang前面的章节我们看到如何在视图中返回HTML,但是HTML是硬编码在Python代码中的这会导致几个问题:1,显然,任何页面的改动会 阅读全文
posted @ 2018-01-09 11:25 巅峰之斗 阅读(701) 评论(0) 推荐(0)
摘要:#coding=utf-8from django.shortcuts import render,redirectfrom django.http import HttpResponse,HttpResponseRedirectdef index(request): return HttpRespo 阅读全文
posted @ 2018-01-09 09:27 巅峰之斗 阅读(8924) 评论(0) 推荐(0)
摘要:一、前言 1.什么是ORM? ORM,即Object-Relational Mapping(对象关系映射),它的作用是在关系型数据库和业务实体对象之间作一个映射,这样,我们在具体的操作业务对象的时候,就不需要再去和复杂的SQL语句打交道,只需简单的操作对象的属性和方法。 2.ORM的优缺点是什么? 阅读全文
posted @ 2018-01-08 18:26 巅峰之斗 阅读(2914) 评论(0) 推荐(0)
摘要:V=models.CharField(max_length=None<, **options>) #varchar V=models.EmailField(<max_length=75, **options="">) #varchar V=models.URLField(<verify_exists 阅读全文
posted @ 2018-01-08 16:33 巅峰之斗 阅读(710) 评论(0) 推荐(0)
摘要:python对mysql的操作 Mysql 常见操作 数据库操作 创建数据库 create database fuzjtest 删除数据库 drop database fuzjtest 查询数据库 show databases 切换数据库 use databas 123123 ###用户授权 创建用 阅读全文
posted @ 2018-01-08 16:04 巅峰之斗 阅读(486) 评论(0) 推荐(0)
摘要:MVT各部分的功能 M全拼为Model,与MVC中的M功能相同,负责和数据库交互,进行数据处理。 V全拼为View,与MVC中的C功能相同,接收请求,进行业务处理,返回应答。 T全拼为Template,与MVC中的V功能相同,负责封装构造要返回的html。 M全拼为Model,与MVC中的M功能相同 阅读全文
posted @ 2018-01-08 15:17 巅峰之斗 阅读(998) 评论(0) 推荐(0)
摘要:作者:Lingfeng Ai链接:http://www.zhihu.com/question/24590883/answer/92420471来源:知乎著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。 原文链接:Python 资源大全1200+收藏,600+赞,别只顾着自己私藏呀 阅读全文
posted @ 2018-01-04 18:02 巅峰之斗 阅读(3845) 评论(0) 推荐(1)
摘要:1. 问题 使用PyCharm 创建完Django 项目 想登录admin 页面 却不知道用户名和密码。 用的默认sqlit 2.解决办法 2.1 打开manage.py 控制界面 2.2 初始化数据库表 manage.py@HelloDj > makemigrations manage.py@He 阅读全文
posted @ 2018-01-04 18:00 巅峰之斗 阅读(529) 评论(0) 推荐(0)
摘要:mac系统中搭建apache+mysql+php的开发环境,安装mysql后,登录报错:mac ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using password: NO) php新手在mac系统中搭建apach 阅读全文
posted @ 2018-01-04 17:45 巅峰之斗 阅读(147) 评论(0) 推荐(0)

点击右上角即可分享
微信分享提示