摘要: 在数据分析领域,最热门的莫过于Python和R语言,此前有一篇文章《别老扯什么Hadoop了,你的数据根本不够大》指出:只有在超过5TB数据量的规模下,Hadoop才是一个合理的技术选择。这次拿到近亿条日志数据,千万级数据已经是关系型数据库的查询分析瓶颈,之前使用过Hadoop对大量文本进行分类,这 阅读全文
posted @ 2016-08-08 16:17 frchen 阅读(44046) 评论(0) 推荐(5) 编辑
摘要: 网上虽然有很多Python学习的教程,但是大多是围绕Python网页开发等展开。数据分析所需要的Python技能和网页开发等差别非常大,本人就是浪费了很多时间来看这些博客、书籍。所以就有了本文,希望能帮大家少走一点弯路。 -----------------我是分割线-------------- 本文 阅读全文
posted @ 2016-08-08 15:42 frchen 阅读(10862) 评论(0) 推荐(2) 编辑
摘要: 作者:卢钧轶(cenalulu) 本文原文地址: http://cenalulu.github.io/python/gil-in-python/ 作者:卢钧轶(cenalulu) 本文原文地址: http://cenalulu.github.io/python/gil-in-python/ 作者:卢 阅读全文
posted @ 2016-08-05 11:23 frchen 阅读(4368) 评论(0) 推荐(0) 编辑
摘要: 在使用django进行开发时,往往需要根据不同的需求对model进行更改。而这时候,python manage.py syncdb就不好使了。 目前有个很好的工具,是south,这个是专门用来更改model的。官方的文档见http://south.readthedocs.org/en/latest/ 阅读全文
posted @ 2016-08-03 13:10 frchen 阅读(4585) 评论(0) 推荐(0) 编辑
摘要: xss 保护: xss攻击允许用户注入客户端脚本到其他用户的服务器上。通常通过存储恶意脚本到数据库,其他用户通过数据库获取恶意脚本,并在浏览器上呈现;或是使用户点击会引起攻击者javascirpt脚本在用户客户端的连接来达到目的。但是xss攻击可能发生在任意不可信的数据源头,例如cookie和web 阅读全文
posted @ 2016-08-03 12:54 frchen 阅读(3745) 评论(0) 推荐(0) 编辑
摘要: pandas 是基于 Numpy 构建的含有更高级数据结构和工具的数据分析包 类似于 Numpy 的核心是 ndarray,pandas 也是围绕着 Series 和 DataFrame 两个核心数据结构展开的 。Series 和 DataFrame 分别对应于一维的序列和二维的表结构。pandas 阅读全文
posted @ 2016-08-01 15:06 frchen 阅读(23946) 评论(0) 推荐(1) 编辑
摘要: matplotlib 是python最著名的绘图库,它提供了一整套和matlab相似的命令API,十分适合交互式地行制图。而且也可以方便地将它作为绘图控件,嵌入GUI应用程序中。 它的文档相当完备,并且Gallery页面中有上百幅缩略图,打开之后都有源程序。因此如果你需要绘制某种类型的图,只需要在这 阅读全文
posted @ 2016-08-01 15:03 frchen 阅读(9192) 评论(0) 推荐(0) 编辑
摘要: 本操作的环境: deepin linux 2013(基于ubuntu) python 2.7 Django 1.6.2 创建项目与应用 目录结构如下: 打开mysite5/mysite5/settings.py文件,将应用添加进去: 设计数据库 打开mysite5/online/models.py文 阅读全文
posted @ 2016-07-27 12:41 frchen 阅读(482) 评论(0) 推荐(0) 编辑
摘要: 我想很多程序员应该记得 GitHub 上有一个 Awesome - XXX 系列的资源整理。awesome-python 是 vinta 发起维护的 Python 资源列表,内容包括:Web框架、网络爬虫、网络内容提取、模板引擎、数据库、数据可视化、图片处理、文本处理、自然语言处理、机器学习、日志、 阅读全文
posted @ 2016-07-27 00:32 frchen 阅读(2083) 评论(0) 推荐(1) 编辑
摘要: 数据库表是一个二维表,包含多行多列。把一个表的内容用Python的数据结构表示出来的话,可以用一个list表示多行,list的每一个元素是tuple,表示一行记录,比如,包含id和name的user表: Python的DB-API返回的数据结构就是像上面这样表示的。 但是用tuple表示一行很难看出 阅读全文
posted @ 2016-07-27 00:31 frchen 阅读(288) 评论(0) 推荐(0) 编辑