03 2016 档案
摘要:Python爬虫的工具列表这个列表包含与网页抓取和数据处理的Python库网络通用urllib -网络库(stdlib)。requests -网络库。grab – 网络库(基于pycurl)。pycurl –网络库(绑定libcurl)。urllib3 – PythonHTTP库,安全连接池、...
阅读全文
摘要:SPSS学习笔记之——Kaplan-Meier生存分析一、概述关于生存分析的相关概念,Kaplan-Meier用于估计生存函数,允许有一个分组变量进行生存率的组间比较,还容许一个分层变量。若不考虑其他混杂因素下生存分析的常用方法。二、实例要研究某种新药治疗相对于常规药物治疗对生存率有无改善,收...
阅读全文
摘要:大数据的最核心价值是什么有这样一段话:社交网络,让我们越来越多地从数据中观察到人类社会的复杂行为模式。社交网络,为大数据提供了信息汇集、分析的第一手资料。从庞杂的数据背后挖掘、分析用户的行为习惯和喜好,找出更符合用户“口味”的产品和服务,并结合用户需求有针对性地调整和优化自身,就是大数据的价值...
阅读全文
摘要:大数据的最核心价值是什么有这样一段话:社交网络,让我们越来越多地从数据中观察到人类社会的复杂行为模式。社交网络,为大数据提供了信息汇集、分析的第一手资料。从庞杂的数据背后挖掘、分析用户的行为习惯和喜好,找出更符合用户“口味”的产品和服务,并结合用户需求有针对性地调整和优化自身,就是大数据的价值...
阅读全文
摘要:联网大数据运用的九大领域众所周知,大数据已经不简简单单是数据大的事实了,而最重要的现实是对大数据进行分析,只有通过分析才能获取很多智能的,深入的,有价值的信息。那么越来越多的应用涉及到大数据,而这些大数据的属性,包括数量,速度,多样性等等都是呈现了大数据不断增长的复杂性,所以大数据的分析方法在...
阅读全文
摘要:写给喜欢数据分析的初学者在耀眼的职业光环下,数据分析师自身的成长,几乎是与孤寂相伴,在高级打杂中,锻造而成。最近接到一个职业访谈的邀请,要给对数据分析感兴趣的新人Y(目前在知名电商从事系统开发和维护)一些建议,才突然发现自己在这个领域打滚了一段时间,一阵感叹后,写下自己的一些体会,尽管不全面,...
阅读全文
摘要:写给喜欢数据分析的初学者在耀眼的职业光环下,数据分析师自身的成长,几乎是与孤寂相伴,在高级打杂中,锻造而成。最近接到一个职业访谈的邀请,要给对数据分析感兴趣的新人Y(目前在知名电商从事系统开发和维护)一些建议,才突然发现自己在这个领域打滚了一段时间,一阵感叹后,写下自己的一些体会,尽管不全面,...
阅读全文
摘要:电子商务从大数据中挖宝必备五大要素_数据分析师 提到电子商务,自然会联想到大数据,如今“大数据”频繁地出现在媒体上,通过大数据,商家可以收集和分析数据,了解客户的购物模式和消费体验,从而改进产品设计,调整电子商务策略。随着企业处理的数据量越来越大,数据处理工具的智能化程度越来越高,处理速度越来...
阅读全文
摘要:数据分析的主要内容仍是结构化计算_数据分析师日常业务中会出现各种各样的数据分析问题,但究其本质,其主要内容仍然是结构化数据的计算。比如:指定时间段,计算各营业网点的月销售额比上期和同期比。 实现思路:对销售数据按时间段过滤,再按照营业网点、年、月进行三级分组汇总,最后进行跨行组的有序计算。找...
阅读全文
摘要:数据分析的主要内容仍是结构化计算_数据分析师日常业务中会出现各种各样的数据分析问题,但究其本质,其主要内容仍然是结构化数据的计算。比如:指定时间段,计算各营业网点的月销售额比上期和同期比。 实现思路:对销售数据按时间段过滤,再按照营业网点、年、月进行三级分组汇总,最后进行跨行组的有序计算。找...
阅读全文
摘要:在Excel工作表单元格中引用当前工作表名称 有多份Excel表格表头标题都为“××学校第1次拉练考试××班成绩表”,由于工作表结构都是一样的,所以我每次都是复制工作表然后编辑修改表中的数据。但经常是表中数据修改了,表头标题中的“第1次”忘记修改,造成表头标题与表中内容矛盾的尴尬。后来我发现,...
阅读全文
摘要:在Excel工作表单元格中引用当前工作表名称 有多份Excel表格表头标题都为“××学校第1次拉练考试××班成绩表”,由于工作表结构都是一样的,所以我每次都是复制工作表然后编辑修改表中的数据。但经常是表中数据修改了,表头标题中的“第1次”忘记修改,造成表头标题与表中内容矛盾的尴尬。后来我发现,...
阅读全文
摘要:茶叶店也可以用数据分析茶叶店虽然说只是一个门店最多也是几家的连锁店,但是在茶叶店的经营过程中会产生会很多和销售或者和产品有关的数据,如果可以对这些数据进行收集和整理,也会帮助茶叶店了解生产经营的过程,以及帮助某些先进的经营理念决策。在实际的走访大数据分析调查过程中,我们发现现有的茶叶店一般只有...
阅读全文
摘要:茶叶店也可以用数据分析茶叶店虽然说只是一个门店最多也是几家的连锁店,但是在茶叶店的经营过程中会产生会很多和销售或者和产品有关的数据,如果可以对这些数据进行收集和整理,也会帮助茶叶店了解生产经营的过程,以及帮助某些先进的经营理念决策。在实际的走访大数据分析调查过程中,我们发现现有的茶叶店一般只有...
阅读全文
摘要:业务实践,数据分析应从细节入手_数据分析师 JohnLucker是德勤咨询公司顾问,他20多年来都没有申请过一张新的信用卡。但是在过去的三年里,他却收到了超过300份来自银行,连锁酒店,各种无奇不有的团体的邀请。这是一个或被称为广撒网式营销的战术,他认为这也是“非常古老的战术”。如果公司对他广...
阅读全文
摘要:业务实践,数据分析应从细节入手_数据分析师 JohnLucker是德勤咨询公司顾问,他20多年来都没有申请过一张新的信用卡。但是在过去的三年里,他却收到了超过300份来自银行,连锁酒店,各种无奇不有的团体的邀请。这是一个或被称为广撒网式营销的战术,他认为这也是“非常古老的战术”。如果公司对他广...
阅读全文
摘要:数据分析中,你认为用户行为分析最重要的点是什么对着满屏的数据,来做用户行为分析,是不是茫然不知所措?做用户行为分析首先要确定你的目标。目标是降低成本(比如做渠道分析,优化渠道),增加收入(比如分析下单转化率、付款转化率、商品列表页跳出率),还是优化用户体验(比如注册流失率、首页跳出率)?然后针...
阅读全文
摘要:数据分析中,你认为用户行为分析最重要的点是什么对着满屏的数据,来做用户行为分析,是不是茫然不知所措?做用户行为分析首先要确定你的目标。目标是降低成本(比如做渠道分析,优化渠道),增加收入(比如分析下单转化率、付款转化率、商品列表页跳出率),还是优化用户体验(比如注册流失率、首页跳出率)?然后针...
阅读全文
摘要:如何进行大数据分析及处理_数据分析师大数据的分析从所周知,大数据已经不简简单单是数据大的事实了,而最重要的现实是对大数据进行分析,只有通过分析才能获取很多智能的,深入的,有价值的信息。那么越来越多的应用涉及到大数据,而这些大数据的属性,包括数量,速度,多样性等等都是呈现了大数据不断增长的复杂性...
阅读全文
摘要:如何进行大数据分析及处理_数据分析师大数据的分析从所周知,大数据已经不简简单单是数据大的事实了,而最重要的现实是对大数据进行分析,只有通过分析才能获取很多智能的,深入的,有价值的信息。那么越来越多的应用涉及到大数据,而这些大数据的属性,包括数量,速度,多样性等等都是呈现了大数据不断增长的复杂性...
阅读全文
摘要:大数据与传统数据的区别_数据分析师一直以来,大数据领域学习、采访、总结、归纳的一些要点。但由于大数据还处于前期发展期,因此不可能像一些成熟的硬件产品线那样,给大家相对成熟的理论。大数据落地会有哪些具体方向?技术实现如何搭建?我们针对大数据带给教育的机遇与挑战,深入探讨和分享大数据与传统数据的区...
阅读全文
摘要:大数据与传统数据的区别_数据分析师一直以来,大数据领域学习、采访、总结、归纳的一些要点。但由于大数据还处于前期发展期,因此不可能像一些成熟的硬件产品线那样,给大家相对成熟的理论。大数据落地会有哪些具体方向?技术实现如何搭建?我们针对大数据带给教育的机遇与挑战,深入探讨和分享大数据与传统数据的区...
阅读全文
摘要:数据分析师之量化用户研究什么是用户研究?对于一个如此简单的术语,“用户研究”对于不同的人意义也是不同的。对于用户研究中的“用户”,EdwardTufte(Bisbort,1999)有一句名言:“只有两个行业把他们的顾客称作用户:计算机设计(译者注:computerdesign)以及贩毒。”本书...
阅读全文
摘要:数据分析师之量化用户研究什么是用户研究?对于一个如此简单的术语,“用户研究”对于不同的人意义也是不同的。对于用户研究中的“用户”,EdwardTufte(Bisbort,1999)有一句名言:“只有两个行业把他们的顾客称作用户:计算机设计(译者注:computerdesign)以及贩毒。”本书...
阅读全文
摘要:数据分析电子商务B2C全流程_数据分析师目前,绝大多数B2C的转化率都在1%以下,做的最好的也只能到3.5%左右(比如以卖图书为主的当当)我想,所有的B2C都会关心三个问题:究竟那97%去了哪里?自己的网站在什么环节变成了漏斗,让进来的客户像沙子一样一点点地流失?以及怎么检修隐藏的漏斗,减少...
阅读全文
摘要:数据分析电子商务B2C全流程_数据分析师目前,绝大多数B2C的转化率都在1%以下,做的最好的也只能到3.5%左右(比如以卖图书为主的当当)我想,所有的B2C都会关心三个问题:究竟那97%去了哪里?自己的网站在什么环节变成了漏斗,让进来的客户像沙子一样一点点地流失?以及怎么检修隐藏的漏斗,减少...
阅读全文
摘要:C2B电商三种主要模式的分析_数据分析师在过去的一年中电商领域血雨腥风,尤其是天猫、京东、苏宁、当当、易讯等B2C电商打得不亦乐乎。而随着B2C领域竞争进入白热化阶段,C2B模式也在天猫“双11”的预售后慢慢为更多人所知。目前的中国电商市场,C2C领域淘宝是绝对王者,B2C领域中平台式的天猫也...
阅读全文
摘要:C2B电商三种主要模式的分析_数据分析师在过去的一年中电商领域血雨腥风,尤其是天猫、京东、苏宁、当当、易讯等B2C电商打得不亦乐乎。而随着B2C领域竞争进入白热化阶段,C2B模式也在天猫“双11”的预售后慢慢为更多人所知。目前的中国电商市场,C2C领域淘宝是绝对王者,B2C领域中平台式的天猫也...
阅读全文
摘要:让数据站住脚-浅谈用户研究中的信度与效度在用户研究工作中,如何让自己的数据和结论更有说服力,是很重要的问题。最近将自己积累的用研信度和效度的笔记整理一下,罗列在文中,希望对大家有所帮助。一、调查的质量取决于调查的信度和效度。信度主要指测量结果的一致性、稳定性。也就是说结论和数据是否反映了用户最...
阅读全文
摘要:让数据站住脚-浅谈用户研究中的信度与效度在用户研究工作中,如何让自己的数据和结论更有说服力,是很重要的问题。最近将自己积累的用研信度和效度的笔记整理一下,罗列在文中,希望对大家有所帮助。一、调查的质量取决于调查的信度和效度。信度主要指测量结果的一致性、稳定性。也就是说结论和数据是否反映了用户最...
阅读全文
摘要:提升数据分析能力成熟度之四步曲_数据分析师是不是常常苦于对业务中碰到的问题找不到好的解决办法,又或者担心不久的将来会爆发一系列潜在的问题?在某些事件完全失控之前您是否想事先找寻到一些蛛丝马迹?如果您的回答是肯定的话,不要担心,这种情况并不是特例。现实中存在着数量惊人的公司,在需要作出影响其公司...
阅读全文
摘要:提升数据分析能力成熟度之四步曲_数据分析师是不是常常苦于对业务中碰到的问题找不到好的解决办法,又或者担心不久的将来会爆发一系列潜在的问题?在某些事件完全失控之前您是否想事先找寻到一些蛛丝马迹?如果您的回答是肯定的话,不要担心,这种情况并不是特例。现实中存在着数量惊人的公司,在需要作出影响其公司...
阅读全文
摘要:数据分析普遍存在的方法及理论有哪些?-数据分析师现在越来越多的应用涉及大数据,只有通过对大数据的分析才能获取智慧、深入及具价值的信息。大数据拥有四个V的特点:数量(Volume)、速度(Velocity)、多样性(Variety)及价值(Value),呈现了大数据不断增长的复杂性。究竟现在大数...
阅读全文
摘要:数据分析普遍存在的方法及理论有哪些?-数据分析师现在越来越多的应用涉及大数据,只有通过对大数据的分析才能获取智慧、深入及具价值的信息。大数据拥有四个V的特点:数量(Volume)、速度(Velocity)、多样性(Variety)及价值(Value),呈现了大数据不断增长的复杂性。究竟现在大数...
阅读全文
摘要:R语言我要如何开始R语言_数据分析师我要如何开始R语言?很多时候,我们的老板跟我们说,这个东西你用R语言去算吧,Oh,Mygod!什么是R语言?我要怎么开始呢?其实回答这个问题很简单,首先,你只需要知道R语言其实就是一种计算机语言,它很强大,它是专门用来进行计算的,它比C\C++、Perl都要...
阅读全文
摘要:R语言我要如何开始R语言_数据分析师我要如何开始R语言?很多时候,我们的老板跟我们说,这个东西你用R语言去算吧,Oh,Mygod!什么是R语言?我要怎么开始呢?其实回答这个问题很简单,首先,你只需要知道R语言其实就是一种计算机语言,它很强大,它是专门用来进行计算的,它比C\C++、Perl都要...
阅读全文
摘要:用R语言求置信区间用R语言求置信区间是很方便的,而且很灵活,至少我觉得比spss好多了。如果你要求的只是95%的置信度的话,那么用一个很简单的命令就可以实现了首先,输入da=c(你的数据,用英文逗号分割),然后t.test(da),运行就能得到结果了。我的数据是newbomb =0) ...
阅读全文
摘要:用R语言求置信区间用R语言求置信区间是很方便的,而且很灵活,至少我觉得比spss好多了。如果你要求的只是95%的置信度的话,那么用一个很简单的命令就可以实现了首先,输入da=c(你的数据,用英文逗号分割),然后t.test(da),运行就能得到结果了。我的数据是newbomb =0) ...
阅读全文
摘要:竞品分析报告正确的打开方式如果说就多数人的竞品分析报告来谈,并没有什么卵用,因为分析的都是一些流于表面的东西,连一些总结性的东西都没有,所以最后也就导致了这篇竞品分析是为了报告而报告的,并没有什么实际的价值。甚至有的人的竞品分析报告所列举的产品根本不能算得上是竞品,这样的竞品分析的价值又在哪里...
阅读全文
摘要:竞品分析报告正确的打开方式如果说就多数人的竞品分析报告来谈,并没有什么卵用,因为分析的都是一些流于表面的东西,连一些总结性的东西都没有,所以最后也就导致了这篇竞品分析是为了报告而报告的,并没有什么实际的价值。甚至有的人的竞品分析报告所列举的产品根本不能算得上是竞品,这样的竞品分析的价值又在哪里...
阅读全文
摘要:内容分析在用户反馈分析中的应用1:淘宝的用户反馈 入口PART1 理论基础:内容分析法简述内容分析,是指利用明晰的编码规则,将大量文本信息转化为定量数据,并归于若干类别以分析信息特征的方法)。内容分析有三个特点:1)客观性。内容分析不受主观偏见影响,有标准化的研究过程,研究员对结果持开放态度;...
阅读全文
摘要:内容分析在用户反馈分析中的应用1:淘宝的用户反馈 入口PART1 理论基础:内容分析法简述内容分析,是指利用明晰的编码规则,将大量文本信息转化为定量数据,并归于若干类别以分析信息特征的方法)。内容分析有三个特点:1)客观性。内容分析不受主观偏见影响,有标准化的研究过程,研究员对结果持开放态度;...
阅读全文
摘要:excel怎么设置密码保护?Excel文件添加密码保护教程众所周知,Excel具有强大的数据处理和数据分析能力,广泛应用于加工学统计及金融统计中。特别是金融统计需要较高的安全性,那么就一定要为Excel文件添加密码保护,防止数据泄露。那么excel怎么设置密码保护?下面小编就为大家Excel文...
阅读全文
摘要:实时更新Excel文档外部数据源的数据单元格区域、Excel表、数据透视表或数据透视图均可以连接到外部数据源(数据源:用于连接数据库的一组存储的“源”信息。数据源包含数据库服务器的名称和位置、数据库驱动程序的名称以及在登录到数据库时所需的信息。)。可以刷新数据以更新此外部数据源的数据。每次刷新...
阅读全文
摘要:实时更新Excel文档外部数据源的数据单元格区域、Excel表、数据透视表或数据透视图均可以连接到外部数据源(数据源:用于连接数据库的一组存储的“源”信息。数据源包含数据库服务器的名称和位置、数据库驱动程序的名称以及在登录到数据库时所需的信息。)。可以刷新数据以更新此外部数据源的数据。每次刷新...
阅读全文
摘要:数据分析电子商务B2C全流程_数据分析师 目前,绝大多数B2C的转化率都在1%以下,做的最好的也只能到3.5%左右(比如以卖图书为主的当当)我想,所有的B2C都会关心三个问题:究竟那97%去了哪里?自己的网站在什么环节变成了漏斗,让进来的客户像沙子一样一点点地流失?以及怎么检修隐藏...
阅读全文
摘要:数据分析电子商务B2C全流程_数据分析师 目前,绝大多数B2C的转化率都在1%以下,做的最好的也只能到3.5%左右(比如以卖图书为主的当当)我想,所有的B2C都会关心三个问题:究竟那97%去了哪里?自己的网站在什么环节变成了漏斗,让进来的客户像沙子一样一点点地流失?以及怎么检修隐藏...
阅读全文
摘要:数据挖掘中分类算法小结_数据分析师数据仓库,数据库或者其它信息库中隐藏着许多可以为商业、科研等活动的决策提供所需要的知识。分类与预测是两种数据分析形式,它们可以用来抽取能够描述重要数据集合或预测未来数据趋势的模型。分类方法(Classification)用于预测数据对象的离散类别(Catego...
阅读全文
摘要:大数据分析或提升企业税务职能价值在未来,大数据可能成为提升企业税务职能价值的关键之匙。这是近日普华永道(中天)会计师事务所(下称“普华永道”)发布的未来全球税务职能的预测报告———《开启数据分析的力量》中得出的结论。 当前,税收立法呈现全球化的趋势,监管机构对税务透明度要求日益增加,企业面临...
阅读全文
摘要:大数据可视化必须避免的三种常见错误最近一段时间以来,围绕大数据可视化所展开的讨论可谓层出不穷——其话题之丰富、交锋之激烈甚至不亚于大数据技术本身。目前业界普遍认为可视化是最优秀的(或者说是惟一一种)数据内容表达方式,甚至如果不对数据进行可视化处理,我们将错失大量宝贵信息。 可视化是获取并分享...
阅读全文
摘要:大数据可视化必须避免的三种常见错误最近一段时间以来,围绕大数据可视化所展开的讨论可谓层出不穷——其话题之丰富、交锋之激烈甚至不亚于大数据技术本身。目前业界普遍认为可视化是最优秀的(或者说是惟一一种)数据内容表达方式,甚至如果不对数据进行可视化处理,我们将错失大量宝贵信息。 可视化是获取并分享...
阅读全文
摘要:数据分析帮你预知商机大数据还是目前最流行的词汇之一,很多企业想要使用大数据来增加企业的价值,特别是对于快消行业来说,一方面市场的变化因素多,变化快,如果仅仅是凭经验或者凭感觉,那么就找不到消费者真正需要的是什么,怎么知道客户进入门店,可能会购买哪一件商品,怎么更好的预知未来的商机,数据分析帮助...
阅读全文
摘要:数据分析帮你预知商机大数据还是目前最流行的词汇之一,很多企业想要使用大数据来增加企业的价值,特别是对于快消行业来说,一方面市场的变化因素多,变化快,如果仅仅是凭经验或者凭感觉,那么就找不到消费者真正需要的是什么,怎么知道客户进入门店,可能会购买哪一件商品,怎么更好的预知未来的商机,数据分析帮助...
阅读全文