摘要:
概要 实战过程 原始数据格式 涨跌幅分析 分析步骤 01:去除多余的列 分析步骤 02:币种列转为行,每个交易日一行数据 分析步骤 03:就是每天的涨跌幅 分析步骤 04:删除掉第一天的无效数据 分析步骤 05:币种行转列,方便按照涨跌幅排序 分析步骤 06:导出数据 可视化 总结 概要 最近在用 阅读全文
摘要:
概述 python 的 pandas 库用来处理表格类型(也就是矩阵)的数据非常方便, 这个库用来在可视化之前对数据进行变换,计算和汇总之类的操作再好不过。 下面整理了最近我在做数据分析的短视频时常用的一些方法。 读取数据文件 做视频之前,我采集的数据都是用 csv 格式保存的,这里主要演示 pan 阅读全文
摘要:
数据来源 数据页面: 链家网南京(https://nj.lianjia.com/chengjiao/) 链家网数据量很大,这里只用南京的二手房成交数据。 如下图: 数据采集 链家网的页面数据比较整齐,采集很简单,为了避免影响别人使用,只采集的南京的二手房成交数据, 采集频率也很低,总共花了一下午才采 阅读全文
摘要:
概述 国家统计局的公开数据真实性强,宏观且与我们的生活息息相关。 因此,采集此数据作为数据分析实验的数据再好不过。 采集过程 采集各种公开数据的第一步就是分析网页。 上面的图是国家统计局年度数据的界面。 左边是数据分类的树形菜单,右边是每个菜单点击之后显示的数据,可以设置年份来过滤数据。 采集数据分 阅读全文
摘要:
概述 环境安装 设置是否自动启动 基本使用 创建环境 进入/退出环境 安装 python package 概述 使用 python 做数据分析,目前最方便和最流行的环境就是 Anaconda。 Anaconda 太重,刚开始学习使用 python 数据分析,还是觉得 Miniconda 更好一些。 阅读全文
摘要:
概述 常用视频编辑命令 视频截取 视频合并 剥离视频中的音频 视频加背景音乐 视频加水印(文字) 视频加水印(图片) 视频分辨率调整 概述 在短视频时代,虽然可以随手拍了就发,但是要想稍微制作点内容,视频的编辑是少不了的。 熟悉几条简单的命令,对于一些简单的需求不至于束手无策,也不用为了个简单的功能 阅读全文
摘要:
概述 实现方式 依赖的主要 package 前端页面 markdown 文件位置 实现效果 概述 markdown 文件虽然可以转成 html 文件再展示在浏览器中, 但多了一层转换总觉得有些麻烦,特别是对于需要频繁改动的 markdown 文件。 所以,这里探索了一种直接在 React 工程中显示 阅读全文
摘要:
目录 概述 https 证书的生成 第一步:下载证书生成软件 第二步:创建测试证书 第三步:导出证书 总结 https 证书在 gin 框架中的部署 构建简单的 web 服务 证书转换 改成 https 服务 概述 目前, https 几乎已经是 web 站点的标配了, http 的站点和服务少之又 阅读全文
摘要:
概述 通过 graphql 请求数据时, where条件是自己写在graphql请求字符串中的, 所以获取多少数据后端无法控制, 比如 { blogs(where: {user_id: {_eq: "xxxxxx"}}){ id title content user_id } } 通过 where 阅读全文
摘要:
在做 illuminant 这个开源项目之前, 一直在寻找一种能够满足以下要求的Web接口开发方式: 能够避免编写各种繁琐的业务接口 能够避免编写业务接口的测试代码 业务变化时, 能够方便的调整数据库(不用为了兼容之前的接口而各种hack, 弄的数据库字段乱七八槽) 尽量避免写各种数据库查询SQL 阅读全文