Loading

2021年12月25日
「机器学习算法的数学解析与Python实现」Logistic回归
摘要： Logistic回归：换上“S型曲线马甲”的线性回归 Logistic Regression = Linear Regression + Logistic(Sigmoid) Function 分类问题 分类问题根据要划分的类别数量，可分为： 二元分类（Binary Classification） 多 阅读全文
posted @ 2021-12-25 08:52 活用数据 阅读(296) 评论(0) 推荐(0) 编辑
「机器学习算法的数学解析与Python实现」线性回归
摘要： 机器学习一共有两条主线： 问题 模型 问题提出要求，模型给予解决。 线性回归 线性回归：用线性模型来解决回归问题。 线性回归的重点： 回归问题 线性方程 偏差度量 权重更新：优化方法 线性回归的算法原理 基本思路 机器学习的核心概念：在错误中学习。这需要两个步骤，首先知道偏离了多少，然后向减少偏差的 阅读全文
posted @ 2021-12-25 08:51 活用数据 阅读(201) 评论(0) 推荐(0) 编辑
2021年12月24日
「Python入门」模块和包
摘要： 模块和包 如果我们想在编写的代码里重用一些函数的话，就需要用到模块（Module），一个.py文件就称之为一个模块。 使用模块还可以避免函数名和变量名冲突，相同名字的函数和变量完全可以分别存在不同的模块中。为了避免模块名的冲突，Python又引入了按照目录来组织模块的方法，称为包（Package）。 阅读全文
posted @ 2021-12-24 21:44 活用数据 阅读(63) 评论(0) 推荐(0) 编辑
Airflow入门及安装
摘要： 参考： Airflow 入门及使用 官方文档 Airflow 是什么？ 使用Python语言编写的 data pipeline 调度和监控工作流的平台，是通过DAG（Directed acyclic graph 有向无环图）来管理任务流程的任务调度工具。 Airflow 解决哪些问题？ cronta 阅读全文
posted @ 2021-12-24 21:39 活用数据 阅读(974) 评论(0) 推荐(0) 编辑
爬虫基础原理
摘要： 爬虫基础概念 数据从何而来？ 数据有以下的一些来源途径： 企业产生的用户数据：百度指数、阿里指数、TBI腾讯浏览指数、新浪微博指数 数据平台购买数据：数据堂、国云数据市场、贵阳大数据交易所 政府/机构公开的数据：中华人民共和国国家统计局数据、世界银行公开数据、联合国数据、纳斯达克。 数据管理咨询公司 阅读全文
posted @ 2021-12-24 21:34 活用数据 阅读(245) 评论(0) 推荐(0) 编辑
正则表达式(Re库)入门
摘要： 正则表达式的概念 概念 正则表达式(regular expression，regex，RE)：是用来简洁表达一组字符串的表达式。 应用：最主要应用在字符串匹配。 使用 没编译前在Python中只是一个字符串，只有经过编译才是有效的表达式。 正则表达式的语法 常用操作符 正则表达式经典实例 匹配IP地 阅读全文
posted @ 2021-12-24 21:00 活用数据 阅读(403) 评论(0) 推荐(0) 编辑
「NLP」TF-IDF
摘要： 本文主要介绍了自然语言处理领域中文本表示的一个重要算法：TF-IDF算法。包括其基本概念，以及简单的代码实现。 TF-IDF概述 什么是TF-IDF？ 词频-逆文档频率（Term Frequency-Inverse Document Frequency，TF-IDF）是一种常用于文本处理的统计方法， 阅读全文
posted @ 2021-12-24 17:07 活用数据 阅读(93) 评论(0) 推荐(0) 编辑
「Redis入门」数据操作
摘要： redis是key-value的数据，所以每个数据都是一个键值对。 键的类型是字符串 值的类型分为五种 字符串string 哈希hash 列表list 集合set 有序集合zset String 字符串 简介 string是redis最基本的类型 最大能存储512MB数据 string类型是二进制安 阅读全文
posted @ 2021-12-24 09:44 活用数据 阅读(34) 评论(0) 推荐(0) 编辑
「Redis入门」Redis基本配置
摘要： redis的配置文件redis.conf存放在/usr/local/etc路径下。 是否以守护进程运行 如果以守护进程运行，则不会在命令行阻塞，类似于服务 如果以非守护进程运行，则当前终端被阻塞，无法使用 推荐改为yes，以守护进程运行 使用vim打开redis.conf文件，搜索到daemoniz 阅读全文
posted @ 2021-12-24 09:43 活用数据 阅读(114) 评论(0) 推荐(0) 编辑
「Redis入门」安装Redis
摘要： 参考资料：Mac安装Redis，原来就是这么简单 使用Hombrew安装命令 brew install redis 查看安装及配置文件 redis的配置文件redis.conf存放在/usr/local/etc路径下。 启动redis服务 redis-server 成功启动： 前台启动的话，只需要 阅读全文
posted @ 2021-12-24 09:42 活用数据 阅读(5) 评论(0) 推荐(0) 编辑