spark org.apache.spark.ml.linalg.DenseVector cannot be cast to org.apache.spark.ml.linalg.SparseVector
摘要：
在使用 转换特征后，想要放入 去训练的时候出现错误： 修改如下： 阅读全文
posted @ 2019-07-05 10:13 TTyb 阅读(2062) 评论(0) 推荐(2) 编辑
【机器学习】算法原理详细推导与实现(三):朴素贝叶斯
摘要：
【机器学习】算法原理详细推导与实现(三):朴素贝叶斯 在上一篇算法中，逻辑回归作为一种二分类的分类器，一般的回归模型也是是判别模型，也就根据特征值来求结果概率。形式化表示为 \(p(y|x;\theta)\)，在参数 \(\theta\) 确定的情况下，求解条件概率 \(p(y|x)\) 。通俗的解 阅读全文
posted @ 2019-07-05 10:09 TTyb 阅读(2223) 评论(0) 推荐(0) 编辑
【机器学习】算法原理详细推导与实现(二):逻辑回归
摘要：
【机器学习】算法原理详细推导与实现(二):逻辑回归 在上一篇算法中，线性回归实际上是 连续型 的结果，即 \(y\in R\) ，而逻辑回归的 \(y\) 是离散型，只能取两个值 \(y\in \{0,1\}\)，这可以用来处理一些分类的问题。 logistic函数 我们可能会遇到一些分类问题，例如 阅读全文
posted @ 2019-06-25 10:19 TTyb 阅读(2073) 评论(4) 推荐(2) 编辑
【机器学习】算法原理详细推导与实现(一):线性回归
摘要：
【机器学习】算法原理详细推导与实现(一):线性回归 今天我们这里要讲第一个有监督学习算法，他可以用于一个回归任务，这个算法叫做 线性回归 房价预测 假设存在如下 组房价数据： | 面积(m^2)| 价格(万元) | |: :|: :| | 82.35 | 193 | | 65.00 | 213 | 阅读全文
posted @ 2019-06-13 10:49 TTyb 阅读(1941) 评论(3) 推荐(3) 编辑
Python3 打包exe
摘要：
cx_Freeze（不推荐） 以前只用 支持将 打包成 ，示例如下： 在你要打包的 文件下新建这个 文件： 然后在当前命令行执行： 这时候会在当前目录下生成一个 文件，里面就有一个 注意： cx_Freeze 打包回忽略依赖文件，所有一般依赖文件要手动从 site packge 里面拷贝到build 阅读全文
posted @ 2019-05-13 10:40 TTyb 阅读(1818) 评论(0) 推荐(0) 编辑
基于漫威系列电影好看程度排序
摘要：
引申问题 在选择电影时，如果热门电影A有 人观众打分，冷门电影B有 个人打分，他们的豆瓣评分都是 分，怎么比较两部电影的好坏？平时我们都有一种感觉，很多人去评价，这个东西就更可信，只有一两个人说好，可能是托，那么感觉上是电影A更好。 再例如《漫威》系列电影中，距离《复仇者联盟4》上映一周，豆瓣分都是 阅读全文
posted @ 2019-04-29 11:18 TTyb 阅读(3720) 评论(0) 推荐(5) 编辑
淘宝天猫商品库存抓取分析
摘要：
昨天收到公众号粉丝的爬虫需求： 因此花费两天时间抓取完成，基于 抓取， 可视化页面查看，目前支持网页可视化查看： 用途 实时监控竞品销量： 使用方式 下载代码 首先在我的 上面下载该项目的代码，项目地址为： "tbtmStore" 代码的结构路径为： static bootstrap.min.css 阅读全文
posted @ 2019-04-19 18:30 TTyb 阅读(5359) 评论(3) 推荐(0) 编辑
flask下载excel
摘要：
`flask` 应用的基本结构： 将 "bootstrap.min.css" 放到 文件夹下，在 文件夹下新建 ，里面写入如下信息： 在 中写入如下内容： 运行在浏览器访问 "127.0.0.1:88" 可以看到新建的页面，在页面访问 "127.0.0.1/download" 可以下载生成的 : 阅读全文
posted @ 2019-03-28 16:22 TTyb 阅读(933) 评论(0) 推荐(0) 编辑
DataFrameNaFunctions无fill方法
摘要：
当我使用 ，为了填补 里面的 值转换为 ，代码如下所示： 出现如下错误 : 原来在 版本暂时不支持 写法，因此查询众多方式得到解决： 阅读全文
posted @ 2019-03-06 09:56 TTyb 阅读(722) 评论(0) 推荐(0) 编辑
零基础如何做一个不花钱的个人网站？
摘要：
很多网友在后台留言，或者私聊作者有关于作者独立博客是怎么做的，想要作者写一篇教程关于建立独立博客的，由此开始准备建立独立博客的教程。 在 世纪流量为主，作者的博客至今为止也就才建立 年，如今已累计有 个的 访问过，更是建立了自己独有的品牌。如果你在百度上面搜索 ，排名前面的位置都是关于作者的博客。 阅读全文
posted @ 2019-01-04 09:42 TTyb 阅读(1112) 评论(8) 推荐(0) 编辑
pyspark列合并为一行
摘要：
将 dataframe 利用 pyspark 列合并为一行，类似于 sql 的 GROUP_CONCAT 函数。例如如下 dataframe : + + + | s| d| + + + |abcd|123| | asd|123| + + + 需要按照列相同的列 d 将 s 合并，想要的结果为： + 阅读全文
posted @ 2018-12-29 16:09 TTyb 阅读(3005) 评论(0) 推荐(0) 编辑
链家二手房楼盘爬虫
摘要：
前言 想看下最近房价是否能入手，抓取链家 二手房 、 新房 的信息，发现广州有些精装修 88平米 的 3房2厅 首付只要 万！平均 万/平： 查看请求信息 本次用的是火狐浏览器32.0配合 和 使用，基于 环境，前期步骤： 1. 首先打开 浏览器，清除网页所有的历史纪录，这是为了防止以前的 影响服务 阅读全文
posted @ 2018-12-24 11:20 TTyb 阅读(2758) 评论(6) 推荐(3) 编辑
hive删除表和表中的数据
摘要：
hive删除表和表中的数据，以及按分区删除数据 hive删除表： hive删除表中数据： hive按分区删除数据： 阅读全文
posted @ 2018-12-14 11:42 TTyb 阅读(17848) 评论(0) 推荐(1) 编辑
csdn阅读更多需要注册登录csdn
摘要：
csdn目前设置每日使用5次后必须登录才能看到阅读更多的内容，异常恶心。因此搜罗了方法去解决这个问题 方法一 打开想看的 后，在 里边执行以下代码： 方法二： 在如下网址下载 并安装，目前测试只能用于 : "GreasFork" 阅读全文
posted @ 2018-12-04 10:27 TTyb 阅读(544) 评论(0) 推荐(0) 编辑
