摘要：
Spark实现行列转换pivot和unpivot 背景 做过数据清洗ETL工作的都知道，行列转换是一个常见的数据整理需求。 首先明确一下啥叫行列转换，因为这个叫法也不是很统一，有的地方叫转置，有的地方叫透视，不一而足。我们就以下图为例，定义如下： 从左边这种变成右边这种，叫透视（pivot） 反之叫 阅读全文
摘要：
代码链接：https://github.com/bgshih/aster 方法概述 本文方法主要解决不规则排列文字的文字识别问题，论文为之前一篇CVPR206的paper（Robust Scene Text Recognition with Automatic Rectification，方法简称为 阅读全文
摘要：
出现Nan ： 原因有多种，需要注意的是，要保证训练数据中没有脏数据，如果在training sample中出现了脏数据，那么在固定的迭代次数段，都会loss突然变nan，导致acc骤降，慢慢变0 https://www.zhihu.com/question/49346370 https://blo 阅读全文
摘要：
Jupyter Notebook 的快捷键 Jupyter Notebook 有两种键盘输入模式。编辑模式，允许你往单元中键入代码或文本；这时的单元框线是绿色的。命令模式，键盘输入运行程序命令；这时的单元框线是灰色。 命令模式 (按键 Esc 开启) Enter : 转入编辑模式 Shift-Ent 阅读全文
摘要：
结果： 原文：https://blog.csdn.net/luoganttcc/article/details/80618336 PySpark 分类模型训练 参考： https://blog.csdn.net/u013719780/article/details/51792097 阅读全文
摘要：
VGG Image Annotator (VIA)是一款开源的图像标注工具，由Visual Geometry Group开发。 可以在线和离线使用，可标注矩形、圆、椭圆、多边形、点和线。标注完成后，可以导出为csv和json文件格式。 地址：http://www.robots.ox.ac.uk/~v 阅读全文
摘要：
前言 with 语句适用于对资源进行访问的场合，确保不管使用过程中是否发生异常都会执行必要的“清理”操作，释放资源， 比如文件使用后自动关闭／线程中锁的自动获取和释放等。 问题引出 如下代码： 上面代码存在２个问题： （１）文件读取发生异常，但没有进行任何处理； （２）可能忘记关闭文件句柄； 改进 阅读全文
摘要：
报错： SyntaxError: Non-ASCII character 概意思是，默认文件是ASCII格式，需要更改文件编码，操作是在文件首行加上 报错 ：TypeError: unicode argument expected, got 'str' if your environment is 阅读全文
摘要：
YOLO核心思想：从R-CNN到Fast R-CNN一直采用的思路是proposal+分类 （proposal 提供位置信息， 分类提供类别信息）精度已经很高，但是速度还不行。 YOLO提供了另一种更为直接的思路： 直接在输出层回归bounding box的位置和bounding box所属的类别( 阅读全文
摘要：
转载请注明：宁哥的小站 » Spark与Pandas中DataFrame对比（详细） 阅读全文