摘要: 在服务器上使用 keras 对数据进行训练完成后,通过 save 的方法将模型保存成对应的 xxxxx.h5 文件,将对应的 h5 文件拷贝到 windows 下面的时候通过 load 命令加载却报错。 报错如下: keras load_model ValueError: Unknown initi 阅读全文
posted @ 2020-07-08 16:35 听~雨 阅读(2280) 评论(0) 推荐(1) 编辑
摘要: windows 10 下面安装tensorflow gpu版本和pycharm中使用 阅读全文
posted @ 2020-07-01 13:54 听~雨 阅读(2847) 评论(0) 推荐(2) 编辑
摘要: (pymysql.err.OperationalError) (2006, "MySQL server has gone away (BrokenPipeError(32, 'Broken pipe') 阅读全文
posted @ 2020-05-07 16:36 听~雨 阅读(3885) 评论(0) 推荐(0) 编辑
摘要: 一个NLP从业者,数据标注是重要的一环。有钱的金主自然可以花钱找人标注,不过很多小公司,学校研究室或者个人研究者并没有这样的富裕。但是自己手动标注的话又实在花时间,开发一个Web标注系统又比较麻烦。如果你也有这样的烦恼,放心吧,doccano就是你的贴心小帮手。 阅读全文
posted @ 2020-04-24 15:25 听~雨 阅读(1759) 评论(0) 推荐(0) 编辑
摘要: Stanza 包含了 60 多种语言模型,在 Universal Dependencies v2.5 数据集上进行了预训练。这些模型包括简体、繁体、古文中文,英语、法语、西班牙语、德语、日语、韩语、阿拉伯语等,甚至还有北萨米语等不太常见的语言。 阅读全文
posted @ 2020-04-22 10:13 听~雨 阅读(2179) 评论(0) 推荐(0) 编辑
摘要: 使用 Pycharm 使,需要下载相关的第三方包,结果提示安装失败,提示要升级 pip 版本,但是通过 Pycharm 重新安装却失败,原因可能是出在通过 Pycharm 时升级 pip 是没有权限的,所以一般在 Pycharm 中升级的时候会失败。如图所示,当点击右边新版本升级的时候,一般不会成功 阅读全文
posted @ 2019-09-06 22:07 听~雨 阅读(2930) 评论(0) 推荐(0) 编辑
摘要: 从报错来看,是由于缺少一些包导致的,经过搜索发现是由于 log4j 的版本导致的,打包的时候使用的版本是 1.2.15,发现将其升到 1.2.16 还是不行,但是升级到 1.2.17 就没有这个问题了。 换成 1.2.17 是一种解决办法。另外还可以找到对应的 jar 放到库里面。最后一种办法就是在 阅读全文
posted @ 2019-08-08 23:17 听~雨 阅读(1358) 评论(0) 推荐(0) 编辑
摘要: Spark-Streaming DirectKafka count 统计跟直接 kafka 统计类似,只不过这里使用的是 Direct 的方式,Direct方式使用的 kafka 低级API,不同的地方主要是在 createDirectStream这里。 统计代码如下 启动相关的 flume,kaf 阅读全文
posted @ 2019-07-28 19:04 听~雨 阅读(253) 评论(0) 推荐(0) 编辑
摘要: Streaming 统计来自 kafka 的数据,这里涉及到的比较,kafka 的数据是使用从 flume 获取到的,这里相当于一个小的案例。 1. 启动 kafka 2. 启动 flume flume 配置文件如下 这里 flume 是的数据是来自一个文件,只要这个文件有数据进入,就会被flume 阅读全文
posted @ 2019-07-28 19:00 听~雨 阅读(602) 评论(0) 推荐(0) 编辑
摘要: Streaming hdfs count 需要先启动 hadoop 集群。 hadoop 启动成功之后,下面就是关于 stream 的代码,stream 统计代码如下,将下面的代码进行打包,上传到服务器上即可。 代码需要传递两个参数,一个是 stream 监控的数据输入目录,一个是输出目录。对应的执 阅读全文
posted @ 2019-07-28 18:41 听~雨 阅读(413) 评论(0) 推荐(0) 编辑