sowhat1412

摘要：原文linkCypher 是借鉴了sql语句的 Neo4j 数据库操作语句，MATCH:匹配图模式,从图中获取数据的常见方式WHERE:不是独立的语句,而是MATCH,OPTION MATCH 和 WITH 的... 阅读全文

posted @ 2019-07-23 11:38 sowhat1412 阅读(200) 评论(0) 推荐(0) 编辑

摘要： mysql在存在主键冲突或者唯一键冲突的情况下，根据插入策略不同，一般有以下三种避免方法。1、insert ignore2、replace into3、insert on duplicate key update... 阅读全文

posted @ 2019-07-23 10:06 sowhat1412 阅读(324) 评论(0) 推荐(0) 编辑

摘要：浅谈FTP，FTP官方文档# FTP操作import ftplibhost = '192.168.20.191'username = 'ftpuser'password = 'ftp123'file = '1.... 阅读全文

posted @ 2019-07-23 09:39 sowhat1412 阅读(160) 评论(0) 推荐(0) 编辑

摘要：导入参考，neo4j 导入数据同时制定database的思路 --> link，官方导入demo sh pwd/bin/neo4j-import --into graph.db --nodes "pwd_... 阅读全文

posted @ 2019-07-19 09:49 sowhat1412 阅读(201) 评论(0) 推荐(0) 编辑

摘要： jupyter_contrib_nbextension是Jupyter Notebook的一个扩展插件，里面集成了很多扩展功能，但是按照网上方法安装配置后，打开notebook总是未显示Nbextensions的... 阅读全文

posted @ 2019-07-08 19:32 sowhat1412 阅读(512) 评论(0) 推荐(0) 编辑

摘要： line_profiler使用装饰器(@profile)标记需要调试的函数.用kernprof.py脚本运行代码,被选函数每一行花费的cpu时间以及其他信息就会被记录下来。安装pip3 install Cpyth... 阅读全文

posted @ 2019-07-08 16:04 sowhat1412 阅读(782) 评论(0) 推荐(0) 编辑

摘要： Hive的自定义的函数的步骤:1°、自定义UDF extends org.apache.hadoop.hive.ql.exec.UDF2°、需要实现evaluate函数，evaluate函数支持重载3°、把程序打... 阅读全文

posted @ 2019-07-07 13:56 sowhat1412 阅读(168) 评论(0) 推荐(0) 编辑

摘要：分区简介为了避免Hive每次查询都扫描整个文件，除了采用索引的方式外，还可以通过建立分区表。分区表是指在创建表的时候指定的partition的分区空间，这样在查找分区的数据时，就不用扫描所有数据文件，只需要扫描指... 阅读全文

posted @ 2019-07-07 10:29 sowhat1412 阅读(127) 评论(0) 推荐(0) 编辑

摘要：交流中发现很多hive转行的开发者都不是特别清楚，hive既然是数据仓库，那为什么还需要mysql数据库，还需要hdfs呢，熟悉三者之间的关系是作为一个合格的hive数据仓库开发者必须掌握的技能通俗理解：my... 阅读全文

posted @ 2019-07-06 11:53 sowhat1412 阅读(730) 评论(0) 推荐(0) 编辑

摘要：元数据：本质上只是用来存储hive中有哪些数据库，哪些表，表的模式，目录，分区，索引以及命名空间。为数据库创建的目录一般在hive数据仓库目录下。在安装Hive时，需要在hive-site.xml文件中配置元数据... 阅读全文

posted @ 2019-07-06 11:52 sowhat1412 阅读(550) 评论(0) 推荐(0) 编辑

公众号：sowhat1412 海量资源等你来