随笔分类 -  数据库

摘要:需求:从hive下拉数据,要合并多个数据(每组数据类别不同),如果要在构造数据集最终阶段随机打乱,可以使用pyspark的orderBy随机打乱 from pyspark.sql.functions import rand sql = "select * from abc.table1 limit 阅读全文
posted @ 2022-07-20 14:36 今夜无风 阅读(1120) 评论(0) 推荐(0) 编辑
摘要:记住一张图 阅读全文
posted @ 2022-06-16 22:16 今夜无风 阅读(14) 评论(0) 推荐(0) 编辑
摘要:最近将之前所做项目查阅的资料进行汇总,比较琐碎,希望有些知识点或者想法能帮助到你。 参考文献地址:https://blog.csdn.net/u011412768/article/details/93404921https://blog.csdn.net/a2639491403/article/de 阅读全文
posted @ 2022-01-20 10:09 今夜无风 阅读(391) 评论(0) 推荐(0) 编辑
摘要:对于表中的每一个记录,我们有时候需要提取特殊的或者你需要的记录,要提前做一个表的筛选,之后再对你选出的记录做一个修改,此时你必须使用SQL的子查询操作。如:修改id=5的记录的strContent字段信息。 代码: 阅读全文
posted @ 2018-09-11 11:06 今夜无风 阅读(260) 评论(0) 推荐(0) 编辑
摘要:Mysql中随机获取一行数据: SQLite中随机获取一行数据: limit后面跟你要随机生成多少的数据 阅读全文
posted @ 2018-09-11 10:34 今夜无风 阅读(4779) 评论(0) 推荐(1) 编辑
摘要:经过最近一段时间的实际工作发现,原来只是认为Mysql和sqlite是分别独立的,数据传输和共享或有障碍,其实这是一个误区。当我们想要将sqlite中的数据存放到mysql中,最好的方法就是利用中间文件.csv 两个数据库都能够导出.csv文件,我们将.csv文件修改为所需要的数据,然后导入到需要的 阅读全文
posted @ 2018-09-07 12:23 今夜无风 阅读(2079) 评论(0) 推荐(0) 编辑
摘要:mysql数据库的查询结果输出的是一个记录,这一个记录是以字典的形式存储的,所以获取字段时要用字典提取数据的形式获取字段信息: 查询的代码: 阅读全文
posted @ 2018-09-03 16:27 今夜无风 阅读(132) 评论(0) 推荐(0) 编辑
摘要:1.初步安装mysql,插入中文字符,出现的???的形式 终端提示: pymysql.err.InternalError: (1366, "Incorrect string value: '\\xE4\\xBD\\xA0\\xE5\\xA5\\xBD' for 2.参考博文: https://www 阅读全文
posted @ 2018-09-03 11:30 今夜无风 阅读(1648) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示