摘要： 例子： 1. 日期格式为年月日：20201010110833 SELECT unix_timestamp(to_date('20201010110833', 'yyyymmddhhmiss'))*1000; 结果：1602299313000 2. SELECT FROM_UNIXTIME(16023 阅读全文

摘要： msck repair table 库名.表名; 报错 FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask 处理办法： set hive.msck.path.validation=ign 阅读全文

摘要： 例如存在特殊符号分区: stat_date=$%7Bhivevar%3Astat_date} 删除方式： ALTER TABLE tablename DROP PARTITION (stat_date='${hivevar:stat_date}'); 阅读全文

摘要： hive语法报错 阅读全文

摘要： hive grouping sets 阅读全文

摘要： 这是一个python写的基于scrapy框架的爬虫项目，项目代码可以运行，具体实例请见github https://github.com/zhouxinlin3482107/python-scrapy-crawler 如果觉得给你启发或者帮助你了请给一个star， 谢谢 阅读全文

摘要： hive函数的分类 hive的客户端 显示当前会话有多少函数可用 SHOW FUNCTIONS; 如： hive> show functions ;OK!!=% 显示函数的描述信息 DESC FUNCTION concat; 如： hive> DESC FUNCTION concat;OKconca 阅读全文

摘要： Java序列化是指把Java对象转换为字节序列的过程；而Java反序列化是指把字节序列恢复为Java对象的过程。 当JAVA进程之间进行通信时，如果想实现进程间的对象传送，就需要JAVA序列化与反序列化了，即发送方需要把这个JAVA对象转换为字节序列，然后在网络上传送；另一方面，接收方需要从字节序列 阅读全文

摘要： Java中&，&&表示的是与的意思，区别是&要对&两边的条件都进行判断，而&&先判断左边的第一个条件，若第一个条件不满足，则不进行&&右边条件的判断，若&&左边的条件满足，则继续判断&&右边的条件。 代码示例如上，此处运行结果为：未通过。若将&&换为&运行，此处代码将会报错：“Exception i 阅读全文

摘要： java集合类存放于java.util包中，集合类存放的都是对象的引用，而非对象本身，出于表达上的便利，我们称集合中的对象就是指集合中对象的引用，集合类型主要有3种：set(集）、list(列表）和map(映射)。 Java API中所用的集合类，都是实现了Collection接口，它的一个类继承结 阅读全文