阿飞飞飞

学而时习之

导航

公告

2022年1月12日 #

关于PowerDesigner导入脚本无法查看注释的解决方法

摘要：最近由于工作原因，需要在PowerDesigner上导入一批表，便于查看表之间关联关系，出现了无法显示字段注释的问题，记录一下避免下次再碰上...... 直入主题，解决步骤如下： 1.在项目空间中新建库，导入建表脚本（File-->Reverse Engineer-->Database 再导入脚本）阅读全文

posted @ 2022-01-12 20:21 阿飞飞飞阅读(616) 评论(0) 推荐(0) 编辑

2021年8月19日 #

mongodb远程连接出现com.mongodb.MongoSocketOpenException: Exception opening socket的问题

摘要： com.mongodb.MongoSocketOpenException: Exception opening socket??? 远程连接MongoDB出现连接不上的情况如下： Exception in thread "main" com.mongodb.MongoTimeoutException 阅读全文

posted @ 2021-08-19 21:45 阿飞飞飞阅读(5225) 评论(0) 推荐(0) 编辑

2021年4月25日 #

hive——Error: Error while processing statement: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaExcColumn length too big for column 'TYPE_NAME' (max = 21845)

摘要：工作太忙，隔了好久的HIVE没玩，捡起来重新学习下，建表出现错误如： Error: Error while processing statement: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec 阅读全文

posted @ 2021-04-25 21:48 阿飞飞飞阅读(4192) 评论(0) 推荐(0) 编辑

2021年2月7日 #

mysql慢查询

摘要： 1、慢查询的作用慢查询可以用于记录一些查询较慢的SQL语句，帮助我们后面分析问题所在，并为我们的SQL提供优化来节约资源，但是开启慢查询或多或少会带来一定的性能影响。 2、慢查询的相关参数 slow_query_log：是否开启慢查询日志，1表示开启，0表示关闭 slow_query_log_fi 阅读全文

posted @ 2021-02-07 16:12 阿飞飞飞阅读(226) 评论(0) 推荐(0) 编辑

2020年12月28日 #

VMware下的虚拟机扩容方式

摘要： VMware虚拟机中配置（1）进入虚拟机设置界面，选择扩展磁盘容量。（2）本次是在原来30G的基础上扩展为50G。（3）成功后发现提示，必须从客户机操作系统内部对磁盘重新进行分区和扩展文件系统，因此需要进入linux系统继续进行配置，这里配置是不会生效的。 Linux中设置进入Linux系阅读全文

posted @ 2020-12-28 23:58 阿飞飞飞阅读(2509) 评论(0) 推荐(0) 编辑

2020年12月24日 #

python环境下使用pyspark读取hive表

摘要： python环境导入pyspark.sql 1.linux系统下,spark读取hive表配置文件：先将hive-site.xml放入linux spark内的conf内 //hive和linux下的spark连接将jar包 mysql-connector-java.jar放入linux s 阅读全文

posted @ 2020-12-24 12:26 阿飞飞飞阅读(5039) 评论(0) 推荐(1) 编辑

2020年11月13日 #

hive集成hbase——FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask错误的解决办法

摘要：问题：FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask 情景：将hbase内建的宽表映射到hive内，出现报错... 版本：使用的是hadoop三大版本中的CDH，hive:hive- 阅读全文

posted @ 2020-11-13 00:43 阿飞飞飞阅读(1890) 评论(0) 推荐(0) 编辑

2020年11月9日 #

hadoop生态圈安装脚本

该文被密码保护。阅读全文

posted @ 2020-11-09 22:39 阿飞飞飞阅读(1) 评论(0) 推荐(0) 编辑

2020年11月7日 #

机器学习——随机森林和极限森林

摘要：随机森林在机器学习中，随机森林是一个包含多个决策树的分类器，其中每个决策树之间互不关联，其输出的类别是由个别树输出的类别的众数而定。算法步骤：对于N个训练样例，有M个特征，对于每一个决策树来说，都选取m个特征数目，其远远小于M，用来确定每一个决策树上一个节点的决策结果，从训练样例上有放回抽样，阅读全文

posted @ 2020-11-07 20:15 阿飞飞飞阅读(756) 评论(0) 推荐(0) 编辑

机器学习——决策树

摘要：决策树是一种用于分类和回归的有监督学习方法——预测模型该方法是在已知各种情况发生概率的基础上，通过构成决策树来求取净现值大于0的概率，树中的每一个节点表示某个对象，而每一个分叉路代表某个可能的属性值，而每一个叶节点则对应的是从根节点到该叶节点所经历的路径所表示的对象的值。例如：决策树解决相亲问题阅读全文

posted @ 2020-11-07 19:35 阿飞飞飞阅读(113) 评论(0) 推荐(0) 编辑