随笔分类 -  Thrift

大数据基础之Hive（1）Hive SQL执行过程之代码流程
摘要：hive 2.1 hive执行sql有两种方式： 执行hive命令，又细分为hive -e，hive -f，hive交互式； 执行beeline命令，beeline会连接远程thrift server； 下面分别看这些场景下sql是怎样被执行的： 1 hive命令 启动命令 启动hive客户端命令 阅读全文
posted @ 2018-12-27 15:19 匠人先生 阅读(3624) 评论(0) 推荐(0) 编辑
大叔问题定位分享（18）beeline连接spark thrift有时会卡住
摘要：spark 2.1.1 beeline连接spark thrift之后，执行use database有时会卡住，而use database 在server端对应的是 setCurrentDatabase， 经过排查发现当时spark thrift正在执行insert操作， org.apache.sp 阅读全文
posted @ 2018-12-19 19:38 匠人先生 阅读(922) 评论(0) 推荐(0) 编辑
大数据基础之Spark（3）Spark Thrift实现原理及代码实现
摘要：spark 2.1.1 一 启动命令 启动spark thrift命令 $SPARK_HOME/sbin/start-thriftserver.sh 然后会执行 org.apache.spark.deploy.SparkSubmit --class org.apache.spark.sql.hive 阅读全文
posted @ 2018-12-18 15:54 匠人先生 阅读(3451) 评论(0) 推荐(1) 编辑

点击右上角即可分享
微信分享提示