08 2019 档案
摘要：1.备份TETST111hbase org.apache.hadoop.hbase.mapreduce.Export TEST111 /do1/hh2.drop 掉test111表 -- 只能drop，不能delete -- 坑3.重新创建表create table test111 (id varc
阅读全文
摘要：1.在测试环境 hbase 全部集群的 hbase-site.xml 配置文件都加上这个配置，开启phoenix命名空间的自动映射 2.在测试环境在hbase集群内的 sqlline 客户端执行一下 3.打开namespace映射，对原来没有做namespace映射的应用是否有影响？
阅读全文
摘要：1.表象 2.深究原因，找到日志在 参考：https://yq.aliyun.com/articles/630486 http://hbase.group/question/200
阅读全文
摘要：1.hadoop的内存配置调优 mapred-site.xml的内存调整 <property> <name>mapreduce.map.memory.mb</name> <value>1536</value> </property> <property> <name>mapreduce.map.ja
阅读全文
摘要：1.pd.read_csv()函数中parse_dates()参数
阅读全文
摘要：1.在pycharm里，有安装组件的方法，进入 File - Setting - Project:StockMarket - Project InterPreter，在右边点击“+”，进入搜索页面，搜索到就可以点击左下的Install Package进行安装。 2.脚本的名称叫tushare.py,
阅读全文
摘要：0.demo关键 1.关键信息，不能用5.1.6版本的，还有很多坑 2.简单理解： 标准运维实际上调用作业平台job的API去执行 要跑通标准运维，可以先在job上跑通，比如设置在远程服务器执行的用户 3.参考官方文档：https://docs.bk.tencent.com/bkce_install
阅读全文
摘要：1.利用Beautiful Soup去抓取p标签下class=jstest的内容 参考：http://www.showerlee.com/archives/2109 利用Beautiful Soup+Pandas+Pyqt5+Selenum进行python爬虫
阅读全文
摘要：1.getopts的经典例子 参考例子： https://www.cnblogs.com/klb561/p/8933992.html 2.如果目录不存在，就创建
阅读全文
摘要：1.表象：在部署蓝鲸JOB过程中需要进行RabbitMQ的安装，数据初始化，激活步骤，此问题多发生在此过程 参考：https://docs.bk.tencent.com/bkce_maintain_faq/component/rabbitmq.html 2.数据流向
阅读全文
摘要：1.类似zabbix的zabbix_get的工具来排错 在bkdata机器执行 /data/bkce/bkdata/dataapi/bin/check_databus_status.sh 若是这些均为空，没有信息输出，则 bkdata机器执行 supervisorctl -c /data/bkce/
阅读全文
摘要：0.添加一个索引 1.查询所有索引 2.查询所有文档 参考：https://www.codercto.com/a/66299.html
阅读全文
摘要：1.dstat dstat -lrpm --top-io --top-mem --top-cpu 2.安装 yum -y install dstat 1. ulimit的配置不起作用 #临时修改，立刻生效 ulimit -n 655350 #永久修改 echo "* soft nofile 6553
阅读全文
摘要：2、创建仓库 备份数据之前，要创建一个仓库来保存数据，仓库的类型支持Shared filesystem, Amazon S3, HDFS和Azure Cloud。下面以文件系统为例 3、备份索引 如果只想备份部分索引的话，可以加上indices 参数： 5 、查看备份信息 参考：https://ww
阅读全文
摘要：1.组件版本信息 zookeeper hadoop hbase hue zookeeper-3.4.12 hadoop-3.0.3 hbase-2.1.5 4.4.0 2.hbase的配置 hue关键要添加thrift服务，才能监听9090端口 <?xml version="1.0"?> <?xml
阅读全文
