随笔分类 - Nifi
摘要：1. 备份copy 下面的文件到本地：conf/flow.xml.gz2. 恢复新安装一个nifi的环境，把这个文件copy到conf文件夹下运行nifi， 在界面上create template，然后再导出template在原来的nifi界面里导入template即可NIFI 中国社区 QQ群：595034369
阅读全文
摘要：1. 全景图.2. 用ListHDFS获取所有文件名如果想重新再取一次，右健view state：点击 clear state, 再运行，即可再次采集数据了。3. 用FetchHDFS 取出json 数据4. 用ExecuteScript 转换import org.apache.commons.io.IOUtilsimport java.nio.charset.*import jav...
阅读全文
摘要：NoIDNamePrice /month1equd沪深股票日行情2002idxd指数日行情503factorsOneDay获取多只股票历史上某一天的因子数据价格面议4optd期权日行情505futd期货日行情(主力以持仓量计算)1006blockd沪深大宗交易507mfutd期货主力、连续合约日行情1008limit涨跌停板幅度变动509repod债券回购交易日行情5010bond...
阅读全文
摘要：1. 全景图2. 用ExecuteScript生成动态日期参数为了只生成一个flowfile：Groovy 代码：import org.apache.commons.io.IOUtilsimport java.nio.charset.*import java.text.SimpleDateFormat;import java.lang.StringBuilder;import java....
阅读全文
摘要：Acqusition_and_Processing.xmlMoving templates to own directory to make repo cleanerCADF_Parser.xmlMoving templates to own directory to make repo cleaner6 months agoCassandraProcessors.xmlAdding te...
阅读全文
摘要：Authorization: Bearer Content_type: application/jsonNIFI 中国社区 QQ群：595034369
阅读全文
摘要：1. open terminal2. ssh root@nifi.webus.cn3. logscd /var/lib/nifi/logs4. view logtail -100f nifi-app.log5. configurationcd conflsvi bootstrap.confpress i for inserting,wq : write and quitq!: quit...
阅读全文
摘要：1. nifi服务器配置CPU：4核内存：7G2. 改动如下：nifi.provenance.repository.rollover.time=30 secs --> 36000 sec (10 hours)nifi.provenance.repository.query.threads=2 --> 1nifi.provenance.repository.compress.on.rollover...
阅读全文
摘要：1. 拖入一个GetHttp 的processor 右健选择 configure -》 properties ， 设置 url 和 filename url :http://svc.ccc.red/Test.csv filename: text.csv2. 拖入一个 PutHDFS 的processorHadoop Configuration Resources：conf/c...
阅读全文
