python读取文件数据导入到hbase
from thrift import Thrift from thrift.transport import TSocket from thrift.transport import TTransport from thrift.protocol import TBinaryProtocol from hbase import Hbase from hbase.ttypes import * import re import sys import time current_row=0 transport = TSocket.TSocket('192.168.106.36', 9090) transport = TTransport.TBufferedTransport(transport) protocol = TBinaryProtocol.TBinaryProtocol(transport) client = Hbase.Client(protocol) transport.open() startTime = time.time() print str(startTime) file1 = open("/data/tmp_data/sqlunload/cmmb/1111.txt", "r") while True: line=file1.readline() if line: line=line.strip('\n') m=re.split("[,]",line) mutations = [Mutation(column = "cf1:finishTime", value =m[1]), Mutation(column = "cf1:requestLine", value =m[2]), Mutation(column = "cf1:returnCode", value = m[3])] client.mutateRow('employees', m[0], mutations, None) current_row = current_row + 1 else : break endTime = time.time() print str(endTime) print "total insert rows:" + str(current_row) print "cost time:" + str(endTime - startTime)
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· SQL Server 2025 AI相关能力初探
· Linux系列:如何用 C#调用 C方法造成内存泄露
· AI与.NET技术实操系列(二):开始使用ML.NET
· 记一次.NET内存居高不下排查解决与启示
· 探究高空视频全景AR技术的实现原理
· 阿里最新开源QwQ-32B,效果媲美deepseek-r1满血版,部署成本又又又降低了!
· AI编程工具终极对决:字节Trae VS Cursor,谁才是开发者新宠?
· 开源Multi-agent AI智能体框架aevatar.ai,欢迎大家贡献代码
· Manus重磅发布:全球首款通用AI代理技术深度解析与实战指南
· 被坑几百块钱后,我竟然真的恢复了删除的微信聊天记录!