摘要: sqoop 是什么? sqoop 主要用于异构数据: 1. 将数据从hadoop,hive 导入、导出到关系型数据库mysql 等; 2. 将关系型数据库 mysql 中数据导入、导出到 hadoop 、hve 。 sqoop 版本说明 sqoop 1 版本主要从1.4.0 到 1.4.7;sqoo 阅读全文
posted @ 2020-02-17 17:25 zyv 阅读(200) 评论(0) 推荐(0) 编辑
摘要: 语音识别:是以语音为研究对象,通过语音信号处理和模式识别让机器自动识别和理解人类口述的语。语音识别技术就是让机器通过识别和理解过程把语音信号转变为相应的文本或命令的高技术。 语音识别应用业务场景特点: 1. 离线 /在线(又称实时) 在线对网络要求高,存在丢数据情况,非业务数据可容忍. 2. 长语音 阅读全文
posted @ 2020-02-17 17:20 zyv 阅读(392) 评论(0) 推荐(0) 编辑
摘要: 近日,由360和无糖信息联合推出的新型肺炎确诊患者相同行程查询工具,可以方便查询哪些交通工具有已经确诊的病毒感染患者。该工具的数据来源均人工搜集自经确认的官方公众号/微博/网站,并通过人工智能大数据平台,不断学习矫正,确保数据信息安全可靠。 使用方法:输入行程日期、车次或地区,即可查询是否为已披露有 阅读全文
posted @ 2020-01-30 12:28 zyv 阅读(909) 评论(0) 推荐(0) 编辑
摘要: 版本说明 Finchley SR2 价值简要 微服务之间是松耦合,跨不同业务部门,提供非常充分的灵活性,加快项目开发完成效率,方便组件化独立可扩展性及复用. 微服务应用结构表现 组件简要 1. Eureka(注册中心) 提供服务注册与发现,服务端依赖spring-cloud-starter-netf 阅读全文
posted @ 2019-03-09 10:31 zyv 阅读(213) 评论(0) 推荐(0) 编辑
摘要: 什么是Flume ApacheFlume是一个分布式的、可靠的、可用的系统,用于高效地收集、聚合和将大量来自不同来源的日志数据移动到一个集中的数据存储区。 系统要求 1. JDK 1.8 或以上版本 2. 内存、磁盘 空间充足 3. 代理使用的目录有读写权限 数据流动模型 数据源Source支持多种 阅读全文
posted @ 2019-03-09 10:20 zyv 阅读(394) 评论(0) 推荐(0) 编辑
摘要: Redis 是用C语言编写的内存中的数据结构存储系统,可以用来作数据库、缓存、消息中间件. 数据结构 字符串(strings):值是任何种类的字符串 散列(hashs):值是map 字典,数组+链表,不管读多还是写多都能很好的性能 列表(lists):链表或队列或栈 集合(sets):无序集合,可用 阅读全文
posted @ 2019-03-09 10:07 zyv 阅读(126) 评论(0) 推荐(0) 编辑
摘要: “数据”是一个公司的核心资产,数据丢失或不可用则将是一个严重事故。如何做到高可用,其实三个核心点: 冗余,可用,扩容 冗余一般都是复制机制将数据分发在不同的机器上,保证数据非单点存储 可用保证服务不中断,当master挂了,能自动切到salve 上 扩容一般当数据存储容量不足,可通过分片或分区来往外 阅读全文
posted @ 2018-09-08 12:13 zyv 阅读(211) 评论(0) 推荐(0) 编辑
摘要: 【快来看,属于我们程序员自己的歌】 清晨,烟雨朦朦,又一夜,不知疲倦,只为那心中亮光,走过多少的岁月,冥冥中早已牵手注定,每次的滴答滴答声,激动之情,越过了那一抹彩虹。(旁白:昨天加班很晚,早上又要开始新的码代码) 午间,蓝蓝天空,得与失,尽在指尖,律动的字母专注于眼前,不要想什么运气,执行结果是唯 阅读全文
posted @ 2018-08-11 11:28 zyv 阅读(419) 评论(1) 推荐(1) 编辑
摘要: 对于Web系统开发来说,Net其实也是有好多知识点需要学的,虽然目前JAVA是主流,就业市场比较大,但Net也在积极的拥抱开源,大Net Core 2 出来了,这无疑给Net开发者带来更大的希望,好了,以下是自己画的知识图,给正在找工作的自己一个时间梳理下,同时也希望给你带来些许帮助,第一次画并鉴于 阅读全文
posted @ 2017-10-06 14:40 zyv 阅读(7063) 评论(24) 推荐(53) 编辑
摘要: 简介 SignalR 是微软的 http 长连接(以下简称长连接)框架,它的出现为我们提供了一套行之有效的实时通信的解决方案.背景 在http 1.0 时代,preRequest 都会建立新的tcp链接,如果高并请求情况下,抛开其它影响因素(比如服务端的IO操作,db操作等),其实是比较... 阅读全文
posted @ 2014-12-08 11:03 zyv 阅读(978) 评论(0) 推荐(1) 编辑