• 博客园logo
  • 会员
  • 周边
  • 新闻
  • 博问
  • 闪存
  • 众包
  • 赞助商
  • Chat2DB
    • 搜索
      所有博客
    • 搜索
      当前博客
  • 写随笔 我的博客 短消息 简洁模式
    用户头像
    我的博客 我的园子 账号设置 会员中心 简洁模式 ... 退出登录
    注册 登录
amyliushu
博客园 首页 新随笔 联系 订阅 订阅 管理

2017年8月18日

浅谈Key-value 存储——SILT
摘要: 摘要:本文以文章SILT: A Memory Efficient High Performance Key-Value Store 为基础,探讨SILT存储系统是如何实现内存占用低和高性能的设计目标,从SILT系统架构入手,依次简述系统的三个基本组成部分Logstore、Hashstore和SortedStore。 前言 现代操作系统提供了文件系统作为存取和管理信息的机构,文件的逻辑组... 阅读全文
posted @ 2017-08-18 13:48 amyliushu 阅读(13913) 评论(0) 推荐(1)
 
 

2017年8月17日

卷积神经网络的可视化与理解
摘要: ------人工智能飞速发展的势头已经不可小视,目前它的神秘仍然像一个black box,然而我们不妨大胆的预测,随着feature visualizing技术和方法的前进,真相大白的一天终会到来,本篇就是一个mark stone of the Amazing future of AI! ------- 近些年大规模的卷积神经网络模型在图片分类上取得了显著成果,然而对为什么会习得如此好的分类性能,... 阅读全文
posted @ 2017-08-17 15:47 amyliushu 阅读(4408) 评论(0) 推荐(0)
 
 

2017年8月4日

一个完整的网站记录(springmvc hibernate juery bootstrap)
摘要: 总述 该网站为了满足测试人员自主添加测试条目,编辑更新信息和删除信息,同时同步到后台数据库的基本功能。 关键技术:oracle数据库、tomcat8.5、springMVC、Hibernate、ajax Jquery,Jason和bootstrap等 下面的部分就是 我的一些个人在整个开发过程中的小总小节。 数据库部分:在服务器的oracle... 阅读全文
posted @ 2017-08-04 14:22 amyliushu 阅读(295) 评论(0) 推荐(0)
 
 

2017年5月26日

遗传算法
摘要: 起源(启发):达尔文进化论 遗传 突变 杂交 自然选择(优胜劣汰),跟 神经网络算法一样属于智能优化算法,不是基于专家意见的。 基本流程: 所以,遗传算法基本步骤是: 1) 初始化 t←0进化代数计数器;T是最大进化代数;随机生成M个个体作为初始群体,记为P(t); 2) 个体评价 计算P(t)中各个个体的适应度... 阅读全文
posted @ 2017-05-26 10:42 amyliushu 阅读(674) 评论(0) 推荐(0)
 
 

2017年5月24日

对比hive和mysql查询汇总
摘要: 由于底层的处理机制大不相同,hive和mysql在查询上还是有较大差异的! 最简单的查询 .带in关键字查询:select 字段1,字段2 frome 表名 where 字段 [not]in(元素1,元素2); .带in关键字查询:select 字段1,字段2 frome 表名 where 字段 [ 阅读全文
posted @ 2017-05-24 16:36 amyliushu 阅读(9971) 评论(0) 推荐(0)
 
对比hive和mysql 复杂逻辑流处理
摘要: 1.Mysql中可用存储过程和函数来实现复杂逻辑处理,两者的对比如下:存储过程作为可执行文件,编译一次放在数据库中,函数又返回值。可设定使用权限。 存储过程中可使用游标,声明变量。用call调用。 2.Hive可用udf(user defined function)来实现复杂逻辑处理 编辑Python脚本 常用的Python字符串分割处理函数有:split 等等 加载udf... 阅读全文
posted @ 2017-05-24 16:13 amyliushu 阅读(1450) 评论(0) 推荐(0)
 
 

2017年5月19日

Sqoop hive 和mysql 交互 完整案例
摘要: 本文完成:在hive里建管理表;注入部分数据;利用sqoop导入mysql中 期间:解决中文乱码问题 飞行报告故障表 建表命令 查看表 人工灌入少量数据 Windows系统向Linux系统数据传输 解决中文乱码问题 1)显示终端xshell 属性里修改为utf-8 编码格式 2)源文本文件编辑为utf-8格式 3)修改fileform... 阅读全文
posted @ 2017-05-19 15:53 amyliushu 阅读(804) 评论(0) 推荐(0)
 
 

公告


博客园  ©  2004-2026
浙公网安备 33010602011771号 浙ICP备2021040463号-3