摘要: 此文已由作者肖乃同授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 代数数据类型是指满足一定数学特性的数据类型, 这些特性使得计算能够很方便的并行化,在Scalding和 Spark等数据计算框架中有着广泛的应用。代数数据类型是一个通用的概念, 其实现不限于Algebird, 阅读全文
posted @ 2018-10-29 16:55 tianshidan1998 阅读(278) 评论(0) 推荐(0) 编辑
摘要: 此文已由作者肖凡授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 最近接了一个看上去很小,很容易实现的需求,然而在做的过程中发现有些问题如果思考不全就很容易导致问题,这里给大家分享下。 需求背景 需求背景 考拉的订单风控主要是对接杭研的反垃圾服务,订单支付完成后会异步抄送给反 阅读全文
posted @ 2018-10-29 16:38 tianshidan1998 阅读(187) 评论(0) 推荐(0) 编辑
摘要: 此文已由作者肖凡授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 最近在学习hadoop,发现hadoop的序列化过程和jdk的序列化有很大的区别,下面就来说说这两者的区别都有哪些。 1、先简单回顾下JAVA的序列化 JDK的序列化只要实现serializable接口OK了, 阅读全文
posted @ 2018-10-29 13:45 tianshidan1998 阅读(278) 评论(0) 推荐(0) 编辑
摘要: 此文已由作者肖凡授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 最近Lofter项目碰到很多性能上的问题,特别是数据库相关的,每次推送后,告警就会第一时间到来。这些问题随着产品的不断扩展,我想大家肯定都遇到过。目前我们解决性能问题一般都是两种方法:一是加缓存,减少数据库压力 阅读全文
posted @ 2018-10-29 13:40 tianshidan1998 阅读(893) 评论(0) 推荐(0) 编辑
摘要: 此文已由作者肖凡授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 背景 考拉安全部技术这块目前主要负责两块业务:一个是内审,主要是通过敏感日志管理平台搜集考拉所有后台系统的操作日志,数据导入到es后,结合storm进行实时计算,主要有行为查询、数据监控、事件追溯、风险大盘等功 阅读全文
posted @ 2018-10-29 13:31 tianshidan1998 阅读(1788) 评论(0) 推荐(0) 编辑
摘要: 此文已由作者夏昀授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 Model类如下:package com.xy.model qa数据源的mybatis mapper接口 package com.xy.dao dev数据源的mybatis mapper接口 package c 阅读全文
posted @ 2018-10-29 13:05 tianshidan1998 阅读(187) 评论(0) 推荐(0) 编辑
摘要: 此文已由作者谢蕾授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 引言: 大家都知道QA的核心价值在测试策略的制定上,如果把测试策略比作大楼的结构,那么质量评估就是大楼的封顶。通常,封顶都会举办比较隆重的仪式,项目组对“封顶”的重视程度可见一斑。那么如何做专业的质量评估呢,结 阅读全文
posted @ 2018-10-29 12:45 tianshidan1998 阅读(304) 评论(0) 推荐(0) 编辑
摘要: 此文已由作者杨帆授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 注:经过更深入的测试,实在不好意思,这篇文章是有问题的 更改script的type属性 并不能通过src来加载,只能在该文件中解析。 requirejs 的text原理是通过XHR载入的) 测试如下: text 阅读全文
posted @ 2018-10-29 11:21 tianshidan1998 阅读(228) 评论(0) 推荐(0) 编辑
摘要: 此文已由作者杨帆授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 在这个模板化的速食编程时代,工程师们已经习惯了使用各种框架去实现需求,常常会陷入一种固有和机械化的编程模式,在我看来这是非常恐怖的一件事,因为这种状态常常会使人感到疲惫和厌倦,创新的能力和思维会消失殆尽。又回到 阅读全文
posted @ 2018-10-29 10:46 tianshidan1998 阅读(724) 评论(0) 推荐(0) 编辑
摘要: 此文已由作者杨凯明授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 背景 为什么要做事务消息中心 原有kqueue的方式缺点: 降低业务库性能占用业务库磁盘历史数据管理成本高技术运维工作量很大 降低业务库性能 占用业务库磁盘 历史数据管理成本高 技术运维工作量很大 事务消息中 阅读全文
posted @ 2018-10-29 09:41 tianshidan1998 阅读(381) 评论(0) 推荐(0) 编辑
摘要: 此文已由作者杨凯明授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 继Windows 10系统发布之后,很多Windows用户更新了系统。win10系统的发布,在以往的metro UI中加入了很多理性元素,可以看出win10在易用性和兼容性上面做了努力。 在之前的项目中接到了 阅读全文
posted @ 2018-10-29 09:31 tianshidan1998 阅读(121) 评论(0) 推荐(0) 编辑
摘要: 此文已由作者杨凯明授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 1.背景 目前项目中使用的定时任务框架存在下面这些问题 没有统一的定时任务管理平台 没有统一的定时任务管理平台 目前项目中使用定时任务的方式比较混乱,有部分系统使用了cron插件,有部分系统直接使用的spri 阅读全文
posted @ 2018-10-29 09:26 tianshidan1998 阅读(315) 评论(0) 推荐(0) 编辑