摘要:
此文已由作者朱笑笑授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 本文主要参照官网的安装步骤实现了Hadoop伪分布式集群的搭建,希望能够为初识Hadoop的小伙伴带来借鉴意义。 环境: (1)系统环境:CentOS 7.3.1611 64位 (2)Java版本:OpenJ 阅读全文
摘要:
此文已由作者肖乃同授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 代数数据类型是指满足一定数学特性的数据类型, 这些特性使得计算能够很方便的并行化,在Scalding和 Spark等数据计算框架中有着广泛的应用。代数数据类型是一个通用的概念, 其实现不限于Algebird, 阅读全文
摘要:
此文已由作者肖凡授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 最近接了一个看上去很小,很容易实现的需求,然而在做的过程中发现有些问题如果思考不全就很容易导致问题,这里给大家分享下。 需求背景 需求背景 考拉的订单风控主要是对接杭研的反垃圾服务,订单支付完成后会异步抄送给反 阅读全文
摘要:
此文已由作者肖凡授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 最近在学习hadoop,发现hadoop的序列化过程和jdk的序列化有很大的区别,下面就来说说这两者的区别都有哪些。 1、先简单回顾下JAVA的序列化 JDK的序列化只要实现serializable接口OK了, 阅读全文
摘要:
此文已由作者肖凡授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 最近Lofter项目碰到很多性能上的问题,特别是数据库相关的,每次推送后,告警就会第一时间到来。这些问题随着产品的不断扩展,我想大家肯定都遇到过。目前我们解决性能问题一般都是两种方法:一是加缓存,减少数据库压力 阅读全文
摘要:
此文已由作者肖凡授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 背景 考拉安全部技术这块目前主要负责两块业务:一个是内审,主要是通过敏感日志管理平台搜集考拉所有后台系统的操作日志,数据导入到es后,结合storm进行实时计算,主要有行为查询、数据监控、事件追溯、风险大盘等功 阅读全文
摘要:
此文已由作者夏昀授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 Model类如下:package com.xy.model qa数据源的mybatis mapper接口 package com.xy.dao dev数据源的mybatis mapper接口 package c 阅读全文
摘要:
此文已由作者谢蕾授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 引言: 大家都知道QA的核心价值在测试策略的制定上,如果把测试策略比作大楼的结构,那么质量评估就是大楼的封顶。通常,封顶都会举办比较隆重的仪式,项目组对“封顶”的重视程度可见一斑。那么如何做专业的质量评估呢,结 阅读全文
摘要:
此文已由作者杨帆授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 注:经过更深入的测试,实在不好意思,这篇文章是有问题的 更改script的type属性 并不能通过src来加载,只能在该文件中解析。 requirejs 的text原理是通过XHR载入的) 测试如下: text 阅读全文
摘要:
此文已由作者杨帆授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 在这个模板化的速食编程时代,工程师们已经习惯了使用各种框架去实现需求,常常会陷入一种固有和机械化的编程模式,在我看来这是非常恐怖的一件事,因为这种状态常常会使人感到疲惫和厌倦,创新的能力和思维会消失殆尽。又回到 阅读全文