10 2018 档案

摘要:此文已由作者易国强授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 传统的properties读取方式 一般的,我们都可以自定义一个xxx.properties文件,然后在工程的xml配置文件中注入相关的配置bean,示例如下:<context:property-placeh 阅读全文
posted @ 2018-10-31 17:56 tianshidan1998 阅读(480) 评论(0) 推荐(0) 编辑
摘要:此文已由作者易国强授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 为什么选择log4j2 log4j2相比于log4j1.x和logback来说,具有更快的执行速度。同时也支持日志的异步写入。还有很多有趣的特性,大家可以参考官方文档在这篇文章里,对比描述了log4j2的优点 阅读全文
posted @ 2018-10-31 15:45 tianshidan1998 阅读(340) 评论(0) 推荐(0) 编辑
摘要:此文已由作者易国强授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 自定义视图解析 在默认情况下Spring Boot 的MVC框架使用的视图解析ViewResolver类是ContentNegotiatingViewResolver,这个解析器比较智能,它会根据你的请求类型 阅读全文
posted @ 2018-10-31 15:35 tianshidan1998 阅读(1076) 评论(0) 推荐(0) 编辑
摘要:此文已由作者易国强授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 明确功能,各司其职 在一个结构清晰的项目中,一个没有module划分的结构显然不是最佳实践。有人会说可以在同一个Project中定义不同的包名及包路径来做区分,但这样当功能复杂后并不可取。当然,如果你的项目足 阅读全文
posted @ 2018-10-31 15:30 tianshidan1998 阅读(2453) 评论(0) 推荐(0) 编辑
摘要:此文已由作者易国强授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 1 btrace简介 BTrace是一个非常不错的java诊断工具。BTrace 中的B表示bytecode,它是在字节码层面上对代码进行trace ,通过在运行中的java类中注入trace代码, 并对运行 阅读全文
posted @ 2018-10-31 15:26 tianshidan1998 阅读(306) 评论(0) 推荐(0) 编辑
摘要:此文已由作者朱笑天授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 笔者在工作之余阅读了一下高性能mysql,以下的内容对mysql的介绍以及书中涉及一些概念的总结归纳。 1.mysql架构 1.最上层负责链接处理、认证授权、安全等 2.中间一层涵盖了mysql的大多数核心功 阅读全文
posted @ 2018-10-31 15:10 tianshidan1998 阅读(160) 评论(0) 推荐(0) 编辑
摘要:此文已由作者朱笑天授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 一、使用docker commit命令制作docker镜像 1. pull一个centos6.6的基础镜像,并运行一个docker container,然后在其中进行定制化(安装、配置服务等); [root@ 阅读全文
posted @ 2018-10-31 15:06 tianshidan1998 阅读(456) 评论(0) 推荐(0) 编辑
摘要:此文已由作者袁欢授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 1. AWS AutoScaling简介 AutoScaling是AWS的一个重要服务,用来弹性的自动创建(ScaleUp)或者删除(ScaleDown)EC2虚拟机,并且Scale的策略完全是用户自定义的、或 阅读全文
posted @ 2018-10-31 14:55 tianshidan1998 阅读(205) 评论(0) 推荐(0) 编辑
摘要:此文已由作者袁欢授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 部署方式在3台centos6.6系统上以Replica Set方式部署mongodb3.0.2集群。 官方参考资料: http://docs.mongodb.org/manual/tutorial/deploy 阅读全文
posted @ 2018-10-31 14:50 tianshidan1998 阅读(395) 评论(0) 推荐(0) 编辑
摘要:此文已由作者袁欢授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 在Docker中安装mongodb 采用的mongodb镜像:https://registry.hub.docker.com/u/tutum/mongodb/ 以该镜像启动一个容器(注意此时mongodb是st 阅读全文
posted @ 2018-10-31 14:40 tianshidan1998 阅读(2764) 评论(0) 推荐(0) 编辑
摘要:此文已由作者袁欢授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 创建docker容器 docker run -it --name=yh -h yh --net=none debian:sshd bash ### 确保使用--net=none参数,此时新建的容器内不会创建网卡 阅读全文
posted @ 2018-10-31 14:31 tianshidan1998 阅读(1260) 评论(0) 推荐(0) 编辑
摘要:此文已由作者袁申授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 有数的数据大屏可以在一块屏幕上展示若干张不同的图表,以炫酷的方式展示各种业务数据。其中有些图表使用CSS实现了饼图轮播、地图标记点闪烁等动画,然而在一张大屏上同时显示了许多张图表时,持续的动画效果有时会出现掉帧 阅读全文
posted @ 2018-10-31 14:10 tianshidan1998 阅读(1169) 评论(0) 推荐(0) 编辑
摘要:此文已由作者岳猛授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 1.Flink架构及特性分析 Flink是个相当早的项目,开始于2008年,但只在最近才得到注意。Flink是原生的流处理系统,提供high level的API。Flink也提供API来像Spark一样进行批处 阅读全文
posted @ 2018-10-31 13:56 tianshidan1998 阅读(328) 评论(0) 推荐(0) 编辑
摘要:此文已由作者岳猛授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 2.Spark Streaming架构及特性分析 2.1 基本架构 基于是spark core的spark streaming架构。 Spark Streaming是将流式计算分解成一系列短小的批处理作业。这里 阅读全文
posted @ 2018-10-31 13:50 tianshidan1998 阅读(276) 评论(0) 推荐(0) 编辑
摘要:此文已由作者岳猛授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 任何时候日志都是定位问题的关键,spark也不会例外,合适的配置和获取spark的driver,am,及executor日志将会提升问题定位的效率,这里初步整理了spark的一些配置,更好的日志配置还需要根据实 阅读全文
posted @ 2018-10-31 13:40 tianshidan1998 阅读(477) 评论(0) 推荐(0) 编辑
摘要:此文已由作者岳猛授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 Structure Stream访问方式 code examples 结论 basedir = /home/testhdfs支持:mv file to basedir(/home/testhdfs)不支持:mv 阅读全文
posted @ 2018-10-31 13:31 tianshidan1998 阅读(653) 评论(0) 推荐(0) 编辑
摘要:此文已由作者岳猛授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 实时计算的一个方向 实时计算未来会成为一个趋势,基本上所有的离线计算任务都能通过实时计算来完成,对于实时计算来算,除了性能,延迟性和吞吐量这些硬指标要求以外,我觉得易用性上面应该是未来的一个发展方向,毕竟现在的 阅读全文
posted @ 2018-10-31 13:26 tianshidan1998 阅读(199) 评论(0) 推荐(0) 编辑
摘要:此文已由作者岳猛授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 Flink On Yarn 架构 Paste_Image.png 前提条件首先需要配置YARN_CONF_DIR, HADOOP_CONF_DIR ,HADOOP_CONF_PATH其中一个用来确保Flink能 阅读全文
posted @ 2018-10-31 13:01 tianshidan1998 阅读(1057) 评论(0) 推荐(0) 编辑
摘要:此文已由作者岳猛授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 Flink on yarn的启动流程可以参见前面的文章 Flink on Yarn启动流程,下面主要是从源码角度看下这个实现,可能有的地方理解有误,请给予指正,多谢。 --> 1.命令行启动yarn sessi 阅读全文
posted @ 2018-10-31 12:44 tianshidan1998 阅读(915) 评论(0) 推荐(0) 编辑
摘要:此文已由作者岳猛授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 第一种,直接通过IDEA WINDOWS调试 前提是Flink所有依赖已经导入,直接在Test中打断点,然后直接Debug。 第二种,远程调试 1 设置DEBUG时候启动的jvm调试参数1.如果是yarn的模式 阅读全文
posted @ 2018-10-31 11:35 tianshidan1998 阅读(1078) 评论(0) 推荐(0) 编辑
摘要:此文已由作者岳猛授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 问题 window是解决流计算中的什么问题? 怎么划分window?有哪几种window?window与时间属性之间的关系? window里面的数据何时被计算? window 何时被清除? 第一个问题 wind 阅读全文
posted @ 2018-10-31 11:31 tianshidan1998 阅读(210) 评论(0) 推荐(0) 编辑
摘要:此文已由作者黄锴授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 组件设计,从简单来看,就是如何提高编码效率,提高代码的复用率的方法,从高级来看,这是一门程序设计的艺术 最近看了redux作者——Dan Abramov写的《Presentational and Contain 阅读全文
posted @ 2018-10-31 11:21 tianshidan1998 阅读(249) 评论(0) 推荐(0) 编辑
摘要:此文已由作者黄锴授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 强大的命令功能 如果你没使用过script,那你可算是从来没手动编辑过package.json。script作为package.json里最强大的功能,它赋予你新增脚本的能力。特别是从npm@2.0.0 之后, 阅读全文
posted @ 2018-10-31 11:06 tianshidan1998 阅读(611) 评论(0) 推荐(0) 编辑
摘要:此文已由作者于真真授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 相比于软件,智能硬件产品由于涉及硬件和软件两个端的状态,其异常case要更加错综复杂。由于硬件产品的迭代更新较慢,一旦带着问题上线要比软件麻烦的多,轻则导致操作上的困惑,重则导致产品无法使用,因此设计师必须在 阅读全文
posted @ 2018-10-31 10:50 tianshidan1998 阅读(224) 评论(0) 推荐(0) 编辑
摘要:此文已由作者游葳授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 写在开头 随着应用开发的深入,视觉同学在完成了页面的基本设计后,再也按耐不住心中的寂寞,开始对各种细节不满意,于是乎就会提出各种视觉优化的方案。作为开发人员,啥也别说了,你懂的,有困难要上,没困难,制造困难也要 阅读全文
posted @ 2018-10-31 10:36 tianshidan1998 阅读(404) 评论(0) 推荐(0) 编辑
摘要:此文已由作者尤炳棋授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 前因后果 之前考拉要上线一个版本都是靠人工整理发布内容,手动发邮件通知相关人审批,发布。且复盘时查看历史数据要去翻邮件,效率低下。 KLQA平台于17年9月开始着手搭建发布流程模块,在前期需求调研的基础上,捋 阅读全文
posted @ 2018-10-31 10:26 tianshidan1998 阅读(187) 评论(0) 推荐(0) 编辑
摘要:此文已由作者尤炳棋授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 入职考拉半年多,一直在从事KLQA平台的开发,KLQA平台后端是用基于python的flask框架搭建的。Flask框架采用的数据库是sqlalchemy。Sqlalchemy是基于ORM技术的关系型数据库, 阅读全文
posted @ 2018-10-31 10:11 tianshidan1998 阅读(177) 评论(0) 推荐(0) 编辑
摘要:此文已由作者汤晓静授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 lua 协程与 nginx 事件机制结合 文章前部分用大量篇幅阐述了 lua 和 nginx 的相关知识,包括 nginx 的进程架构,nginx 的事件循环机制,lua 协程,lua 协程如何与 C 实现交 阅读全文
posted @ 2018-10-31 10:05 tianshidan1998 阅读(1621) 评论(0) 推荐(0) 编辑
摘要:此文已由作者汤晓静授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 OpenResty 发展起源 OpenResty(也称为 ngx_openresty)是一个全功能的 Web 应用服务器。它打包了标准的 nginx 核心,很多的常用的第三方模块,以及它们的大多数依赖项。 通 阅读全文
posted @ 2018-10-31 10:01 tianshidan1998 阅读(311) 评论(0) 推荐(0) 编辑
摘要:此文已由作者尹彬彬授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 0X0 前言 在Android系统中,当我们安装apk文件的时候,lib目录下的so文件会被解压到app的原生库目录,一般来说是放到/data/data/<package-name>/lib目录下,而根据系统 阅读全文
posted @ 2018-10-31 09:56 tianshidan1998 阅读(378) 评论(0) 推荐(0) 编辑
摘要:此文已由作者易国强授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 两种打包方式 采用Spring Boot框架来构建项目,我们对项目的打包有两种方式可供选择,一种仍保持原有的方式不变,package一个war包放置到外置的应用容器中;另一种则是直接打包成一个jar包,这个j 阅读全文
posted @ 2018-10-31 09:48 tianshidan1998 阅读(254) 评论(0) 推荐(0) 编辑
摘要:此文已由作者易国强授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 开发调试很简单 热部署的使用非常简单,但能极大的提高我们的开发效率,像传统的web应用,我们修改后需要重新编译,然后再手动重启Tomcat,实现过程效率较低,这里我们有更好的选择。 热部署的使用非常简单,但能 阅读全文
posted @ 2018-10-31 09:41 tianshidan1998 阅读(216) 评论(0) 推荐(0) 编辑
摘要:此文已由作者易国强授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 快速构建 如果我们想基于spring mvc 提供一个简单的API查询服务,传统的方式,首先需要我们引入spring-mvc/spring-context等等各项依赖包,然后配置相关的参数,编写api接口,准 阅读全文
posted @ 2018-10-31 09:31 tianshidan1998 阅读(263) 评论(0) 推荐(0) 编辑
摘要:此文已由作者易国强授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 Spring Boot? Spring Boot 是由pivotal团队提供的一个基于Spring 的全新框架,设计初衷在于简化Spring应用的繁杂配置,遵循约定优于配置的原则,快速构建项目,不用过多的关注 阅读全文
posted @ 2018-10-31 09:21 tianshidan1998 阅读(184) 评论(0) 推荐(0) 编辑
摘要:此文已由作者叶林宝授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 方案四:Sort on Cell Values 简述: 上述方案三, 当数据行数较多, 情况下, 在二次排序还是可能出现oom情况, 而且, 不同的field_index的数据可能shuffle到同一个分区, 阅读全文
posted @ 2018-10-31 09:15 tianshidan1998 阅读(271) 评论(0) 推荐(0) 编辑
摘要:此文已由作者叶林宝授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 问题描述 (1)如上图是一张表, 第一行是列名,除第一列是string类型外, 其它列都是double类型。第二行开始,每行代表一条记录 (2)需求:输入一个数组例如[2, 4](后文中, 简称排位数组), 阅读全文
posted @ 2018-10-31 09:05 tianshidan1998 阅读(210) 评论(0) 推荐(0) 编辑
摘要:此文已由作者叶海啸授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 FFmpeg是一个开源免费跨平台的视频和音频流方案,可以快速对音视频流进行多方面的处理,本文主要介绍FFmpeg常用的命令与参数讲解,如何在JAVA中使用FFmpeg以及遇到的一些问题。 背景 项目需求中涉及 阅读全文
posted @ 2018-10-30 19:21 tianshidan1998 阅读(863) 评论(0) 推荐(0) 编辑
摘要:此文已由作者叶富宏授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 昨天一个商务反馈说报价信息导出失败,查看了一下日志发现是导出记录到Excel的时候报了NullpointException异常。报错的是下面这个方法里面,标红的代码(dataRow为null)。 这个方法的作 阅读全文
posted @ 2018-10-30 15:40 tianshidan1998 阅读(712) 评论(0) 推荐(0) 编辑
摘要:此文已由作者叶富宏授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 今天需求提测遇到件怪事,QA在测试环境发布我提交的分支后,不能打开页面。第一感觉是QA发布过程出问题了,因为我本地测过没有问题才提测的。经过接下来的一系列验证,该分支本地依旧能发布成功并且访问,测试环境确实有 阅读全文
posted @ 2018-10-30 15:15 tianshidan1998 阅读(186) 评论(0) 推荐(0) 编辑
摘要:此文已由作者姚依旻授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 无论是光鲜亮丽界面可人的C类产品,还是稳重大气商务气质的B类产品,若某产品存在运营行为,则必存在一个给团队自己人用的后台,也就是运营平台。人们容易都把目光 focus 在大众用户的体验上,自己人的使用体验则优 阅读全文
posted @ 2018-10-30 15:06 tianshidan1998 阅读(1766) 评论(0) 推荐(0) 编辑
摘要:此文已由作者姚太行授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 前文连接 案例的介绍已在前文中给出,本文中对相关部分将不再叙述。为更好地阅读本文,需要简单了解背景,建议可以大致浏览下前文: 代码在线编译器(上)- 编辑及编译 安全检测 在线编译器中的安全检测,目的是确定用 阅读全文
posted @ 2018-10-30 14:52 tianshidan1998 阅读(285) 评论(0) 推荐(0) 编辑
摘要:此文已由作者姚太行授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 在线编译器 代码在线编译器,即在线代码编写运行工具,提供给用户在线代码编辑、代码提示、代码诊断、编译、运行等一系列从代码编写到启动运行过程中必要的功能服务,以达到IDE的核心功能,应用范围较广,从使用场景下大 阅读全文
posted @ 2018-10-30 14:41 tianshidan1998 阅读(624) 评论(0) 推荐(0) 编辑
摘要:此文已由作者姚太行授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 SimpleDateFormat被大量使用于处理时间格式化过程,由于该类在创建时会指定一个pattern用于标明固定的时间格式,所以在使用中,一般会创建一个作用域较大(static修饰或某类的私有属性)的对象 阅读全文
posted @ 2018-10-30 14:36 tianshidan1998 阅读(367) 评论(0) 推荐(0) 编辑
摘要:此文已由作者尧飘然授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 Spring&SpringMVC Spring&SpringMVC作为bean管理容器和MVC默认框架,是大多数web应用都会选择的方案。在其使用过程中,尽管基于xml的配置bean管理的方式依然存在,但在很 阅读全文
posted @ 2018-10-30 12:40 tianshidan1998 阅读(271) 评论(0) 推荐(0) 编辑
摘要:此文已由作者尧飘海授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 Monolithic架构在产品访问量很大的情况下,有可能常会导致整个产品迭代或升级过程不能按预期进行,或者上线风险的不确定性导致上线时常常信心十足。那么MSA(微服务架构)的模式能在很程度上避免Monolit 阅读全文
posted @ 2018-10-30 12:36 tianshidan1998 阅读(464) 评论(0) 推荐(0) 编辑
摘要:此文已由作者尧飘海授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 天下大势,分久必合,合久必分,社会历史的发展方向总有着惊人的相似。把这种规律应用到软件应用架构的发展方向上,当生产力和生产关系到了不可调和的矛盾时,也将导致软件架构的演变,这样演变将会进一步推动软件的发展,同 阅读全文
posted @ 2018-10-30 12:00 tianshidan1998 阅读(163) 评论(0) 推荐(0) 编辑
摘要:此文已由作者尧飘海授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 PaaS服务之路漫谈(一) 1983年,SUN公司提出的网络即计算的理念;2006年亚马逊(Amazon)推出弹性计算云(Elastic Compute Cloud;EC2)服务,云计算可以认为包括以下几个层 阅读全文
posted @ 2018-10-30 11:56 tianshidan1998 阅读(316) 评论(0) 推荐(0) 编辑
摘要:此文已由作者尧飘海授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 随着Spring的不断发展与完善,早期它的功能可能只看做是IOC(反转控制)的容器,或者其最大的亮点为DI(依赖注入),但是现在随着Spring 2.5.6 的Release发布及3.0 版的推出及其他Spr 阅读全文
posted @ 2018-10-30 11:51 tianshidan1998 阅读(149) 评论(0) 推荐(0) 编辑
摘要:此文已由作者尧飘海授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 概述 在日常程序开发中,很多JAVA程度员不太关心内存的使用情况。当然,如果程序员运气较好或者系统没有大规模的被测试或者被用户使用时,这个问题或许永远不出现,使得程序员一直认为内存反正是无限的,可以一直使用。 阅读全文
posted @ 2018-10-30 11:46 tianshidan1998 阅读(312) 评论(0) 推荐(0) 编辑
摘要:此文已由作者尧飘海授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 摘要 在企业级系统维护和互联网运维中,Shell脚本的编写与维护常必不可少, 但是Shell脚本的编写与调试常占用了开发人员的大部分工作时间,提高Shell脚本的开发效率可以更好的保证项目质量。随着NodeJ 阅读全文
posted @ 2018-10-30 11:41 tianshidan1998 阅读(298) 评论(0) 推荐(0) 编辑
摘要:此文已由作者尧飘海授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 随着Node.js的不断发展与壮大,应用范围也越来越广泛,从传统的企业应用,到互联网使用,再到云计算的发展,它的身影也是随处可见。当然,它的受欢迎程度能在短时间内得到这么快的发展,除却与其本身的事件模型及V8 阅读全文
posted @ 2018-10-30 11:37 tianshidan1998 阅读(161) 评论(0) 推荐(0) 编辑
摘要:此文已由作者杨延亮授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 简介 内核热补丁是一种无需重启操作系统,动态为内核打补丁的技术。系统管理员基于该技术,可以在不重启系统的情况下,修复内核BUG或安全漏洞,可以在最大程度上减少系统宕机时间,增加系统的可用性。 使用场景 1、修 阅读全文
posted @ 2018-10-30 11:31 tianshidan1998 阅读(1224) 评论(0) 推荐(0) 编辑
摘要:此文已由作者刘超授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 一、架构的三个维度和六个层面 1.1、三大架构 在互联网时代,要做好一个合格的云架构师,需要熟悉三大架构。 第一个是IT架构,其实就是计算,网络,存储。这是云架构师的基本功,也是最传统的云架构师应该首先掌握的部 阅读全文
posted @ 2018-10-30 11:16 tianshidan1998 阅读(1077) 评论(0) 推荐(0) 编辑
摘要:此文已由作者杨延亮授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 问题背景 云主机在运行或者启动的过程中,可能会存在卡死的情况。往往在云主机重启之后又恢复正常,但是问题现场得不到保留,不利于问题的分析定位。本文提供了一种方法,可以通过在云主机所在的物理节点(宿主机)上执行相 阅读全文
posted @ 2018-10-30 11:11 tianshidan1998 阅读(243) 评论(0) 推荐(0) 编辑
摘要:此文已由作者杨晓授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 本文从作者所在项目进行的耗电量测试入手,介绍了移动端App耗电量测试的一些基本概念和方法,重点介绍了iOS应用的耗电量测试的一些实战经验。 耗电量测试介绍 什么是耗电量测试 耗电量测试是指测试App在运行过程中 阅读全文
posted @ 2018-10-30 09:56 tianshidan1998 阅读(199) 评论(0) 推荐(0) 编辑
摘要:此文已由作者杨晓授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 在Mac OS系统上,采用Xcodebuild Analyze命令和OClint工具,对iOS项目进行静态代码检查,输出可视化结果。然后将项目持续集成至CI平台,并使用PMD插件进行错误统计的展示。对此,本文由 阅读全文
posted @ 2018-10-30 09:36 tianshidan1998 阅读(554) 评论(0) 推荐(0) 编辑
摘要:此文已由作者杨卫强授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 我个人认为,浪费时间比较主要的原因有两个 工作缺乏计划工作过程被打扰,效率低下 工作缺乏计划 工作过程被打扰,效率低下 以下记录我自己的时间管理实践,仅供参考,适合自己的才是最好的。 1. 使用TODO列表制 阅读全文
posted @ 2018-10-30 09:26 tianshidan1998 阅读(207) 评论(0) 推荐(0) 编辑
摘要:此文已由作者杨望暑授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 背景 在服务端查看log会经常使用到tail -f命令实时跟踪文件变化. 那么问题来了, 如果自己写一个同样功能的, 该何处写起呢? 如果你用过ELK里的beats/filebeat的话, 应该知道fileb 阅读全文
posted @ 2018-10-30 09:21 tianshidan1998 阅读(204) 评论(0) 推荐(0) 编辑
摘要:此文已由作者朱笑笑授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 上一篇文章介绍了如何搭建Hadoop伪分布式集群,本篇将向大家介绍下Hadoop分布式集群的搭建。内容浅显,但能够为新手们提供一个参考,让像我一样的小白们对Hadoop的环境能够有一定的了解。 环境: 系统环 阅读全文
posted @ 2018-10-30 09:16 tianshidan1998 阅读(274) 评论(0) 推荐(0) 编辑
摘要:此文已由作者朱笑笑授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 本文主要参照官网的安装步骤实现了Hadoop伪分布式集群的搭建,希望能够为初识Hadoop的小伙伴带来借鉴意义。 环境: (1)系统环境:CentOS 7.3.1611 64位 (2)Java版本:OpenJ 阅读全文
posted @ 2018-10-30 09:11 tianshidan1998 阅读(692) 评论(0) 推荐(0) 编辑
摘要:此文已由作者肖乃同授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 代数数据类型是指满足一定数学特性的数据类型, 这些特性使得计算能够很方便的并行化,在Scalding和 Spark等数据计算框架中有着广泛的应用。代数数据类型是一个通用的概念, 其实现不限于Algebird, 阅读全文
posted @ 2018-10-29 16:55 tianshidan1998 阅读(282) 评论(0) 推荐(0) 编辑
摘要:此文已由作者肖凡授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 最近接了一个看上去很小,很容易实现的需求,然而在做的过程中发现有些问题如果思考不全就很容易导致问题,这里给大家分享下。 需求背景 需求背景 考拉的订单风控主要是对接杭研的反垃圾服务,订单支付完成后会异步抄送给反 阅读全文
posted @ 2018-10-29 16:38 tianshidan1998 阅读(194) 评论(0) 推荐(0) 编辑
摘要:此文已由作者肖凡授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 最近在学习hadoop,发现hadoop的序列化过程和jdk的序列化有很大的区别,下面就来说说这两者的区别都有哪些。 1、先简单回顾下JAVA的序列化 JDK的序列化只要实现serializable接口OK了, 阅读全文
posted @ 2018-10-29 13:45 tianshidan1998 阅读(280) 评论(0) 推荐(0) 编辑
摘要:此文已由作者肖凡授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 最近Lofter项目碰到很多性能上的问题,特别是数据库相关的,每次推送后,告警就会第一时间到来。这些问题随着产品的不断扩展,我想大家肯定都遇到过。目前我们解决性能问题一般都是两种方法:一是加缓存,减少数据库压力 阅读全文
posted @ 2018-10-29 13:40 tianshidan1998 阅读(901) 评论(0) 推荐(0) 编辑
摘要:此文已由作者肖凡授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 背景 考拉安全部技术这块目前主要负责两块业务:一个是内审,主要是通过敏感日志管理平台搜集考拉所有后台系统的操作日志,数据导入到es后,结合storm进行实时计算,主要有行为查询、数据监控、事件追溯、风险大盘等功 阅读全文
posted @ 2018-10-29 13:31 tianshidan1998 阅读(1797) 评论(0) 推荐(0) 编辑
摘要:此文已由作者夏昀授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 Model类如下:package com.xy.model qa数据源的mybatis mapper接口 package com.xy.dao dev数据源的mybatis mapper接口 package c 阅读全文
posted @ 2018-10-29 13:05 tianshidan1998 阅读(191) 评论(0) 推荐(0) 编辑
摘要:此文已由作者谢蕾授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 引言: 大家都知道QA的核心价值在测试策略的制定上,如果把测试策略比作大楼的结构,那么质量评估就是大楼的封顶。通常,封顶都会举办比较隆重的仪式,项目组对“封顶”的重视程度可见一斑。那么如何做专业的质量评估呢,结 阅读全文
posted @ 2018-10-29 12:45 tianshidan1998 阅读(312) 评论(0) 推荐(0) 编辑
摘要:此文已由作者杨帆授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 注:经过更深入的测试,实在不好意思,这篇文章是有问题的 更改script的type属性 并不能通过src来加载,只能在该文件中解析。 requirejs 的text原理是通过XHR载入的) 测试如下: text 阅读全文
posted @ 2018-10-29 11:21 tianshidan1998 阅读(231) 评论(0) 推荐(0) 编辑
摘要:此文已由作者杨帆授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 在这个模板化的速食编程时代,工程师们已经习惯了使用各种框架去实现需求,常常会陷入一种固有和机械化的编程模式,在我看来这是非常恐怖的一件事,因为这种状态常常会使人感到疲惫和厌倦,创新的能力和思维会消失殆尽。又回到 阅读全文
posted @ 2018-10-29 10:46 tianshidan1998 阅读(727) 评论(0) 推荐(0) 编辑
摘要:此文已由作者杨凯明授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 背景 为什么要做事务消息中心 原有kqueue的方式缺点: 降低业务库性能占用业务库磁盘历史数据管理成本高技术运维工作量很大 降低业务库性能 占用业务库磁盘 历史数据管理成本高 技术运维工作量很大 事务消息中 阅读全文
posted @ 2018-10-29 09:41 tianshidan1998 阅读(383) 评论(0) 推荐(0) 编辑
摘要:此文已由作者杨凯明授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 继Windows 10系统发布之后,很多Windows用户更新了系统。win10系统的发布,在以往的metro UI中加入了很多理性元素,可以看出win10在易用性和兼容性上面做了努力。 在之前的项目中接到了 阅读全文
posted @ 2018-10-29 09:31 tianshidan1998 阅读(129) 评论(0) 推荐(0) 编辑
摘要:此文已由作者杨凯明授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 1.背景 目前项目中使用的定时任务框架存在下面这些问题 没有统一的定时任务管理平台 没有统一的定时任务管理平台 目前项目中使用定时任务的方式比较混乱,有部分系统使用了cron插件,有部分系统直接使用的spri 阅读全文
posted @ 2018-10-29 09:26 tianshidan1998 阅读(324) 评论(0) 推荐(0) 编辑
摘要:此文已由作者谢蕾授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 看到标题,很多同学可能会认为本文倡导“立即进入追踪极端”的测试,其实不然,基于风险的测试需要QA与产品、开发等项目角色有更多的切磋。我们还是遵守事物发展规律,从头说起。源起各项目的商业化发展,所有项目开发过程都 阅读全文
posted @ 2018-10-26 09:25 tianshidan1998 阅读(442) 评论(0) 推荐(0) 编辑
摘要:此文已由作者谢蕾授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 前言 我们对于“异常处理”这个词并不陌生,众多框架和库在异常处理方面都提供了便利,但是对于何种处理才是最佳实践,也是众说纷纭。异常处理是否得当直接关系到软件的健壮性,今天就谈谈我对异常处理这件事儿的拙见。首先, 阅读全文
posted @ 2018-10-26 09:15 tianshidan1998 阅读(251) 评论(0) 推荐(0) 编辑
摘要:本文承接上一篇:大咖分享 | 一文解锁首届云创大会干货——上篇(文末附演讲ppt文件免费下载),第一届云创大会留下干货太多,这里追加下篇,同样,文末提供大咖们的干货分享,点击附件可免费下载。 大会主要嘉宾 附件下载: 话社娱乐直播加电商实践-王铃声.pdf大数据加人工智能在网易云音乐中的实践-曹偲. 阅读全文
posted @ 2018-10-26 09:11 tianshidan1998 阅读(249) 评论(0) 推荐(0) 编辑
摘要:此文已由作者夏昀授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 分布式事务对性能有一定的影响,所以不是最佳的解决方案,能通过设计避免最好尽量避免。 分布式事务(Distributed transactions),也称作XA事务(XA是一个协议的名字),在spring中被称作 阅读全文
posted @ 2018-10-26 09:10 tianshidan1998 阅读(174) 评论(0) 推荐(0) 编辑
摘要:2017年7月13日,第一届网易云创大会在杭州国际博览中心举办,本次大会由杭州滨江区政府和网易主办,杭州市两创示范工作领导小组办公室协办,网易云承办,以“商业匠心、技术创新”为主题,致力于打通技术创新与商业成功之间的通道,大会邀请各行业企业家,云计算、大数据、人工智能等领域的一线专家,及资深投资人, 阅读全文
posted @ 2018-10-24 18:35 tianshidan1998 阅读(235) 评论(0) 推荐(0) 编辑
摘要:此文已由作者刘超授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 但是对于数据面的关键组件Envoy没有详细解读,这篇文章补上。 一、Envoy的工作模式 Envoy的工作模式如图所示,横向是管理平面。 Envoy会暴露admin的API,可以通过API查看Envoy中的路由 阅读全文
posted @ 2018-10-24 10:45 tianshidan1998 阅读(282) 评论(0) 推荐(0) 编辑
摘要:此文已由作者夏鹏授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 使用WebDriver做Web自动化的时候,org.openqa.selenium.support.ui中提供了非常便捷好用的WebDriverWait类继承FluentWait<WebDriver>,所以可以 阅读全文
posted @ 2018-10-24 09:45 tianshidan1998 阅读(219) 评论(0) 推荐(0) 编辑
摘要:此文已由作者夏鹏授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 Apache Jmeter是基于Java开发的性能测试工具,支持多种协议的测试,包括:Web(HTTP/HTTPS)、SOAP、FTP、Database(JDBC)、LDAP、Mail(POP3/IMAP)、J 阅读全文
posted @ 2018-10-23 18:34 tianshidan1998 阅读(619) 评论(0) 推荐(0) 编辑
摘要:此文已由作者夏君授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 工欲善其事,必先利其器! 前不久遇到一件比较囧的事情,办公电脑突然开不了机,硬盘坏了且只能通过数据恢复方式才能挽回数据,IT给的答复(恢复数据费用得1200元),咨询一圈,觉得报销挺麻烦,索性放弃。于是乎,抽空 阅读全文
posted @ 2018-10-23 16:50 tianshidan1998 阅读(416) 评论(0) 推荐(0) 编辑
摘要:此文已由作者夏君授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 本文主要结合实例、利用图形方式简要介绍Jmeter基本功能,以便新人快速入手,希望能结合具体测试场景提高测试效率: 一、Jmeter简介 Jmeter是一款使用Java开发的,开源免费的测试工具, 主要用来做功 阅读全文
posted @ 2018-10-23 15:57 tianshidan1998 阅读(243) 评论(0) 推荐(0) 编辑
摘要:此文已由作者夏君授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 BugBash源至微软概念,翻译为《缺陷大扫除》,顾名思义是集中大家力量全面清扫Bug,确保产品质量。 下面通过5w1h分析方法谈谈BugBash活动: What 什么是BugBash? BugBash活动就是 阅读全文
posted @ 2018-10-23 15:23 tianshidan1998 阅读(577) 评论(0) 推荐(0) 编辑
摘要:此文已由作者夏君授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 产品测试组_理财基金统计季度:2016_Q1关键字:jira、Bug收敛、零Bug反弹、同比/环比第一部分 jira图表数据分析1. 最新问题图(以柱状统计图显示指定项目最新创建的问题):说明:绿色柱体含义为某 阅读全文
posted @ 2018-10-23 14:47 tianshidan1998 阅读(2682) 评论(0) 推荐(0) 编辑
摘要:此文已由作者夏君授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 一、fiddler简介 直接引用官网介绍 The free web debugging proxy for any browser, system or platform! fiddler是一个Web调试代理, 阅读全文
posted @ 2018-10-23 11:45 tianshidan1998 阅读(203) 评论(0) 推荐(0) 编辑
摘要:此文已由作者夏君授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 从事软件测试已有多年,参与过很多项目,合作开发不少,谈起测试和开发的关系,说起来比较微妙,有时候能和睦相处,有时候矛盾重重。其实矛盾的根源,无非就是BUG,但起源于BUG,也终止于BUG。 首先,来看看在整个软 阅读全文
posted @ 2018-10-23 11:40 tianshidan1998 阅读(191) 评论(0) 推荐(0) 编辑
摘要:此文已由作者夏君授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 引言 总结2015,放眼2016,纵观整个互联网圈,人才依然是业务成功的第一要素,在网易,我想也是这样~网易金融事业部的领导希望在新的一年,不仅能在金融业务上取得长足的进步外,而且希望各位同事能够在自身业务和专 阅读全文
posted @ 2018-10-23 11:35 tianshidan1998 阅读(182) 评论(0) 推荐(0) 编辑
摘要:欢迎访问网易云社区,了解更多网易技术产品运营经验。 2018年10月19日,由工信部中国邮电出版社、《大数据》杂志、信息通信大数据产业联盟主办的“中国国际大数据大会”在北京举办,网易大数据受邀出席大数据与数字经济峰会,分享网易大数据技术和建设经验,与来自各个行业的专家进行了深入交流。 ▲网易大数据首 阅读全文
posted @ 2018-10-23 11:23 tianshidan1998 阅读(303) 评论(0) 推荐(0) 编辑
摘要:此文已由作者吴志勐授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 本文以自己的程序WFD为例: 1,为路由器固件刷上gdbserver 在宿主端,使用make menuconfig,选上以下两项。 1)Advanced configuration options (for 阅读全文
posted @ 2018-10-23 11:22 tianshidan1998 阅读(409) 评论(0) 推荐(0) 编辑
摘要:此文已由作者吴维伟授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 在编写程序时,总会有一些代码是我们不愿意一遍又一遍重复地去写的,比如一些UI或交互相似组件,或是一些相似的流程或逻辑。以前,面对这样的情况,我会将可以复用的部分抽象出来,做成可以复用的模块,放在专门存放公用模 阅读全文
posted @ 2018-10-23 09:12 tianshidan1998 阅读(410) 评论(0) 推荐(0) 编辑
摘要:此文已由作者吴维伟授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 在过去的一段时间,队友在性能优化方面做了很多工作。我现在在这里默默总结,希望能够追上队友的脚步~ 此次优化主要针对的是漫画手机站。相比于PC端的网络,移动端的网络环境有着自己的特点:网络不稳定,低网速的情况出 阅读全文
posted @ 2018-10-23 09:00 tianshidan1998 阅读(251) 评论(0) 推荐(0) 编辑
摘要:此文已由作者吴维伟授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 前端性能优化是一件很琐碎的事情。它不像其它很多技术,在确切有限的步骤下就可以把功能做好。它就像是在打扫屋子,需要时常去检查屋子是否有不整洁的地方,然后立即整理。所以在性能优化的过程中会遇到各方面的问题。本文的 阅读全文
posted @ 2018-10-23 08:55 tianshidan1998 阅读(502) 评论(0) 推荐(0) 编辑
摘要:此文已由作者吴志勐授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 安装uhttpd。 在编译openwrt前,输入make memuconfig,查找Network -> Web Servers/Proxies -> uhttpd,如果没勾选则勾选。然后编译固件。 修改uh 阅读全文
posted @ 2018-10-22 11:55 tianshidan1998 阅读(1056) 评论(0) 推荐(0) 编辑
摘要:此文已由作者吴艳秋授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 一、什么是用户体验 用户体验,英文叫做user experience。一个较常见的定义是“指用户访问一个网站或者使用一个产品时的全部体验。他们的印象和感觉,是否成功,是否享受,是否还想再来使用。他们能够忍受的 阅读全文
posted @ 2018-10-22 11:42 tianshidan1998 阅读(299) 评论(0) 推荐(0) 编辑
摘要:此文已由作者吴维伟授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 Vue实例在初始化时,可以接受以下几类数据: 模板初始化数据传递给组件的属性值computedwatchmethods 模板 初始化数据 传递给组件的属性值 computed watch methods Vu 阅读全文
posted @ 2018-10-22 11:37 tianshidan1998 阅读(1344) 评论(0) 推荐(0) 编辑
摘要:此文已由作者吴维伟授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 写好一段优雅程序的必要条件是良好的设计。 写程序就像在走一个迷宫。编写之初,有若干个可能的解决方案萦绕在我们的脑海。我们选择一个继续深入,可能达到终点——实现了功能需求,但更大的可能是进入了一个死胡同或者一个 阅读全文
posted @ 2018-10-22 11:36 tianshidan1998 阅读(357) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 上一篇我们从方案层面讲解了MGR的成员管理和故障恢复。本篇从源码层面捋一捋,通过本篇介绍,除了能够了解如何将一个节点加入到group中,也可以了解在这个过程中,节点是如何进行分布式通信模块进行初始化,上层如何 阅读全文
posted @ 2018-10-19 15:30 tianshidan1998 阅读(1086) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 MySQL Group Replication(MGR)框架让MySQL具备了自动主从切换和故障恢复能力,举single primary(单主)模式为例,primary作为主节点对外提供读写服务,是唯一的可写 阅读全文
posted @ 2018-10-19 15:14 tianshidan1998 阅读(2149) 评论(0) 推荐(1) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 开宗明义,keepsync和trysync是网易MySQL分支版本InnoSQL的两个参数,非常重要的两个参数。从某种程度上说,他们决定了MySQL主从复制实例是采用异步复制(async)还是半同步复制(se 阅读全文
posted @ 2018-10-19 15:13 tianshidan1998 阅读(142) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 有天一早,DBA同学就找上来了,说有个DDB集群下的RDS实例Slave节点(从库)死锁了,请求支援。说实话,一大早就遇到死锁这种棘手的问题,我的内心是奔溃的。不过万幸的是,DBA说这个实例还未正式上线,处于 阅读全文
posted @ 2018-10-19 15:13 tianshidan1998 阅读(2920) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 MySQL慢日志(slow log)是MySQL DBA及其他开发、运维人员需经常关注的一类信息。使用慢日志可找出执行时间较长或未走索引等SQL语句,为进行系统调优提供依据。本文结合线上案例分析如何正确设置M 阅读全文
posted @ 2018-10-19 15:12 tianshidan1998 阅读(666) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 周末闲得蛋疼,来英飞特做人工空气净化器。开了电脑后,习惯性得点击xshell按钮,进入InnoSQL稳定性测试机。show processlist几次,发现不对劲啊。我跑的是oltp加oltp_simple( 阅读全文
posted @ 2018-10-19 15:11 tianshidan1998 阅读(255) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 要想精通一个数据库,除了知道该数据库的功能特性、使用方法等,还需要能够看懂数据库源码,能够使用gdb工具对其进行调试跟踪,如果能够修改源码,实现自己所需的功能,那是极好的。本文简单介绍如何在debian 7上 阅读全文
posted @ 2018-10-19 15:10 tianshidan1998 阅读(400) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 MongoDB sharding cluster(分片集群)是MongoDB提供的数据在线水平扩展方案,包括Router(mongos)、Shard和Config Server三种组件,分别提供查询服务、分片 阅读全文
posted @ 2018-10-19 10:06 tianshidan1998 阅读(195) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 这是一篇MongoDB官网上的一篇文章,分析了使用MongoDB存储商品分类信息相比其他数据库的优势,并讲述了如何将其保存到MongoDB中。原址点击:User case – Product Catalog。 阅读全文
posted @ 2018-10-19 10:04 tianshidan1998 阅读(515) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 对数据库进行数据备份无非两种方式,一种是逻辑备份,也就是直接连上数据库导出所有的数据,对于MySQL,就是通过MySQL客户端或JDBC等MySQL驱动进行全表Select,将查询结果转化为Insert语句并 阅读全文
posted @ 2018-10-19 10:02 tianshidan1998 阅读(145) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 目前蜂巢(云计算基础服务)MongoDB上已经有数十个实例,其中不少是企业用户或公司内部产品用户的。用户多了,那就会反馈一些问题。其中一个就是MongoDB实例访问账号,虽能够提供创建和删除集合、索引,创建数 阅读全文
posted @ 2018-10-19 10:01 tianshidan1998 阅读(284) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 最近阅读了TiDB源码的说明文档,跟MongoDB的分片集群做了下简单对比。 首先展示TiDB的整体架构 MongoDB分片集群架构如下: 更加具体点如下: 下面从介绍TiDB组件的角度切入,将其跟Mongo 阅读全文
posted @ 2018-10-19 09:32 tianshidan1998 阅读(2347) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 一、日志复制流程: a、raft leader节点在接收client请求后,先将请求写到日志中,再将日志通过AppendEntries RPC发送到follow上。如果收到了大多数follow的确认消息,则对 阅读全文
posted @ 2018-10-19 09:31 tianshidan1998 阅读(248) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 近段时间来,全球范围内数以万计的MongoDB实例被攻击,作为旨在为用户提供最优MongoDB云服务的网易蜂巢MongoDB团队在第一时间跟进了相关报道,虽然蜂巢MongoDB服务从设计初就将数据的安全性列为 阅读全文
posted @ 2018-10-19 09:25 tianshidan1998 阅读(276) 评论(0) 推荐(0) 编辑
摘要:此文已由作者吴琪惠授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 调用pytest 调用命令: 上面的命令相当于在命令行直接调用脚本 pytest [...](前提是python已经加入环境变量) 一些帮助信息 失败后停止 选择测试用例 调试输出 Python带有一个内置的 阅读全文
posted @ 2018-10-19 09:22 tianshidan1998 阅读(427) 评论(0) 推荐(0) 编辑
摘要:此文已由作者吴琪惠授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 纯官网译文而已。。。 pytest是一个成熟的、全功能的python测试工具。 pytest框架编写测试用例时,小的用例会变得更容易编写,但对于复杂的应用或者库应该更谨慎选择。 特征: 1.断言失败之后具备详 阅读全文
posted @ 2018-10-19 09:21 tianshidan1998 阅读(417) 评论(0) 推荐(0) 编辑
摘要:此文已由作者吴凯霞授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 网页给人最直观的感受就是它的页面结构。 在浏览设计作品时,会看见一些优秀的海报设计,这些都是通过不同的排版,文字设计,创意布局等来抓人眼球,让用户眼前一亮。 如何将网页搭建得得体?结合一些海报设计将一些小技巧 阅读全文
posted @ 2018-10-19 09:20 tianshidan1998 阅读(165) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王游授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 前言 “教练”是近年来国内外很火的职业,个人教练、团队教练、私董教练……越来越多的人加入其中。另一边,物质生活的充足,让我们开始将镜头转向自身,想要认清自我,挖掘激情,找到心中的锚点……越来越多的人需要教练。虽 阅读全文
posted @ 2018-10-18 18:35 tianshidan1998 阅读(194) 评论(0) 推荐(0) 编辑
摘要:数字化经济不断深入改造各个行业,带来效率的极大提升,除了普通消费者熟知的金融、电商等行业,近年来,物流快递行业也加快了数字化步伐。10月17日,德邦快递与网易旗下云计算大数据品牌“网易云”在上海签约,双方展开在物流、快递业数字化方面的深度合作,共同打造“智慧物流”。双方当天发布的数据显示:2017年 阅读全文
posted @ 2018-10-18 18:20 tianshidan1998 阅读(253) 评论(0) 推荐(0) 编辑
摘要:此文已由作者吴彬彬授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 我们在生活中,会经常听说两种推理模式,一种是归纳 一种是演绎,这两种思维模式能够帮助数据分析师完成原始的业务逻辑积累,在此基础上快速定位业务问题,提升分析效率,但是对于刚入门的数据分析师,在项目经验不足的前提 阅读全文
posted @ 2018-10-18 17:04 tianshidan1998 阅读(172) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 MongoDB是目前最为流行的NoSQL数据库,在2017年1月新鲜出炉的数据库权威排行榜上,MongoDB超越PostgreSQL,重回第四宝座,是前五中唯一的NoSQL数据库,遥遥领先其他NoSQL数据库 阅读全文
posted @ 2018-10-18 17:02 tianshidan1998 阅读(244) 评论(0) 推荐(0) 编辑
摘要:此文已由作者吴家联授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 1. pdfjs库简介 PDF.js 是由Mozilla 主导推出的可以将PDF文件转换为H5页面进行展示的工具。相比较目前前端可以用的pdf节点方案,pdfjs是非常合适的。它有这么几个优点:1.完全js开 阅读全文
posted @ 2018-10-18 16:56 tianshidan1998 阅读(2748) 评论(0) 推荐(0) 编辑
摘要:此文已由作者吴家联授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 去年年中的时候,借着产品改版的机会,将之前的h5播放器好好整理重构了一番。之前的h5播放器较为简陋,有几个大问题:没有适配移动端(最大的不足)、没有提供直播模式、有一些历史遗留的bug没有修复。重构版除了解决 阅读全文
posted @ 2018-10-18 16:55 tianshidan1998 阅读(470) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 Primary(主)是MongoDB复制集中的最重要的角色,是能够接受客户端/Driver写请求的节点,(读请求也是默认路由到Primary节点)。在复制集中,与Primary相对应的有Secondary节点 阅读全文
posted @ 2018-10-18 16:52 tianshidan1998 阅读(1502) 评论(0) 推荐(0) 编辑
摘要:此文已由作者吴佳祥授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 好吧我承认这是篇任务。 最近看到个消息,ES2017已经定稿了,心想,我去,还完全没了解ES2016呢,ES8就定稿了,out了,这可咋办,赶紧Google(Baidu)去! 不过从ES6(2015)之后,t 阅读全文
posted @ 2018-10-18 16:52 tianshidan1998 阅读(297) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 MongoDB中WiredTiger的参数配置主要通过 wiredtiger_open (http://source.wiredtiger.com/2.9.1/group__wt.html#ga9e6adae 阅读全文
posted @ 2018-10-18 15:53 tianshidan1998 阅读(302) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 这篇文章,源于RDS组内的一次饭后闲聊,两位小伙伴在探讨InnoDB启用压缩后的种种,比如在磁盘上是怎么存放数据的,数据页的大小是多少?怎么知道一个页里面可以写入多少压缩前的数据等等。两年前曾看过InnoDB 阅读全文
posted @ 2018-10-18 15:52 tianshidan1998 阅读(290) 评论(0) 推荐(0) 编辑
摘要:此文已由作者徐迪授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 讲到验证码识别,大家第一个可能想到tesseract。诚然,对于OCR而言,tesseract确实很强大,自带的字模能识别绝大多数规整的中英文。但是验证码毕竟不是OCR。对于现在简单的验证码,其干扰都很难规整的 阅读全文
posted @ 2018-10-18 15:51 tianshidan1998 阅读(658) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 复制集(Replica Set)是MongoDB核心组件,相比早期版本采用的主从(Master-Slave)架构,复制集具有很多天然的优势,包括自动故障恢复、多机房部署、读写行为控制等。本文介绍复制集中最基础 阅读全文
posted @ 2018-10-18 15:37 tianshidan1998 阅读(894) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 1、Format_description_event问题: 假设以上是使用 ../mysql/bin/mysqlbinlog -v --start-position=1094 mysql-bin.000036 阅读全文
posted @ 2018-10-18 14:57 tianshidan1998 阅读(424) 评论(0) 推荐(0) 编辑
摘要:此文已由作者温正湖授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 一、RDS外部实例迁移需求 RDS(关系型数据库服务)作为网易云计算的基础性组件,已经承载了公司多个产品的数百个的数据库实例,且在可以预期的时间内,RDS线上的实例数量还会快速增加。在目前这些实例中有不少是从 阅读全文
posted @ 2018-10-18 14:56 tianshidan1998 阅读(360) 评论(0) 推荐(0) 编辑
摘要:3月的某一天需求同学说:我们想做一个爆款的回流H5。 好的事实上并没有这么夸张。 不过我们确实是第一次真正意义上做这样一个以互动展示为主要形式、以传播和拉回流为主要目的的H5。 虽然最后也没有成为真正意义上的爆款,但也有一些实施过程中的经验和教训。 人员配置上: 运营粥同学提需求; 编辑玥同学整理需 阅读全文
posted @ 2018-10-18 14:50 tianshidan1998 阅读(603) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王慎为授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 MySQL 5.7中包括了很多让人耳目一新的新特性,其中就包括了InnoDB Transparent Page Compression,姑且称之为InnoDB透明页压缩。其实透明页压缩这个东西,早就关注过,其 阅读全文
posted @ 2018-10-18 14:31 tianshidan1998 阅读(204) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王游授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 《项目管理之美》的序言很有意思,作者说本书是“不依赖任何正规的理论,而是针对核心情况,提供建议来说明如何正确的处理它们”。也就是说,本书并不是为了阐明某种理论而作,而是抛出实践中出现的现实问题加以引申,并给出建 阅读全文
posted @ 2018-10-18 14:21 tianshidan1998 阅读(922) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王振华授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 工作期间,一直在用Restify开发或维护大大小小的API系统,现在分享一下一些个人觉得不错的Tips。 充分利用middleware机制 这里的middleware指的就是处理请求过程中一个独立的小函数,众 阅读全文
posted @ 2018-10-18 14:02 tianshidan1998 阅读(209) 评论(0) 推荐(1) 编辑
摘要:此文已由作者王慎为授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 “难测莫过人心”,一个人要完全了解另外一个人几乎是不可能的事情。但是,优秀的团队协作又非常依赖团队成员间的深入了解。因此,拉近“人心”,促进团队成员相互了解就成了团队建设的重要工作。作为团队建设的主要负责人, 阅读全文
posted @ 2018-10-18 11:30 tianshidan1998 阅读(289) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王晓明授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 各位看官,可能看到标题的你一定认为这是一篇涉嫌“炒作”的文章,亦或是为了吸引眼球而起的标题,恭喜你猜对了一半,确实是为了吸引大家的关注而起的这个标题,不过不是为了“炒作”而只是为了让更多人关注bug,重视bu 阅读全文
posted @ 2018-10-18 10:53 tianshidan1998 阅读(212) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王翔授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 使用react-native的时候能够看到不少函数调用式的组件,像LinkIOS用来呼起url请求 actionSheetIOS用来实现ios客户端底部弹起的选择对话框 这些组件的使用方式都大同小异,通过声明一 阅读全文
posted @ 2018-10-18 09:44 tianshidan1998 阅读(1047) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王文学授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 网易宝支撑了整个集团业务绝大部分的支付场景,平均每天的支付订单有100万单,接近1亿的交易额。对系统的可用性要求极高。下面就从我的理解上说说网易宝的系统是如何实现高可用的。 1. 网易宝系统的整体架构 先看看 阅读全文
posted @ 2018-10-18 09:43 tianshidan1998 阅读(495) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王慎为授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 一、terraform介绍 随着应用上云的常态化,资源栈动态管理的需求对用户也变得更加急切。资源编排(Resource Orchestration Service, ROS)能够简化云计算资源管理和自动化运维 阅读全文
posted @ 2018-10-18 09:42 tianshidan1998 阅读(757) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王婷英授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 缓存,看到这两个字,第一反应,最近怎么又要弄缓存的改造啊,这个测试好复杂,一不不留心就踩一个线上bug。实在头疼。一般对于这方面的测试,都不会掉以轻心。但还是会踩到雷。那么怎么做才可以又快又好完成这个任务呢? 阅读全文
posted @ 2018-10-18 09:41 tianshidan1998 阅读(204) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王婷英授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 为了尽可能多的释放手工测试,提高测试效率,我们都会想到使用自动化测试,如http接口自动化测试、doubbo接口自动化测试、UI自动化测试等一系列的自动化测试。让我们觉得原来自动化测试的种类也是多彩多姿的。 阅读全文
posted @ 2018-10-18 09:35 tianshidan1998 阅读(441) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王婷英授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 在平时的测试中,一般情况下,我们都是比较关注功能业务测试,以及对应的接口测试,很少去关注对应的业务设计上存在的安全漏洞测试分析。随着行业对安全的要求越来越高,同时我们电商是经常在网络上发生交易操作的网站,更是 阅读全文
posted @ 2018-10-18 09:34 tianshidan1998 阅读(315) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王诗沐授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 如何能低成本地快速获取大量目标用户,而不是与竞争对手持久战? 这在如今的互联网上并不常见。现在,大部分行业都已经是竞争多时的红海,而蓝海市场的技术、资源壁垒非常之高,一般产品望尘莫及。在竞争激烈的红海市场中, 阅读全文
posted @ 2018-10-17 17:19 tianshidan1998 阅读(189) 评论(0) 推荐(0) 编辑
摘要:当创业热潮进入新阶段,会有哪些新思想、新出路、新趋势?11月24日,网易将在杭州举办首届“网易裂变前沿峰会”,邀请全球知名设计师、企业家、艺术家、科学家,在现场分享他们的思考与洞察。此外,同一天下午还将举行2018CITC全国总决赛,来自全国15个城市的最强20参赛项目将进行最终角逐,赢取大奖,并与 阅读全文
posted @ 2018-10-17 16:50 tianshidan1998 阅读(144) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王慎为授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 disconf-spring-boot-starter 使用方法: 引入maven依赖:<dependency> <groupId>com.netease.haitao.sc</groupId> <artif 阅读全文
posted @ 2018-10-17 13:01 tianshidan1998 阅读(250) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王荣涛授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 首先XP系统和Vista以后的系统,这两个消息的处理方式是不同的。 XP系统 系统发送WM_QUERYENDSESSION,如果你返回FALSE,那么大多数情况下,系统的注销操作会被终止,并且接下来收到的WM 阅读全文
posted @ 2018-10-17 12:41 tianshidan1998 阅读(266) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王荣涛授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 FTS5简介 前文已经介绍了FTS3/FTS4,本文着重介绍它们的继任者FTS5。 FTS5是在SQLite 3.9.0中被引入的,很可惜的是目前很多OS或应用软件都尚未开始使用这个版本或者更新的3.10.x 阅读全文
posted @ 2018-10-17 12:23 tianshidan1998 阅读(528) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王攀授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 简介 对于今天的移动、桌面客户端应用而言,离线全文检索的需求已经十分强烈,我们日常使用的邮件客户端、云音乐、云笔记、易信等就是离线全文检索的潜在用户。 作为目前使用最为广泛的嵌入式数据库,SQLite3其实内置 阅读全文
posted @ 2018-10-17 12:02 tianshidan1998 阅读(3081) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王荣涛授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 Message loop,即消息循环,在不同系统或者机制下叫法也不尽相同,有被叫做event loop,也有被叫做run loop或者其他名字的,它是一种等待和分派消息的编程结构,是经典的消息驱动机制的基础。 阅读全文
posted @ 2018-10-17 11:23 tianshidan1998 阅读(309) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王强授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验~ 图表设计的过程实则是将数据进行可视化表达的过程,其研究的对象源头是数据,然而,数据本身价值不大,所谓的“数据”往往是由一些看起来有用和没用的“数字”组成,用户很难从这些散乱的数字中发现有价值的信息,so,如果把 阅读全文
posted @ 2018-10-17 11:03 tianshidan1998 阅读(262) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王盼授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 前情提要 本文仅讨论云主机(虚拟机)、云硬盘(块存储)、云网络(普通虚拟网络或SDN)相关的IaaS服务,相关论调仅代表个人意见,如有谬误,敬请批评指正。 这篇文章在7月份就列好了大纲,但是一直拖拖拉拉到11月 阅读全文
posted @ 2018-10-17 10:44 tianshidan1998 阅读(176) 评论(0) 推荐(0) 编辑
摘要:欢迎访问网易云社区,了解更多网易技术产品运营经验。 10月16日,2018年 AIIA人工智能开发者大会在苏州举办。会议邀请了国内外人工智能产业知名人物、国家政府主管部门、行业内顶尖企业、知名学者代表、开源社区优秀贡献团队及个人,共同交流了技术现状趋势、生态建设经验以及开源社区运营。 网易云易盾CT 阅读全文
posted @ 2018-10-17 10:23 tianshidan1998 阅读(498) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王盼授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验~ 现状 计算节点发生磁盘损坏等数据无法恢复的异常时,节点上的云主机系统盘无法恢复,导致云主机只能被清理重建计算节点宕机但磁盘数据可用时,重启即可恢复所有云主机的运行计算节点多次宕机(或一段时间内频繁宕机),则需要 阅读全文
posted @ 2018-10-17 10:03 tianshidan1998 阅读(302) 评论(0) 推荐(0) 编辑
摘要:此文已由作者王攀授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 引言: 目前我们团队在做的供应链协同决策系统(简称河洛,取河洛交汇,河图洛书之意),定位相当于一个计划、控制与决策引擎,贯通严选各系统(累加起来等于ERP),并期望通过数据优化严选各业务及供应商的生产制造,通过 阅读全文
posted @ 2018-10-17 09:43 tianshidan1998 阅读(228) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者:王攀 晚上听阮良老师讲话有感,公司体量大,花钱不心疼,如果不经过严谨的分析与研究就执行决策,确实会造成严重的资金浪费。 案例用于参考及反思我们自身存在的问题,一些经过本案例验证的方法论需结合具体产品具体场景进行适用,此处仅供参考 网易云免费体验馆,0成本体验20+款云产品! 阅读全文
posted @ 2018-10-16 15:17 tianshidan1998 阅读(235) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者:王攀 我们知道,大部分公司都拥有了自己的财务,OA,CRM 等系统。这些系统都有自己的独立数据库,记录着企业运行情况某个方面的数据。但是单独看这些系统的报表,并不一定能对企业运行情况有全面客观的了解。就像只凭身高不能判断一个人是否健康,所以体检的时候我们需要化验许多指标,做 阅读全文
posted @ 2018-10-16 15:16 tianshidan1998 阅读(113) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者:王潘安 以下是本人在学习Google的Mesa数据仓库论文的记录,翻译出来给大家分享,翻译水平有限,请多多包涵。因论文比较长,本人将论文按照Mesa不同的模块分开翻译,方便阅读。 摘要:Mesa是一个可伸缩性的分析型数据仓库系统,它主要为Google的互联网广告业务服务。M 阅读全文
posted @ 2018-10-16 15:11 tianshidan1998 阅读(698) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 对于很多人来讲,仿佛昨天才燃起来的人工智能之火,转眼间烧遍了各个角落,如今我们的生活中,处处渗透着人工智能。10月16日,2018年 AIIA人工智能开发者大会在苏州举办,网易云易盾CTO朱浩齐将出席本次大会『AI安全分论坛』,分享《人工智能在内容安全的应用实践》 先来为各位读者 阅读全文
posted @ 2018-10-16 13:45 tianshidan1998 阅读(237) 评论(0) 推荐(0) 编辑
摘要:在说如何应对之前,易盾先给各位盾友梳理移动端APP可能遇到哪些作弊风险。1. 渠道商刷量,伪造大量的下载量和装机量,但没有新用户注册;2. 对于电商、P2P、外卖等平台,会面临散户或者团队刷子的注册->领券(参加活动)->利用平台规则获利或变现;(题主的公司应该就属于这种类型)3. 对于UGC社区或 阅读全文
posted @ 2018-10-16 13:20 tianshidan1998 阅读(412) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者:巩爽 十一过完,离2018年结束就只剩下85天啦!是不是2016年许下的2017年的梦想,在2018年还没有实现? 做过的项目仿佛都小有成就,可惜只是内部自嗨,想做域外宣传却毫无预算,别说发稿,连500块找枪手写稿的经费都扣不出来。 没关系,看完这篇文章,保佑你85天内能在 阅读全文
posted @ 2018-10-16 13:11 tianshidan1998 阅读(687) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者:王潘安 执行阶段 launchTask 回到Driver类的runInternal方法,看以下执行过程。在runInternal方法中,执行过程调用了execute方法。execute方法里面的内容很多,但是跟我们有关系的就只有launchTask方法。这个方法里面有这么关 阅读全文
posted @ 2018-10-16 11:56 tianshidan1998 阅读(376) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者:王潘安 快速解决方法 目前的hive客户端在执行desc tablexxx和show create table xxx命令的时候,字段的中文注释会出现乱码情况,如(????)。在使用 ROW FORMAT SERDE 'org.openx.data.jsonserde.Js 阅读全文
posted @ 2018-10-16 11:46 tianshidan1998 阅读(2300) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者:王鲁才 客户端开发中不可避免的需要接触到访问网络的需求,如何把访问网络模块设计的更具有扩展性是每一个移动开发者不得不面对的事情。现在有很多主流的网络请求处理框架,如Square公司的OkHttp,Google推出的Volley,还有在OkHttp基础上进行封装的Retrof 阅读全文
posted @ 2018-10-16 11:44 tianshidan1998 阅读(475) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者: 汪谦 今年3月28日之后,杭州开始实行摇号买房,买房得凭运气。倘若侥幸摇中,选房也需要好好做一番功课。一般,摇中的购房者将根据摇到的选房顺序依次现场选房,每人只有1分钟的选房时间,超时即认为放弃选房资格。 这么短的时间内如何快速选到自己满意且性价比高的房子呢?本文将介绍3 阅读全文
posted @ 2018-10-16 11:41 tianshidan1998 阅读(264) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者:王利蓉 最近web端全站重构,所有的页面都大大小小都有些变动,UI就全军覆没了,用例从登录改,改到个人信息页面发现根以前的实现方式完全不一样,这可怎么解决 1.以前的实现(option value的对应),现在是新页面 我就找个其他网站的参考下 这种通过直接给value赋值 阅读全文
posted @ 2018-10-16 09:51 tianshidan1998 阅读(595) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者:王磊 笔者目前就职于一家互联网公司,服务的部门主营通信与视频的PaaS层业务,该业务属于技术驱动型业务,技术门槛相对较高、基础设施建设成本较大,主要面向用户群体为从事通信与视频业务的应用型公司。 随着市场需求的扩大、品牌影响力的提升,公司的战略方向也做了一定的调整,由直面技 阅读全文
posted @ 2018-10-16 09:48 tianshidan1998 阅读(250) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者:王健 摘要 NOS(网易对象存储)在实现多机房(杭州机房,北京机房等)部署后,允许一个用户在建桶时选择桶所属机房。在此基础上,我们实现了跨机房的数据复制,进一步实现了跨机房的数据灾备方案。用户可以: 通过简单的配置,即可让自己上传的数据异步准实时地同步到另一个机房,实现跨机 阅读全文
posted @ 2018-10-16 09:46 tianshidan1998 阅读(200) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者:王健 一、 背景 此处所说的服务监控程序,是通过模拟用户的请求,对一个系统的服务质量进行监控的程序。服务监控程序的主要目的是,从用户的角度出发,通过发送端到端的请求,确认系统对外提供的服务是否正常。 简单来说,一个好的服务监控程序应该具备以下功能: 1. 检测服务是否存活 阅读全文
posted @ 2018-10-16 09:32 tianshidan1998 阅读(273) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者:王佳楠 一、概述 现如今在大规模数据处理分析的技术领域中,Hadoop及其生态内的各功能组件占据了绝对的统治地位。Hadoop原生的MapReduce计算框架由于任务抽象简单、计算流程固定、计算的中间结果写入磁盘引起大量读写开销等短板,正逐步的被基于内存的分布式计算框架Sp 阅读全文
posted @ 2018-10-16 09:26 tianshidan1998 阅读(210) 评论(0) 推荐(0) 编辑
摘要:知乎活动的帖子:https://zhuanlan.zhihu.com/p/46803337 参与规则:在知乎帖子评论回复以下你最想看的一本书名称即可。注意是知乎帖子回复,不是本帖回复哦 1.人工智能 《图解深度学习与神经网络:从张量到TensorFlow实现》 编辑推荐 √290张图+110个可执行 阅读全文
posted @ 2018-10-15 17:25 tianshidan1998 阅读(286) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者:王鸽 不知你是否还记得当年风靡一时的2048这个游戏,一个简单而又不简单的游戏,总会让你在空闲时间玩上一会儿。 在这篇文章里,我们将使用开源的H5框架——Phaser来重现这个游戏。这里你可以了解到游戏内的状态管理、Sprite元件对象等,以及如何使用Preload、Cre 阅读全文
posted @ 2018-10-15 13:32 tianshidan1998 阅读(1845) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者:王飞 错误日志 错误日志要仔细看,第一行不一定就是关键点,这个错误出现的时候,比较靠后,其中关键行就是下面这句。 问题找到了,那如何解决呢? 网上给出了一些解决办法,大致可以分为以下几种,我也尝试了一下。 方法一 调整Xss参数 Xss是什么呢?它是用来设置每个线程的堆栈大 阅读全文
posted @ 2018-10-15 13:30 tianshidan1998 阅读(667) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区 作者:王飞 一、前言 一切问题的起源就是来自一个问题“为什么我打的jar包没有注解?”,带着这个疑问查了一圈资料,原来问题主要是在没有将源码中的注释进行抽取打包,自然我们在引用jar包的时候,无法获得注解。 二、让maven发布带上注解 这个方法很简单,只需在build->plu 阅读全文
posted @ 2018-10-15 13:26 tianshidan1998 阅读(2091) 评论(0) 推荐(1) 编辑
摘要:本文来自网易云社区 作者:田躲躲 用户行为统计(User Behavior Statistics, UBS)一直是互联网产品中必不可少的环节,也俗称埋点。对于产品经理,运营人员来说,埋点当然是越多,覆盖范围越广越好。通过用户行为分析系统可洞悉用户基本操作习惯、探析用户心理。通过行为数据的补充,构建出 阅读全文
posted @ 2018-10-15 12:01 tianshidan1998 阅读(1378) 评论(0) 推荐(0) 编辑
摘要:上篇介绍了PolarDB数据库及其后端共享存储PolarFS系统的基本架构和组成模块,是最基础的部分。本篇重点分析PolarFS的数据IO流程,元数据更新流程,以及PolarDB数据库节点如何适配PolarFS这样的共享存储系统。 PolarFS的数据IO操作 写操作 一般情况下,写操作不会涉及到卷 阅读全文
posted @ 2018-10-12 17:27 tianshidan1998 阅读(1326) 评论(0) 推荐(0) 编辑
摘要:PolarDB是阿里云基于MySQL推出的云原生数据库(Cloud Native Database)产品,通过将数据库中计算和存储分离,多个计算节点访问同一份存储数据的方式来解决目前MySQL数据库存在的运维和扩展性问题;通过引入RDMA和SPDK等新硬件来改造传统的网络和IO协议栈来极大提升数据库 阅读全文
posted @ 2018-10-12 17:17 tianshidan1998 阅读(867) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区,转载务必请注明出处。 1. 概述 live2d是由日本Cybernoids公司开发,通过扭曲像素位置营造伪3d空间感的二维动画软件。官网下载安装包直接安装可以得到两种软件,分别是Cubism Modeler和Cubism Animator,最后我们还需要安装第三个软件Viewer 阅读全文
posted @ 2018-10-11 17:26 tianshidan1998 阅读(4228) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区,转载务必请注明出处。 背景 消息中间件是用来系统间通信、异步解耦、削峰填谷的重要手段,个人认为一个比较靠谱的Mq,应该具备以下特点 控制投递:消息消费失败,支持消息有节奏的重新投递延迟消费:支持消息延迟消费,用来解决诸如消息乱序的场景流控消费:消费支持流控,真正的支持削峰填谷消费 阅读全文
posted @ 2018-10-11 17:16 tianshidan1998 阅读(274) 评论(0) 推荐(0) 编辑
摘要:1、对查询字段建索引; 这个效果很明显,建索引可以提升非常大的速度; 在这里不得不讲一下普通索引和唯一性索引的区别: 普通索引 普通索引的唯一任务是加快对数据的访问速度。因此,应该只为那些最经常出现在查询条件(WHERE column = )或排序条件(ORDER BY column)中的数据列创建 阅读全文
posted @ 2018-10-11 16:06 tianshidan1998 阅读(233) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区。 近日,网易云易盾实验室AI算法研究员的一篇论文《MULTI-VIEW AUTOENCODER FOR IMAGE FEATURE LEARNING WITH STRUCTURED NONNEGATIVE LOW RANK》提出了一种对多视角多模态特征信息进行有效融合的自编码器神 阅读全文
posted @ 2018-10-11 15:35 tianshidan1998 阅读(211) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区,转载务必请注明出处。 一、前言 一切问题的起源就是来自一个问题“为什么我打的jar包没有注解?”,带着这个疑问查了一圈资料,原来问题主要是在没有将源码中的注释进行抽取打包,自然我们在引用jar包的时候,无法获得注解。 二、让maven发布带上注解 这个方法很简单,只需在build 阅读全文
posted @ 2018-10-11 15:31 tianshidan1998 阅读(430) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区,转载务必请注明出处。 快应用号称是要替代微信小程序的,我们来看看,他到底是个什么东西呢? 什么是快应用 根据官方的说法,快应用是基于手机硬件平台的新型应用形态,标准是由主流手机厂商(小米、华为、中兴、金立、联想、魅族、努比亚、OPPO、vivo)组成的快应用联盟联合制定的;快应用 阅读全文
posted @ 2018-10-10 16:42 tianshidan1998 阅读(259) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区,转载务必请注明出处。 MongoDB是一个非常有前途的数据库,MongoDB官方对自己的定位是通用数据库,其实这个定位跟MySQL有些像。虽其流行度还远未达到MySQL的水平,但笔者有个可能不恰当的比较,MongoDB就像N年前的MySQL,随着时间的推移,会变得越来越强大,也会 阅读全文
posted @ 2018-10-10 15:31 tianshidan1998 阅读(163) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区,转载务必请注明出处。 有时候我们需要运行用户输入的 JavaScript 脚本(以下简称脚本)。对于我们来说,这些脚本是不可信任的,如果在当前的 Context 中运行这些脚本,它们就能获取到像 cookie、localStorage、DOM 元素等隐私数据,会有潜在的安全问题。 阅读全文
posted @ 2018-10-10 15:16 tianshidan1998 阅读(475) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区,转载务必请注明出处。 随着网络文学的发展,影响力逐渐扩大,越来越多的同事在工作中遇到需要和这些作者打交道的时候。对于作者这个群体,很多时候都是只闻其书,不见其人。要跟这样的群体打交道,谈约稿,谋合作,就会遇到不少只有与作者交流时候才会碰到的问题。今天就简单来聊一下。 1、如何寻找 阅读全文
posted @ 2018-10-10 15:14 tianshidan1998 阅读(531) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区,转载务必请注明出处。 本文将从零开始搭建一个MySQL Group Replication集群,包含3个节点。简单介绍如何查询MGR集群状态信息。并介绍如何进行MGR节点上下线操作。先贴一份MySQL配置文件,如下: explicit_defaults_for_timestamp 阅读全文
posted @ 2018-10-10 14:51 tianshidan1998 阅读(661) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区,转载务必请注明出处。 一、什么是用户体验 用户体验,英文叫做user experience。一个较常见的定义是“指用户访问一个网站或者使用一个产品时的全部体验。他们的印象和感觉,是否成功,是否享受,是否还想再来使用。他们能够忍受的问题,疑惑和BUG的程度。” 而在我看来,用户体验 阅读全文
posted @ 2018-10-10 14:31 tianshidan1998 阅读(346) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区,转载务必请注明出处。 Spring Cloud 是spring团队推出的基于SpringBoot的分布式微服务框架,为开发者提供了在分布式系统(如配置管理、服务发现、断路器、智能路由、微代理、控制总线、一次性 Token、全局锁、决策竞选、分布式会话和集群状态)操作的开发工具。 阅读全文
posted @ 2018-10-10 11:51 tianshidan1998 阅读(539) 评论(0) 推荐(0) 编辑
摘要:作者:网易有数郑栋。 一、为什么企业需要一套完善的用户行为埋点和分析平台 产品初创期间,需要分析天使用户的行为来改进产品,甚至从用户行为中得到新的思路或发现来调整产品方向;产品成长过程,通过对用户行为的多角度(多维)分析、对用户群体的划分以及相应行为特征的分析和比较,来指导产品设计、运营活动,并对市 阅读全文
posted @ 2018-10-09 17:41 tianshidan1998 阅读(1303) 评论(0) 推荐(0) 编辑
摘要:本文来自网易云社区。 如何能低成本地快速获取大量目标用户,而不是与竞争对手持久战? 这在如今的互联网上并不常见。现在,大部分行业都已经是竞争多时的红海,而蓝海市场的技术、资源壁垒非常之高,一般产品望尘莫及。在竞争激烈的红海市场中,怎样才能做到四两拨千斤呢? 这通常是可遇不可求的机会,需要竞争对手留下 阅读全文
posted @ 2018-10-09 17:25 tianshidan1998 阅读(153) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示