11 2019 档案
摘要：概述 互联网应用发展到今天，从单体应用架构到SOA以及今天的微服务，随着微服务化的不断升级进化，服务和服务之间的稳定性变得越来越重要，分布式系统之所以复杂，主要原因是分布式系统需要考虑到网络的延时和不可靠，微服务很重要的一个特质就是需要保证服务幂等，保证幂等性很重要的前提需要分布式锁控制并发，同时缓
阅读全文
摘要：2019年双11成交额再创新高，总成交额达到2684亿元。 双11不仅仅是中国用户的双11，更是全世界剁手党的双11；国内的用户在买买买，海外的用户也在买买买。2019年双11在中国内地之外的区域成交额排名依次是：中国香港，中国台湾，美国，澳大利亚，新加坡，日本，马来西亚，英国，中国澳门和加拿大。
阅读全文
摘要：图1 天猫双11成交额 2019年天猫双11成交额，2684亿！核心系统100%上云！全球最大流量洪峰，阿里云扛住了。 狂欢背后的技术栈 网上轻松购物体验实际上是背后复杂的技术组成的，这是一个简化的通用电商系统架构，由很多产品和业务组件组成。 图2 简化电商系统架构 这些业务组件核心系统今年100%
阅读全文
摘要：2019是小程序集中爆发并形成稳定格局的一年。依托超级APP的流量红利和战略布局，基于场景需求快速链接聚合平台，小程序已融入生活方方面面。对擅长与流量打交道的中小企业创业者们而言，如何与用户建立全渠道链接，从流量捕手到流量塘主的进阶是他们突破重围、走向成功的必经之路。 尤其在零售和餐饮领域，作为变现
阅读全文
摘要：软件发展到今，企业业务系统日趋复杂，开发一个业务系统需要掌握和关注的知识点越来越多。除实现业务逻辑本身，还需考虑很多非业务的基础技术系统：如分布式cache和队列、基础服务能力集成、容量规划、弹性伸缩等。这种情况下，研发门槛逐渐上升，效率逐渐下降。企业很难做到低成本创新、试错和快速扩展业务。 阿里云
阅读全文
摘要：大数据作为未来技术的基石已成为国家基础性战略资源，挖掘数据无穷潜力，将算力推至极致是整个社会面临的挑战与难题。 Apache Flink 作为业界公认为最好的流计算引擎，不仅仅局限于做流处理，而是一套兼具流、批、机器学习等多种计算功能的大数据引擎，以其高吞吐低延时的优异实时计算能力、支持海量数据的亚
阅读全文
摘要：人工智能是未来十年最重要的技术革命与驱动力，在各行各业产生着日益重要的作用，它与大数据的发展相辅相成，不仅推动人类社会迈入更智慧的世界，也为数据的应用带来无可估量的价值。 11 月 28 - 30 日，Flink Forward Asia 2019 人工智能专场将聚焦于 Flink 在机器学习上的新
阅读全文
摘要：数据仓库的建设是“数据智能”必不可少的一环，也是大规模数据应用中必然面临的挑战。在智能商业中，数据的结果代表了用户反馈、获取数据的及时性尤为重要。快速获取数据反馈能够帮助公司更快地做出决策，更好地进行产品迭代，实时数仓在这一过程中起到了不可替代的作用。 如何更好的建设实时数仓、有哪些优秀的生产实践经
阅读全文
摘要：反压（backpressure）是实时计算应用开发中，特别是流式计算中，十分常见的问题。反压意味着数据管道中某个节点成为瓶颈，处理速率跟不上上游发送数据的速率，而需要对上游进行限速。由于实时计算应用通常使用消息队列来进行生产端和消费端的解耦，消费端数据源是 pull-based 的，所以反压通常是从
阅读全文
摘要：最新消息，阿里云宣布为企业用户推出云服务器免费12个月扶持计划，助力中小企业0成本上云。阿里云表示，该计划每年投入2000万，超5万中小企业受益，本计划已于2019年11月27日上线。 阿里云智能总裁张建锋在2019阿里云峰会上海站上提出“全面上云的拐点到了！”为了更好的帮助中小企业成长，帮助企业从
阅读全文
摘要：本文整理自易立在 2019 携程技术峰会上发表的题目为《拐点已至，云原生引领数字化转型升级》的演讲。 今天我跟大家分享的题目是“拐点已至，云原生引领数字化转型升级”。先做个简单的自我介绍，我叫易立，来自于阿里云容器平台，从 2015 年开始负责阿里云容器产品，之前在 IBM 工作 14 年，主要负责
阅读全文
摘要：导读：上一篇文章《6 个 K8s 日志系统建设中的典型问题，你遇到过几个？》中我们介绍了为什么需要一个日志系统、为什么云原生下的日志系统如此重要以及云原生背景下日志系统的建设难点，相信 DevOps、SRE、运维等同学看了之后深有体会。本篇文章单刀直入，会直接跟大家分享一下如何在云原生的场景下搭建一
阅读全文
摘要：containerd 是一个开源的行业标准容器运行时，关注于简单、稳定和可移植，同时支持 Linux 和 Windows。 2016 年 12 月 14 日，Docker 公司宣布将 Docker Engine 的核心组件 containerd 捐赠到一个新的开源社区独立发展和运营。阿里云、AWS、
阅读全文
摘要：前言 Apache Dubbo 是由阿里开源的一个RPC框架，除了基本的 RPC 功能以外，还提供了一整套的服务治理相关功能。目前它已经是 Apache 基金会下的顶级项目。 而 dubbo-go 则是 Dubbo 的 Go 语言实现。 最近在 dubbo-go 的 todo list 上发现，它还
阅读全文
摘要：超过200个国家和地区共5144万人观看；浙江卫视、东方卫视55城总收视达2.39，稳居同时段市场第一；优酷直播间63%观看晚会的用户参与了互动；微博68.2亿的主话题阅读量；2019天猫双11狂欢夜（下简称“猫晚”），又一次创造了奇迹。 阿里云视频云已经连续5年为猫晚保驾护航，每一年的猫晚直播，技
阅读全文
摘要：流控降级中间件 Sentinel 1.7.0 版本正式发布，引入了 Envoy 集群流量控制支持、properties 文件配置、Consul/Etcd/Spring Cloud Config 动态数据源适配等多项新特性与改进。详细特性列表请参考 Release Notes，欢迎大家使用并提出建议。
阅读全文
摘要：2019年11月16日 SDWAN 大会在北京正式召开。阿里云网络资深产品专家吴天议先生继阿里云网络研究员祝顺民先生发表了对云原生SDWAN的进化与展望之后（原文请见https://bit.ly/2KAejJX），接续针对云原生SDWAN 应用做了进一步详细且深入的解读。 基于整体阿里云SDWAN产
阅读全文
摘要：第二届中国SD-WAN峰会于11月16日在北京盛大开幕，阿里云以黄金赞助商之名隆重参与。作为全球前三，亚太第一的云计算厂商，阿里云一直引领云网技术的演进及应用落地。过去一年，阿里云发布以云为中心的云原生SDWAN解决方案，助力企业用户简易、快速上云。今年在SDWAN峰会上，阿里云网络团队研究员祝顺民
阅读全文
摘要：简介： “企业1号位要不要懂技术？”，这是第七期“在湖边”活动的主旨论题。“奇葩大会”和“吐槽大会”史炎、大雄老师指导CEO们进行辩论和吐槽。金句不断：”项目洽谈的时候，客户总问我，技术够不够新，技术够不够成熟，在多少现场实施过。就像姑娘找男朋友的时候，过来就问你恋爱技巧够不够高，还希望你是个小鲜肉
阅读全文
摘要：近年来，随着越来越多的企业从传统经济向数字经济转型，云已经渐渐成为数据经济IT新常态。核心业务系统上云，云上的业务创新，这些都产生了大量的业务数据，这些数据也成为了企业最重要的资产、资源。 阿里云基于OSS的云上统一数据保护方案2.0，针对业务上云后数据保护所面临的挑战，提供多层次、全方位的数据保护
阅读全文
摘要：一、在线库不支持在线复杂查询 做在线业务的开发者经常会碰到这样的难题：在线数据库上面运行稍微复杂点的查询，在线业务就挂了！不管是单机数据库如MySQL、PG，还是分布式数据库，HBase、MongoDB、Cassandra都有这个问题。下面，本文就以HBase为例对该问题进行说明，其他库原理类似。
阅读全文
摘要：双11是一次大规模的全社会协作，要想让业务流、信息流和资金流做到顺畅、及时和精准地在整个双11系统中完成同步和读写，数据库是非常关键的技术环节。 今年双11期间，阿里自研数据库产品OceanBase、POLARDB以及其他多款数据库产品的共同支持下，保证了双11开始前15分钟整个系统没有任何抖动，数
阅读全文
摘要：一秒钟有多短？ 就在你眨眼看这篇文章的瞬间 它已然消逝 那么一秒钟，可以做什么呢？ 2019年双11，阿里云自研云原生数据库POLARDB创造了每秒8700万次的数据库处理（TPS）峰值新记录。眨眼间，即完成了8700万次计算。 在阿里云双11技术媒体发布会上，阿里云智能数据库事业部总经理曹伟表示，
阅读全文
摘要：作为首次“全面上云”的双11，阿里云征服了每秒订单峰值54.4万笔的世界新记录。正是在阿里云的保驾护航下，即使访问量是平时的5到6倍，小程序也鲜少出现卡顿或者宕机的现象，“依靠阿里云，我们整个天猫双11活动平稳落地。”一位小程序商家说到。 要问支付宝小程序商家本次“天猫双11”最大的感触是什么，许多
阅读全文
摘要：摘要：日常工作中，企业需要将通过ECS、容器、移动端、开源软件、网站服务、JS等接入的实时日志数据进行应用开发。包括对日志实时查询与分析、采集与消费、数据清洗与流计算、数据仓库对接等场景。本次分享主要介绍日志数据如何同步到MaxCompute。具体讲解如何通过Tunnel，DataHub，日志服务S
阅读全文
摘要：摘要：本次分享主要介绍 Hive数据如何迁移到MaxCompute。MMA（MaxCompute Migration Assist）是一款MaxCompute数据迁移工具，本文将为大家介绍MMA工具的功能、技术架构和实现原理，再通过实际操作MMA，演示将Hive数据迁移到MaxCompute。 演讲
阅读全文
摘要：中小企业福利！你有一张价值1376元的门票待领取！ 11月27日，36氪联合阿里云举办WISE“中小企业加速平台”发布会：多种权益和资源加速企业成功。让中小企业真正专注于核心业务，让靠谱的企业服务惠及更多领域。阿里云诚邀您参会，报名前50位送价值1376元的36氪Wise大会VIP两日门票（11.2
阅读全文
摘要：前言 随着大数据趋势的迅速增长，数据的重要性与日俱增，企业内看数据、用数据的诉求越来越强烈，其中最常见的就是各种经营报表数据：老板每日早晨9点准时需要看到企业核心的经营数据，以便进行企业战略及方向决策业务负责人不定期进行个性化的项目筹划，需要多维、及时的效果数据以优化项目安排小二精准营销活动开展，需
阅读全文
摘要：欢迎来到数据中台小讲堂！这一期我们来看看，作为阿里巴巴数据中台(OneData - OneModel、OneID、OneService)方法论的产品载体，Dataphin如何帮助传统零售企业实现数字化转型，并在短时间内新增100万用户？ 传统营销的痛点：数据分散分析难 营销可谓是零售行业最重要的的业
阅读全文
摘要：Dataphin作为阿里巴巴数据中台OneData (OneModel、OneID、OneService)方法论的产品载体，帮助企业构建三大数据中心：基于数据集成形成的垂直数据中心、基于数据开发沉淀的公共数据中心和基于标签工厂构建的萃取数据中心。今天我们就一起来看看，Dataphin是如何基于One
阅读全文
摘要：研发小哥哥还在为公司里大量 API 只上不下，不可查不可用， 想找的 API 找不到而苦恼吗？业务方小姐姐还在为 API 开发时间长，业务相应不及时而抱怨吐槽吗？ 铛铛铛，Dataphin 数据服务 -- API 配置管理，闪亮登场！助力研发小哥哥五分钟搞定 API，提升业务响应速度，同时大大提升
阅读全文
摘要：本文由 Apache Flink Contributor 刘彪分享，本文对两大问题进行了详细的介绍，即什么是 Metrics、如何使用 Metrics，并对 Metrics 监控实战进行解释说明。 什么是 Metrics？ Flink 提供的 Metrics 可以在 Flink 内部收集一些指标，通
阅读全文
摘要：过去十年，面向整个数字时代的关键技术接踵而至，从被人们接受，到开始步入应用。大数据与计算作为时代的关键词已被广泛认知，算力的重要性日渐凸显并发展成为企业新的增长点。Apache Flink（以下简称 Flink）以其快速、准确的算力备受关注，如何将 Flink 更好的与大数据生态技术相结合，充分挖掘
阅读全文
摘要：有状态的计算作为容错以及数据一致性的保证，是当今实时计算必不可少的特性之一，流行的实时计算引擎包括 Google Dataflow、Flink、Spark (Structure) Streaming、Kafka Streams 都分别提供对内置 State 的支持。State 的引入使得实时应用可以
阅读全文
摘要：本文整理自司徒放（姬风）题目为《开源的黄金时代，阿里巴巴云原生开源的探索与实践》的演讲。 导读：从拥抱开源、贡献开源、自主开源，到赋能开源，开源已升级为阿里技术战略之一，且正为开发者源源不断地输送切实可见的价值。云原生是阿里开源的重要领域，短短几年，以 K8s 为核心的云原生开源生态迅猛发展，这是全
阅读全文
摘要：业界要闻 1.Helm 3 发布 美国时间 11 月 13 日，Helm 团队发布 Helm 3 第一个稳定版本。Helm 3 以 Helm 2 的核心特性为基础，改进了 chart 存储库、版本管理、安全性和 chart 库。在这个版本中，Helm 维护者整合了来自社区的反馈和请求，以更好地满足
阅读全文
摘要：导读：Cloud Toolkit 是本地 IDE 插件，帮助开发者更高效地开发、测试、诊断并部署应用。通过插件，可以将本地应用一键部署到任意服务器，甚至云端（ECS、EDAS、Kubernetes 和 小程序云 等）；并且还内置了 Arthas 诊断、Dubbo工具、Terminal 终端、文件上传
阅读全文
摘要：作为首次“全面上云”的双11，阿里云征服了每秒订单峰值54.4万笔的世界新记录。正是在阿里云的保驾护航下，即使访问量是平时的5到6倍，小程序也鲜少出现卡顿或者宕机的现象，“依靠阿里云，我们整个天猫双11活动平稳落地。”一位小程序商家说到。 要问支付宝小程序商家本次“天猫双11”最大的感触是什么，许多
阅读全文
摘要：如今，双11不光是购物狂欢节，更是对技术的一次“大考”，对于阿里巴巴企业内部运营的基础保障技术而言，亦是如此。 回溯双11历史，这背后也经历过“小米加步枪”的阶段：作战室从随处是网线，交换机放地上的“一地狼藉”；到如今媲美5G的wifi网速，到现场却看不到一根网线；从当年使用商用AP(无线路由器)，
阅读全文
摘要：dubbo-go 的前世今生 dubbo-go 是目前 Dubbo 多语言生态最火热的项目。dubbo-go 最早的版本应该要追溯到 2016 年，由社区于雨同学编写 dubbo-go 的初版。当时很多东西没有现成的轮子，如 Go 语言没有像 netty 一样的基于事件的网络处理引擎、 hessia
阅读全文
摘要：前言：本文介绍了饿了么交付中心由python语言栈转换到java语言栈大致过程,一来是对前段时间的工作做下总结，另外也是想通过此次总结为其他应用服务转型提供些借鉴。写的不好，欢迎板砖。 背景 饿了么并入阿里集团,为了能高效与集团内部系统协同对接,同时方便利用集团优势技术资源,更好的融入阿里集团技术生
阅读全文
摘要：随着业务规模的扩张，企业系统变得越来越复杂，在这种复杂的分布式系统架构下，难免会出现远程调用失败，消息发送失败，并发 bug 等等问题，这些问题最终会导致系统间的数据不一致，导致用户体验受损，用户利益受损，对平台来说就是产生资损。因此如何持续保障系统的业务稳定性对于企业来说是一个很重要的课题，本文旨
阅读全文
摘要：“不是任何一朵云都能撑住这个流量。中国有两朵云，一朵是阿里云，一朵叫其他云。”11月11日晚，阿里巴巴集团CTO张建锋表示，“阿里云不一样，10年前我们从第一行代码写起，构建了中国唯一自研的云操作系统飞天。” 阿里巴巴集团CTO、阿里云智能总裁张建锋 2019天猫双11再次刷新世界纪录，订单创新峰值
阅读全文
摘要：在刚刚过去的双十一，又是一个全民狂欢的盛宴,天猫双十一的成交量高达2684亿。无数小伙伴在淘宝、天猫里买买买，今年你又剁手了多少？言归正传，在你疯狂秒杀的时候，有没有发现，今年的购物体验一如既往的好，访问速度快，购物体验那个流畅。我在这里自豪的向大家宣布，我们阿里云解析DNS又一次完成了今年双十一的
阅读全文
摘要：摘要：大数据计算服务（MaxCompute，原名ODPS）是阿里云提供的一种快速、完全托管的EB级数据仓库解决方案。本文章中阿里云MaxCompute公有云技术支持人员刘力夺通过一个实验向大家介绍了阿里云关系型数据库产品RDS中的MySQL数据如何同步到MaxCompute，帮助用户大体了解MaxC
阅读全文
摘要：摘要：本次分享主要介绍Kafka产品的原理和使用方式，以及同步数据到MaxCompute的参数介绍、独享集成资源组与自定义资源组的使用背景和配置方式、Kafka同步数据到MaxCompute的开发到生产的整体部署操作等内容。 演讲嘉宾简介：耿江涛，阿里云智能技术支持工程师 以下内容根据演讲视频以及P
阅读全文
摘要：2019年“双十一”，是阿里天猫奋战的第11个年头，更是阿里在电商行业的一个重要的里程碑。今年，整个阿里系也在“一心一役”全面出击，作为阿里旗下的重要大将——阿里云也加入了这场购物狂欢，将火热的购物氛围从C端消费者延伸到了B端企业用户。 作为阿里云的战略发展点，阿里云云市场承接着中国云生态各个链条产
阅读全文
摘要：作为全球规模最大的网络技术盛会之一，GNTC全球网络技术大会是网络技术发展的重要风向标，包含战略规划、产业方向、技术趋势、应用创新等皆汇集于此。而作为云服务商代表，阿里云再度受邀以顶级钻石合作伙伴之名全面参与此次盛会。本次10/22-24 南京2019 GNTC大会上，阿里云网络资深技术专家 宗志刚
阅读全文
摘要：本次10/22-24 南京2019 GNTC大会上，阿里云网络云原生SDWAN网络2.0 由于独特的云原生定位、创新的解决方案，及成熟的应用案例、行业用户，获得行业媒体C114中国通信网、产业专家高度关注，也是GNTC Innovation Awards 创新应用奖的参选方案之一。以下就为大家深度揭
阅读全文
摘要：一、背景与痛点 在 2017 年上半年以前，TalkingData 的 App Analytics 和 Game Analytics 两个产品，流式框架使用的是自研的 td-etl-framework。该框架降低了开发流式任务的复杂度，对于不同的任务只需要实现一个 changer 链即可，并且支持水
阅读全文
摘要：本文由趣头条实时平台负责人席建刚分享趣头条实时平台的建设，整理者叶里君。文章将从平台的架构、Flink 现状，Flink 应用以及未来计划四部分分享。 一．平台架构 1.Flink 应用时间线 首先是平台的架构，2018 年 3 月之前基本都是基于 Storm 和 Spark Streaming 来
阅读全文
摘要：本文根据 Apache Flink 系列直播整理而成，由 Apache Flink Contributor、OPPO 大数据平台研发负责人张俊老师分享。主要内容如下： 网络流控的概念与背景 TCP的流控机制 Flink TCP-based 反压机制（before V1.5） Flink Credit
阅读全文
摘要：众所周知，Apache Flink（以下简称 Flink）最早诞生于欧洲，2014 年由其创始团队捐赠给 Apache 基金会。如同其他诞生之初的项目，它新鲜，它开源，它适应了快速转的世界中更重视的速度与灵活性。 大数据时代对人类的数据驾驭能力提出了新的挑战，Flink 的诞生为企业用户获得更为快速
阅读全文
摘要：本文根据 Apache Flink 系列直播课程整理而成，由 Apache Flink Contributor、网易云音乐实时计算平台研发工程师岳猛分享。主要分享内容为 Flink Job 执行作业的流程，文章将从两个方面进行分享：一是如何从 Program 到物理执行计划，二是生成物理执行计划后该
阅读全文
摘要：概述 近日，阿里云安全团队监测到挖矿团伙watchbog更新了其使用的武器库，增加了最新Solr Velocity 模板注入远程命令执行漏洞的攻击方式，攻击成功后会下载门罗币挖矿程序进行牟利。建议用户及时排查自身主机是否受到影响。 值得注意的是，此漏洞利用代码于10月31日被公布，11月2日阿里云安
阅读全文
摘要：导读：从头开发一个Serverless引擎并不是一件容易的事情，今天咱们就从Knative的健康检查说起。通过健康检查这一个点来看看Serverless模式和传统的模式都有哪些不同，以及Knative针对Serverless场景都做了什么思考。 Knative Serving 模块的核心原理如下图所
阅读全文
摘要：导读：云计算之所以能够成为 DT 时代颠覆性力量，是因为其本质是打破传统架构模式、降低成本并简化体系结构，用全新的思维更好的满足了用户需求。而无服务器计算（Serverless Computing）作为这个巨大市场的下一个阶段的进化产物，将真正帮助企业实现只专注于业务和构建应用程序，而不必担心 IT
阅读全文
摘要：导读：新的企业负载／智能工作负载容器化、迁云、存储方面遇到的性能、弹性、高可用、加密、隔离、可观测性以及生命周期等方面的问题，不但需要存储产品层次的改进，更需要在云原生的控制／数据平面的改进，推进云原生存储和云存储的演进。本文将介绍一下问题场景，探讨可行的解决方案，最终得出云原生存储以及云存储目前可
阅读全文
摘要：导读：随着云原生系统的演进，如何保障系统的稳定性受到很大的挑战，混沌工程通过反脆弱思想，对系统注入故障，提前发现系统问题，提升系统的容错能力。ChaosBlade 工具可以通过声明式配置执行混沌实验，简单高效。本文将会重点介绍 ChaosBlade 以及云原生相关的实验场景实践。 ChaosBlad
阅读全文
摘要：导读：云原生时代，Kubernetes 的重要性日益凸显。然而，大多数互联网公司在 Kubernetes 上的探索并非想象中顺利，Kubernetes 自带的复杂性足以让一批开发者望而却步。本文中，阿里巴巴技术专家孙健波在接受采访时基于阿里巴巴 Kubernetes 应用管理实践过程提供了一些经验与
阅读全文
摘要：11月4日，厦门航空与阿里云宣布合作打造航空业“移动研发中台”。该项目将基于阿里云企业级移动研发平台EMAS，结合厦门航空在航空业数字化探索实践联合研发，搭建完成后将助力厦门航空打造厦门航空超级APP。 厦门航空“移动研发中台”将大大提升包括会员服务应用在内的一系列企业级应用的迭代研发效率，包括实时
阅读全文
摘要：导读：InfoQ 发布《2019 中国 Java 发展趋势报告》，反映 Java 在中国发展的独特性，同时也希望大家对 Java 有一个正确的认识。 2 个月前，InfoQ 英文站发布了一份《2019 Java 发展趋势报告》，从技术采用生命周期的角度，分析了 Java 这门 20 多年历史语言的发
阅读全文
摘要：大数据计算服务(MaxCompute，原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型，能够更快速的解决用户海量数据计算问题，有效降低企业成本，并保障数据安全。MaxCompute主要服务于批量结构化数据
阅读全文
摘要：本文是基于本人对MaxCompute产品的学习进度，再结合开发者社区里面的一些问题，进而整理成文。希望对大家有所帮助。 问题一、DataStudio中是否可以通过shell节点调取MaxCompute sql语句？ 不可以的，Shell节点支持标准Shell语法，不支持交互性语法。如果任务较多，可以
阅读全文
摘要：阿里巴巴新一代自研云数据库POLARDB与超图软件SuperMap GIS实现 “引擎级”深度对接，构建了自治、弹性、高可用的云原生时空数据管理平台联合解决方案，推出了业界首个“云原生数据库+云原生GIS”的全国产化平台。 1、阿里云POLARDB POLARDB是阿里云自主研发的国内首个云原生数据
阅读全文
摘要：2017年开始阿里HBase走向公有云，我们有计划的在逐步将阿里内部的高可用技术提供给外部客户，目前已经上线了同城主备，将作为我们后续高可用能力发展的一个基础平台。本文分四个部分回顾阿里HBase在高可用方面的发展：大集群、MTTF&MTTR、容灾、极致体验，希望能给大家带来一些共鸣和思考。 大集群
阅读全文
摘要：X-Pack Spark服务通过外部计算资源的方式，为Redis、Cassandra、MongoDB、HBase、RDS存储服务提供复杂分析、流式处理及入库、机器学习的能力，从而更好的解决用户数据处理相关场景问题。 RDS & POLARDB分表归档到X-Pack Spark步骤 一键关联POLAR
阅读全文
摘要：本篇文章整理自今日头条的沈辉在 RocketMQ 开发者沙龙中的演讲，主要和大家分享一下，RocketMQ 在微服务架构下的实践和容灾体系建设。沈辉是今日头条的架构师，主要负责 RocketMQ 在头条的落地以及架构设计，参与消息系统的时间大概一年左右。 以下是本次分享的议题： 头条的业务背景 为什
阅读全文
摘要：背景介绍 饿了么监控系统EMonitor：是一款服务于饿了么所有技术部门的一站式监控系统，覆盖了系统监控、容器监控、网络监控、中间件监控、业务监控、接入层监控以及前端监控的数据存储与查询。每日处理总数据量近PB，每日写入指标数据量百T，每日指标查询量几千万，配置图表个数上万，看板个数上千。 CAT：
阅读全文
摘要：Nacos是阿里巴巴开源的服务发现与配置管理项目，本次发布的1.1.4版本，主要带来的是与Istio的对接功能，使用的是Istio最新的MCP协议。本文将介绍包括这个功能在内的新版本发布的功能。 升级指南 服务端 0.8.0及以上版本： 解压安装包后替换{nacos.home}/target/nac
阅读全文
摘要：前言 计算机软件技术发展到现在，软件架构的演进无不朝着让开发者能够更加轻松快捷地构建大型复杂应用的方向发展。容器技术最初是为了解决运行环境的不一致问题而产生的，随着不断地发展，围绕容器技术衍生出来越来越多的新方向。 最近几年，云计算领域不断地出现很多新的软件架构模式，其中有一些很热门的概念名词如：云
阅读全文
摘要：HBase可以支持百TB数据规模、数百万QPS压力下的毫秒响应，适用于大数据背景下的风控和推荐等在线场景。阿里云HBase服务了多家金融、广告、媒体类业务中的风控和推荐，持续的在高可用、低延迟、低成本方向上进行优化。目前单集群承诺可用性99.9%，SSD机型上可以做到请求毛刺99.5% < 50ms
阅读全文
摘要：2019年10月23号，阿里云数据库RDS for MySQL 三节点企业版正式商用，RDS for MySQL三节点企业版基于Paxos协议实现数据库复制，每个事务日志确保至少同步两个节点，实现任意节点宕机后数据零丢失，数据库整体RPO为0。RDS for MySQL三节点企业版适用于数据敏感性业
阅读全文
摘要：背景 应用安全领域，各类攻击长久以来都危害着互联网上的应用，在web应用安全风险中，各类注入、跨站等攻击仍然占据着较前的位置。WAF(Web应用防火墙)正是为防御和阻断这类攻击而存在，也正是这些针对Web应用的安全威胁促使了WAF这个产品的不断发展和进化。同时，各种机器学习算法和模型也被不断提出和应
阅读全文
摘要：近期，在全球权威咨询机构Gartner发布的2019 Web应用防火墙魔力象限中，阿里云Web应用防火墙成功入围，是亚太地区唯一一家进入该魔力象限的厂商！ Web应用防火墙，简称WAF、在保护Web应用程序的安全性上面已有多年的发展历史。近年来，随着云服务的普及、大数据计算能力的发展，云WAF因具有
阅读全文
摘要：业务数据的指数级扩张，数据处理的速度可不能跟不上业务发展的步伐。基于 Flink 的数据平台构建、运用 Flink 解决业务场景中的具体问题等随着 Flink 被更广泛的应用于广告、金融风控、实时 BI、实时数仓、实时推荐等多种业务场景，在生产实践中已有丰富的案例与优秀的经验。 Flink Forw
阅读全文
摘要：在之前的文章中，我们从高级抽象到底层细节各个层面全面介绍了 Flink 网络栈的工作机制。作为这一系列的第二篇文章，本文将在第一篇的基础上更进一步，主要探讨如何监视与网络相关的指标，从而识别背压等因素带来的影响，或找出吞吐量和延迟的瓶颈所在。本文将简要介绍处理背压的手段，而之后的文章将进一步研究网络
阅读全文
摘要：物联网设备可信上链 为物联网设备上链提供可信的、一站式、多层级的安全服务，与阿里云BaaS等企业级区块链服务无缝对接 相关产品了解TEE 安全能力 密钥全生命周期管理和安全计算支持企业级区块链（HyperLedger Fabric和Enterprise Ethereum）账号和密钥在IoT设备本地安
阅读全文
摘要：概述 近日，阿里云安全团队监控到Bulehero挖矿蠕虫进行了版本升级，蠕虫升级后开始利用最新出现的PHPStudy后门漏洞作为新的攻击方式对Windows主机进行攻击，攻击成功后会下载门罗币挖矿程序进行牟利。该挖矿程序会大肆抢占服务器CPU资源进行门罗币的挖掘，造成服务器卡顿，严重影响正常业务运行
阅读全文
摘要：摘要：2019云栖大会大数据 & AI专场，阿里巴巴资深技术专家王峰带来“Ververica Platform-阿里巴巴全新Flink企业版揭秘”的演讲。本文主要从Ververica由来开始谈起，着重讲了Ververica Platform的四个核心插件App Manager、Libra Servi
阅读全文
摘要：MongoDB是业界最受欢迎的开源数据库之一，2019年一份面向开发者的数据库调查报告中，MongoDB以 24.6%的使用率占据次席。 阿里云是国内最早提供MongoDB服务的云厂商，提供完全兼容MongoDB协议的云托管数据库服务，基于飞天分布式系统和高可靠存储引擎为阿里云客户提供多节点、高可用
阅读全文
摘要：近日，在乌镇召开的第六届世界互联网大会现场，浙江省政府与阿里巴巴集团合作开发的政务钉钉首次正式发布。 随着政务钉钉的正式亮相，政务钉钉事业部总经理叶军与他带领的团队也逐步走进大众视野。 政务钉钉如何帮助政府做数字化？阿里巴巴自身又是如何做企业管理数字化的？带着这些疑问，我们邀请到了叶军，从他与他的“
阅读全文
摘要：业界要闻 1.Canonical 开源 MicroK8 面向工作站和边缘/物联网的零运维 Kubernetes！MicroK8 是 Canonical 提供的一款功能强大的企业级 Kubernetes 发行版，我们认为它是市面上最小巧最快速的多节点 Kubernetes。 2.2019 中国开源年会
阅读全文
摘要：导读：涉及开发的技术人员，永远绕不开的就是将应用部署到相应服务器上，本文将给大家讲解：对于容器服务 ACK，怎么实现真正“一键部署”，提高开发部署效率，在 K8s 的运用上做到快人一步。 随着互联网时代的不断发展，开发者可能会面临这样的困境：为了解决问题、提升开发效率而竭力研发出来的“创新”，似乎削
阅读全文
摘要：POLARDB 是阿里云自主研发的下一代云原生分布式数据库，100%兼容MySQL、PostgreSQL等开源数据库，高度兼容Oracle语法，使用RDS服务的客户不需要修改应用代码，可以一键迁移到POLARDB，体验更大的容量，更高的性能，更低的成本，和更灵活的弹性。 目前，POLARDB是阿里云
阅读全文
摘要：摘要：在2019杭州云栖大会大数据企业级服务专场，由阿里云智能计算平台事业部资深技术专家李雪峰带来以“如何有效降低大数据平台安全风险”为题的演讲。本文首先概括了企业在大数据上云过程中会产生的安全顾虑。接着，在大数据平台中要处理的安全风险中，对数据中心物理安全与网络安全、大数据平台系统安全以及数据应用
阅读全文
摘要：摘要：2019杭州云栖大会大数据技术专场，由阿里云资深技术专家侯震宇、阿里云高级技术专家陈颖达以及阿里云资深技术专家戴谢宁共同以“SQL在 MaxCompute 分布式系统中的旅程 ”为题进行了演讲。本文首先介绍了 MaxCompute 计算平台及其特点、超大规模企业级SQL引擎和其功能。然后讲解了
阅读全文
摘要：摘要：2019杭州云栖大会大数据技术专场，由阿里云通用计算平台负责人关涛带来以 “阿里巴巴大数据技术关键进展及展望” 为主题的演讲。本文首先讲解了从阿里巴巴的角度看待大数据领域的客户价值迁移，概览了核心技术的发展点，最后针对如何构建智能化大数据平台的相关工作进行了介绍，从引擎优化到 “自动驾驶”，并
阅读全文
摘要：摘要：2019云栖大会大数据&AI专场，阿里云智能计算平台事业部研究员关涛、资深专家徐晟来为我们分享《AI加持的阿里云飞天大数据平台技术揭秘》。本文主要讲了三大部分，一是原创技术优化+系统融合，打破了数据增长和成本增长的线性关系，二是从云原生大数据平台到全域云数仓，阿里开始从原生系统走入到全域系统模
阅读全文
摘要：摘要：2019云栖大会大数据&AI专场，阿里巴巴高级研究员贾扬清为我们带来《大数据AI发展的新机遇和新挑战》的分享。本文主要从人工智能的概念开始讲起，谈及了深度学习的发展和模型训练，以及数据的爆发增长，着重阐述了算法、数据和算力的闭环。 直播回放 >>> 以下是精彩视频内容整理： 作为一个研究者的身
阅读全文
摘要：本文是《Performance Test Together》（简称PTT）系列专题分享的第7期，该专题将从性能压测的设计、实现、执行、监控、问题定位和分析、应用场景等多个纬度对性能压测的全过程进行拆解，以帮助大家构建完整的性能压测的理论体系，并提供有例可依的实战。 本文将从经典电商活动（双11大促）
阅读全文
摘要：序言 Dubbo在2011开源之后，一直是国内最受欢迎的RPC框架，之后spring boot和Spring Cloud的面世，助推了微服务的火热程度。计算机的世界变化很快，自从容器和K8s登上舞台之后，给原有的RPC领域带来了很大的挑战。这个文章主要讲述RPC领域遇到的问题，以及RPC怎么去拥抱K
阅读全文
摘要：缘起 最近看到一个很流行的标题，《开源XX年，star XXX，我是如何坚持的》。看到这样的标题，忽然发觉 Arthas 从 2018 年 9 月开源以来，刚好一年了，正好在这个秋高气爽的时节做下总结和回顾。 Arthas 是 Alibaba 开源的 Java 诊断工具，深受开发者喜爱。 Githu
阅读全文
摘要：Nacos 开源至今已有一年，在这一年里，得到了很多用户的支持和反馈。在与社区的交流中，我们发现有一些问题出现的频率比较高，为了能够让用户更快的解决问题，我们总结了这篇常见问题及解决方法，这篇文章后续也会合并到 Nacos 官网的 FAQ 里。 如何依赖最新的 Nacos 客户端？ 很多用户都是通过
阅读全文
摘要：在10月23日召开的GNTC 2019全球网络技术大会IPv6分论坛上，阿里云高级技术专家张先国宣布支持阿里公共DNS的IPv6版本正式发布，即阿里公共DNS在保持IPv4 稳定解析服务的基础上（Anycast地址为223.5.5.5,和223.6.6.6），还支持了一组IPv6 Anycast地址
阅读全文
摘要：JindoFS背景 计算存储分离是云计算的一种发展趋势，传统的计算存储相互融合的的架构存在一定的问题， 比如在集群扩容的时候存在计算能力和存储能力相互不匹配的问题，用户在某些情况下只需要扩容计算能力或者存储能力，传统的融合架构不能单独的扩充计算或者存储能力， 而计算存储分离可以很好的解决这个问题，用
阅读全文
摘要：什么是产品化 大部分创业公司都是从一个伟大的想法创意开始的，并且需要有一堆技术专家来实现。我们清楚，伟大的技术并不等同于和伟大的产品，技术可以解决问题，但如果它没有办法法规模化，那这些技术或者能力对用户便没有直接价值，只有把它们拆解，打包，设计成产品，才能真正的解决用户问题，把某些技术或者能力变成产
阅读全文
摘要：采集&传输层 SqoopHadoop、关系型数据库之间传输数据的工具。传输时，会启动多个MR作业并发的传输数据 DataX阿里巴巴开源的数据同步工具，用来在各种异构数据源之间同步数据。比如 RDBMS<->Hadoop/MaxCompute、RDBMS<->hbase/ftp等等。部署、运维非常简单
阅读全文
摘要：概述 数据抽取是指从源数据抽取所需要的数据， 是构建数据中台的第一步。 数据源一般是关系型数据库，近几年，随着移动互联网的蓬勃发展，出现了其他类型的数据源，典型的如网站浏览日期、APP浏览日志、IoT设备日志从技术实现方式来讲，从关系型数据库获取数据，可以细分为全量抽取、增量抽取2种方式，两种方法分
阅读全文
摘要：概念：LADV是DataV内嵌的智能识别设计产品，能够迅速学习和识别手绘草图、信息图表、大屏截图等资料，并在DataV内自动生成可配置的可视化应用。 有了LADV今后人人都能做可视化专家了！ 先来看看LADV的效果： 以上例子中，生成的可视化图表，均可以在DataV的环境下做进一步的样式调优和数据接
阅读全文
摘要：背景 2014 年，Spring Boot 1.0 发布。Spring Boot 的发布绝对是 Pivotal 历史上具有里程碑意义的事件，它让我们能够非常简便地开发 Spring 应用，屏蔽了各种配置文件和底层实现，提供 AutoConfiguration，Factory Loading Mech
阅读全文
摘要：基于Alibaba Nacos和Sentinel，实现灰度路由和流量防护一体化的解决方案，发布在最新的 Nepxion Discovery 5.4.0 版，具体参考： 源码主页，请访问 源码主页指南主页，请访问 指南主页文档主页，请访问 文档主页 Nepxion Discovery框架在实现灰度发布
阅读全文
摘要：前言 2019.10.7~9号，随着70周年国庆活动的顺利闭幕，Flink Forward 也照例在他们的发源地柏林举办了第五届大会。虽然还没有拿到具体的数据，不过从培训门票已经在会前销售一空的这样的现象来看，Flink Forward 大会还是继续保持了一个良好的势头。本届大会不管是从参会人数上，
阅读全文
