随笔分类 - 专业知识
开发，运维
摘要：在构建数据科学产品时，一个重要的方面是让您的数据可用并准备使用。您需要一个平台将数据带到一起，并在整个公司中服务。但是你如何发展这样一个数据平台？阅读数据仓库，数据湖泊，湖泊和数据网格时，很容易丢失。它们是如何不同的，什么应该是第一步？ 不同的数据平台解决方案 > Databricks’ persp
阅读全文
摘要：01-互联网-通用大数据平台-系统架构图 02-互联网-通用大数据中台-系统架构图03-互联网通用架构-系统架构图04-互联网通用架构-系统架构图05-通用分布式容器化微服务架构06-互联网通用微服务架构07-互联网通用微服务架构08-互联网通用型架构09-互联网通用微服务架构
阅读全文
摘要：这篇文章，我们循序渐进，从内存、磁盘I/O、网络I/O、CPU、缓存、架构、算法等多层次递进，串联起高性能开发十大必须掌握的核心技术。 - I/O优化：零拷贝技术 - I/O优化：多路复用技术 - 线程池技术 - 无锁编程技术 - 进程间通信技术 - RPC && 序列化技术 - 数据库索引技术 -
阅读全文
摘要：在互联网发展呢的今天，我们一般会把多台机器组成一个集群对外提供服务。然而，我们的网站对外提供的访问入口都是一个的，比如 www.baidu.com 那么当用户在浏览器输入 www.baidu.com 的时候如何将用户的请求分发到集群中不同的机器上呢，这就是负载均衡在做的事情。 负载均衡的分类 负载均
阅读全文
摘要：私有云PaaS平台真正实现了应用托管和自动部署后，才可能通过PaaS平台的调度规则和性能分析监控，去动态的调度底层的IaaS资源池中的资源。即通过引入PaaS层后不仅仅是物理资源对业务系统透明，包括逻辑资源也对业务系统透明，对于最终的业务系统而言只关心服务能力的使用，而无须关系提供服务能力的资源。
阅读全文
摘要：前言 作为人们日常PC端的浏览的入口，浏览器出于安全考虑，采用了同源策略。换句话说，如果协议/域名/端口有一个不同，那么就不符合此同源的前提。此时就需要跨域，否则Ajax请求（任何网络请求）会失败。 这里就简单介绍一些主流Web中的四种跨域的解决方案。 正文 1、JSONP JSONP 的原理很简单
阅读全文
摘要：面对微服务如火如荼的发展，很多人都在了解，学习希望能在自己的项目中帮得上忙，当你对微服务的庐山真面目有所了解后，接下来就是说服自己了，到底如何评估微服务，什么时候使用微服务，什么时间点最合适，需要哪些技术储备和资源投入等等，这些都是你需要面对和解决的。 本文从单体架构，微服务架构，微服务风险评估，微
阅读全文
摘要：可能大家都知道或者被问过一个问题，那就是很经典的「从浏览器输入 URL 再到页面展示，都发生了什么」。这个问题虽然简单，但是真的能够从回答的各种细节上看出不同人之间的水平差距。 这篇文章主要是聊一聊输入 URL 之后的第一步——域名解析 域名就类似于 www.google.com，而通过 ping
阅读全文
摘要：计算机网络 计算机网络是指由通信线路互相连接的许多独立自主工作的计算机构成的资源共享集合体。 计算机网络作用：资源共享。 计算机网络组成：许多独立自主工作的计算机。 计算机网络实现方式：使用通信线路互相连接。 网络的分类 按照地理范围分类 局域网(Local Area Network LAN) 覆盖
阅读全文
摘要：前言 我们以javaweb为例，来搭建一个简单的电商系统，看看这个系统可以如何一步步演变。 该系统具备的功能： 用户模块：用户注册和管理 商品模块：商品展示和管理 交易模块：创建交易和管理 阶段一、单机构建网站 网站的初期，我们经常会在单机上跑我们所有的程序和软件。此时我们使用一个容器，如tomca
阅读全文
摘要：在现代Web系统大流行时代，一款功能强大而切支持协作的Web的富文本编辑器是系统的最关键的组成部分。一款可真正在生产环境中使用的即插即用编辑器，可以能够解决我们实时协作问题：通过浏览器编辑结构化文档，并在屏幕上显示彼此的更改，从而使相隔数千里的用户能够进行协作编辑。本文我们就来介绍一些这样的Web编
阅读全文
摘要：作者：人月神话，新浪博客同名 简介：多年SOA规划建设，私有云PaaS平台架构设计经验，长期从事一线项目实践 从2019年上半年，我们启动了DevOps过程实践相关工作，其中既包括了整个容器云+DevOps支撑集成交付过程整合，也包括了我们传统单体系统的微服务架构化改造。本文主要对项目DevOps过
阅读全文
摘要：概念 电商经过十几年的发展，组织已经庞大而复杂，业务不断细化拆分，也导致野蛮发展的系统越来越不可维护，开发和改造效率极低，也有很多新业务不得不重复造轮子，所以中台的目标是为了解决效率问题，同时降低创新成本。所谓的中台就是：通过制定标准和机制，把不确定的业务规则和流程通过工业化和市场化的手段确定下来，
阅读全文
摘要：“ 架设一个亿级高并发系统，是多数程序员、架构师的工作目标。 许多的技术从业人员甚至有时会降薪去寻找这样的机会。但并不是所有人都有机会主导，甚至参与这样一个系统。今天我们用12306火车票购票这样一个业务场景来做DDD领域建模。” 开篇 要实现软件设计、软件开发在一个统一的思想、统一的节奏下进行，就
阅读全文
摘要：人工智能发展的新方向，可以概括为“八大”：即大采集、大识别、大计算、大提取、大构建、大预测、大战略、大和谐。 一、大采集：全方位收集信息 数据采集系统是结合基于计算机的测量软硬件产品来实现灵活的、用户自定义的测量系统，由信号、传感器、激励器、信号调理、数据采集设备和应用软件等组成。“大采集”就是全方
阅读全文
摘要：近年来，“虚拟化”这个概念可谓炙手可热。 对虚拟化最常见的解释是：把一台服务器，虚拟成相互隔离的多台“虚拟服务器”，也叫“虚拟机”。 真是咄咄怪事。脚踏实地，真刀真枪地干什么不好，非要搞这些虚头巴脑的东西做啥？ 所谓空穴来风，事出必有因，我们且往下看。 什么是虚拟化？ 话说英特尔创始人戈登·摩尔曾说
阅读全文
摘要：提到“按键精灵”，Autoit，许多上了年龄的IT人应该还有印象，它们可以模拟鼠标键盘的操作，减少重复性操作，提高效率。当然，还有许多人用来做简单的游戏外挂，在PK中增加胜率。 随着AI在各行各业的渗透，流程规划，AI和模拟鼠标键盘三者的结合，形成了机器人流程自动化RPA的解决方案。Gartner预
阅读全文
摘要： outline：关注&指标&度量，基础理论知识，工具&方法，最佳实践，参考资料 性能优化关注：CPU、内存、磁盘IO、网络IO等四个方面。 性能指标：吞吐率、响应时间、QPS/IOPS、TP99、资源使用率是我们经常关注的指标。 时间度量：从cpu cycle到网络IO，自上到下，时间量级越大。
阅读全文