摘要： pandas是一个python包，它提供了快速、灵活、易用的数据结构，旨在处理“关系”或“带标签”数据既直观又高效，它是一个极强的数据分析工具。 官网：https://pandas.pydata.org/docs/，因为外网访问速度比较慢，我们可以下载整个文档的压缩包方便查看，如下所示 1 数据结构 阅读全文

摘要： 1 python原理 Python先把代码编译成字节码，交给虚拟机执行。 .pyc文件是字节码在磁盘上的表现形式 字节码在虚拟机程序里面对应的对象是PyCodeObject对象(C++对象) PyCodeObject typedef struct { PyObject_HEAD int co_arg 阅读全文

摘要： 参考https://blog.csdn.net/qq_52423918/article/details/130968307 1 概念 Java SPI（Service Provider Interface）是Java官方提供的一种服务发现机制，它允许在运行时动态地加载实现特定接口的类，而不需要在代码 阅读全文

摘要： 一般我们在java中调用shell脚本的方式如下 public int executeLinuxCmd(String cmd) { LOGGER.info("cmd:{}", cmd); Runtime run = Runtime.getRuntime(); try { Process proces 阅读全文

摘要： Hbase是一个Hadoop Database，是分布式、弹性、大数据存储引擎 Hbase的目标是托管大表-数十亿行数百万列。 1 安装 Hbase版本和java版本以及Hadoop版本之间存在依赖关系。可以在这里查看https://hbase.apache.org/book.html#java 1 阅读全文

摘要： Hadoop是一个分布式计算框架，用于存储和处理大规模数据集。 首先搞清楚为什么需要使用Hadoop Hadoop进行数据处理可以充分利用分布式计算和存储的优势，适用于大规模数据的批处理和分布式计算场景。 裸机上进行数据处理则更适合小规模数据或需要实时处理的场景。 在裸机上进行数据处理和使用Hado 阅读全文

摘要： 官网：https://kafka.apache.org/ Kafka是一个分布式事件流平台 1 介绍 核心特性：高吞吐量、弹性、持久化存储、高可用 事件流类似人类的中枢神经系统。越来越多的业务被软件实现和自动化，在此种情况下软件的用户还是软件。技术上讲，事件流就是实时的从事件源(数据库,传感器,移动 阅读全文

摘要： 官网：https://zookeeper.apache.org/doc/r3.9.1/index.html ZooKeeper是一个高性能的分布式协调服务。它提供了一些常见服务：命名、配置管理、同步、组服务等 1 设计目标 1.1 简单 分布式系统各进程之间可通过共享的类似于文件系统树形结构的形式实 阅读全文

摘要： 在rabbitmq官网的java api处：https://www.rabbitmq.com/api-guide.html#recovery介绍了java连接rabbitmq异常恢复的问题。其中提及了如下内容 As of version 4.0.0 of the Java client, autom 阅读全文

摘要： 数据链路层的设备有：网卡、网桥、交换机 1 网卡 网卡(网络接口卡) 网卡工作在数据链路层和物理层。其作用是将数据链路层的以太网报文变换成高低电平传输到物理层；将物理层到达的高低电平信号传输到数据链路层，数据链路层再进行以太网报文的组装。 2 网桥 网桥是连接两个局域网的存储转发设备。在两个局域网之 阅读全文