Ranger初始化Patch机制

Ranger在初始化时,会进行一系列的数据库操作,以完成服务运行所需的基础环境配置。本文基于ranger-2.4.0。

nieo nieo 发布于 2024-04-25

Bitcoin: A Peer-to-Peer Electronic Cash System

2008年10月31日,中本聪在网站上发表了比特币白皮书。本文是《比特币白皮书》英文原文。原文可参考https://bitcoin.org/bitcoin.pdf

nieo nieo 发布于 2024-04-23

Hive源码——HiveStorageHandler

Hive存储处理器的实现,本文基于Hive-4.0.0

nieo nieo 发布于 2024-04-23

Livy简述

Livy提供restful接口进行交互式spark任务的机制

nieo nieo 发布于 2024-04-21

SparkHistoryServer历史记录清理机制

Spark任务在执行过程中,会产生大量的Event,是用来记录任务的执行过程的。这些Event会被记录到DistributedFileSystem中,随着时间的积累,这些在dfs中的记录需要被清理,这就是清理机制需要完成的工作。

nieo nieo 发布于 2024-04-21

Kafka数据迁移

kafka数据迁移方案

nieo nieo 发布于 2024-04-20

spark on k8s模式下kerberos认证报错

IllegalArgumentException(String.format("Server has invalid Kerberos principal: %s, expecting: %s", serverPrincipal, confPrincipal))

nieo nieo 发布于 2024-04-18

SLA——服务等级协议

SLA全称为Service Level Agreement,服务等级协议。

nieo nieo 发布于 2024-04-13

Javalin框架简述

Javalin可以描述为A simple web framework for Java and Kotlin,很容易联想到Javalin=Java+(Kot)lin。

nieo nieo 发布于 2024-04-12

Hadoop大数据发展历程

hadoop体系从论文发布到生态体系的建设,历经20多年的蓬勃发展

nieo nieo 发布于 2024-04-11