Bambrow's Blog

Half as much, twice as elegant.

发表于 分类于 阅读次数： 繁 / 简： 繁 本文字数： 1.1k 阅读时长 ≈ 4 分钟

本文简要讲述了如何使用 Vagrant 一键搭建 Kubernetes 集群。本项目有针对国内网络进行优化的版本。请在开始前先安装 VirtualBox 与 Vagrant。

阅读全文 »

发表于 分类于 阅读次数： 繁 / 简： 繁 本文字数： 2.9k 阅读时长 ≈ 11 分钟

本文用实践的方式初步探索 Apache Hudi（GitHub 项目地址）表的底层数据结构。测试使用的版本为 0.8.0，使用的集群为 Docker 自建，详见使用 Docker 搭建 Hadoop + Hive + Spark 集群（上）。你也可以使用 Apache Hudi 官方的 Docker Demo。

阅读全文 »

发表于 分类于 阅读次数： 繁 / 简： 繁 本文字数： 2.8k 阅读时长 ≈ 10 分钟

本文用实践的方式初步探索 Delta Lake（GitHub 项目地址）表的底层数据结构。测试使用的版本为 1.0.0，使用的集群为 Docker 自建，详见使用 Docker 搭建 Hadoop + Hive + Spark 集群（上）。请注意使用 Spark 3.1.0 及以上版本的 YAML 搭建集群。

阅读全文 »

发表于 分类于 阅读次数： 繁 / 简： 繁 本文字数： 1.4k 阅读时长 ≈ 5 分钟

本文简要讨论了一些常用的国内开源镜像，并简要讨论了使用方法。以后可能会有新的内容加入。

阅读全文 »

发表于 分类于 阅读次数： 繁 / 简： 繁 本文字数： 3.3k 阅读时长 ≈ 12 分钟

本文用实践的方式初步探索 Apache Iceberg 表的底层数据结构。由于 Apache Iceberg 项目在积极开发中，版本之间更新变动较大，本文内容可能会过时。

测试使用的版本为 0.11.1，使用的集群为 Docker 自建，详见使用 Docker 搭建 Hadoop + Hive + Spark 集群（上）。请注意由于 Spark 3.1.1 与该版本有冲突，请使用 3.0.2 版本的 YAML 搭建集群。

阅读全文 »

发表于 分类于 阅读次数： 繁 / 简： 繁 本文字数： 941 阅读时长 ≈ 3 分钟

本文探讨了使用 Docker 搭建 Hadoop + Hive + Spark 集群的方法，项目地址在此。在阅读本文前，建议先对 Docker 以及 Docker Compose 有基本的了解。

如果你没有阅读上篇，请移步使用 Docker 搭建 Hadoop + Hive + Spark 集群（上）。

阅读全文 »

发表于 分类于 阅读次数： 繁 / 简： 繁 本文字数： 837 阅读时长 ≈ 3 分钟

本文探讨了使用 Docker 搭建 Hadoop + Hive + Spark 集群的方法，项目地址在此。在阅读本文前，建议先对 Docker 以及 Docker Compose 有基本的了解。

阅读全文 »

发表于 分类于 阅读次数： 繁 / 简： 繁 本文字数： 1.1k 阅读时长 ≈ 4 分钟

本文探讨了一些如何在后台运行 Linux 命令，以及如何在终端关闭之后继续运行命令的方法。

阅读全文 »

发表于 分类于 阅读次数： 繁 / 简： 繁 本文字数： 653 阅读时长 ≈ 2 分钟

最近突然发现 Windows 上的 Docker Container 时间滞后于 Windows 系统时间，这有时候会对 Container 造成不可预测的影响。因此在做了一番调研，解决方法记录如下。

阅读全文 »

发表于 分类于 阅读次数： 繁 / 简： 繁 本文字数： 769 阅读时长 ≈ 3 分钟

本文简要介绍 Linux 中的定期执行程序 crontab 命令。

阅读全文 »