大数据-工具盒子

TiUP 部署运维 TIDB的工具（4.0之前都是用ansible）

2024-12-16 厉飞雨阅读(338) 评论(0) 赞(15)

TiUP 是 TiDB 4.0 版本引入的集群运维工具， TiUP cluster 是 TiUP 提供的使用 Golang 编写的集群管理组件，通过 TiUP cluster 组件就可以进行日 常的运维工作，包括部署、启动、关闭、销毁、弹性扩缩容、升级 TiDB 集群，以及管理 TiDB 集群参数。<br ...

TIDB 性能调优

2024-12-16 厉飞雨阅读(337) 评论(0) 赞(17)

https://docs.pingcap.com/zh/[tidb](https://51tbox.com/ "View all posts in tidb")/stable/tune-operating-system [操作系统性能参数调优 \| PingCAP 文档中心](https://docs.pingcap.com/zh/tidb/stable/...

hadoop安装与搭建hdfs

2024-12-14 厉飞雨阅读(420) 评论(0) 赞(12)

配置前必看本帖的主要目的是用最平实的语言描述配置的进程，同时在每个章节为可能涉及的知识点提供相应的网站以供读者学习。最重要的还是给我自己留个配置的日记。这样Linux玩崩了也能找到回家的路。 1. 本帖主要涉及的目录一共有三个，如有需要，在根目录`/`下创建`export`目录存放以下三个目录(建议)。(解压目录)`servers`、(软件安装目录)`software...

Hadoop的工作原理是什么？如何搭建一套分布式文件系统？

2024-12-14 厉飞雨阅读(361) 评论(0) 赞(12)

嗨，你好呀，我是猿java Hadoop是什么？它是如何工作的？为什么 Hadoop可以成为全球最流行的大数据处理框架之一？如何基于 Hadoop搭建一套简单的分布式文件系统？这篇我们一起来来深入讨论。 <ol> <li>...

hadoop任务提示error: GC overhead limit exceeded

2024-12-14 厉飞雨阅读(346) 评论(0) 赞(20)

项目中提交任务至Hadoop中，在Reduce阶段以及Applicationmaster阶段均有提示： <pre><code>java.lang.OutOfMemoryError: GC overhead limit exceeded </code></pre> <h4>解决办法&...

Hadoop-hive

2024-12-14 厉飞雨阅读(444) 评论(0) 赞(13)

配置前必看本帖的主要目的是用最平实的语言描述配置的进程，同时在每个章节为可能涉及的知识点提供相应的网站以供读者学习。最重要的还是给我自己留个配置的日记。这样Linux玩崩了也能找到回家的路。 1. 本帖主要涉及的目录一共有三个，如有需要，在根目录`/`下创建`export`目录存放以下三个目录(建议)。(解压目录)`servers`、(软件安装目录)`software...