2025-01-07 厉飞雨 阅读(134) 评论(0) 赞(8)

在写这篇blog前，我的心情久久不能平静，虽然明白运维工作如履薄冰，但没有料到这么一个细小的疏漏会带来如此严重的灾难。这是一起其他公司误用puppet参数引发的事故，但是这个参数我也曾被"坑过"。 ![](http://static.51tbox.com/static/2024-12-23/col/9343d12a8a26bb4de624706393985...

2025-01-07 厉飞雨 阅读(217) 评论(0) 赞(7)

英文: node_modules/@newrelic/native-metrics: Command failed. node_modules/couchbase: Command failed. Exit code: 127 问题 {#heading} ============= 在2021年的MacBook M1 Pro上，运行Ventura 13.5，我有一个使...

2025-01-07 厉飞雨 阅读(149) 评论(0) 赞(8)

本帖安装版本为hbase2.0.0 下载地址：<https://archive.apache.org/dist/hbase/> 解压tar包 |-----------|--------------------------------------------------------------| | ``` 1 ``` | ``` tar -zvxf hbase...

2024-09-05 厉飞雨 阅读(245) 评论(0) 赞(10)

zookeeper数据存储及查看hbase信息 https://blog.csdn.net/weixin_34211761/article/details/89767699 ![](http://static.51tbox.com/static/2024-08-29/col/a7067e938d62378f746e481cffa438ee/4ea986a8919f4430b...

2024-09-05 厉飞雨 阅读(183) 评论(0) 赞(9)

hbase连接数过多造成库堵塞的解决方案 库现象：HBase 库节点正常，查看 web 页面一切正常，只有连接数变为 0， 思路： 注：连接数过多，造成服务器堵塞一般情况下有两个原因造成： 1，网络不正常 2，业务哪里有问题，调用了接口而没有释放 所以一般情况下遇到这种情况首先找业务排查，如果他那没有问题，在按照下面的方法修改配置文件...

2024-09-05 厉飞雨 阅读(190) 评论(0) 赞(9)

业务侧无法正常入库解决方法 1.登录对应HBase UI查看是否有RIT积压 2库HBase UI：http://10.162.xxx:60010/master-status 4库HBaseUI：http://10.162.xxx:60010/master-status ![](http://static.51tbox.com/static/2024-08-29/col...

2024-09-05 厉飞雨 阅读(171) 评论(0) 赞(9)

<p>HBase 故障报告</p> <p>故障现象描述<br /> 3 月 29 号廊坊 XXX 机房 ZZXX 集群备库 35 台主机断电搬迁，未通知平台测进行节点下线，导致 hdfs 丢失大量的数据块，主库无法提供正常服务。系统现状<br /> 3 月 31 日 16 点 30 开始，逐步恢复业务查询，4 月 2 ...

2024-09-05 厉飞雨 阅读(186) 评论(0) 赞(14)

<p>Hive 与 HBase 的区别</p> <h4>一、使用方面的区别</h4> <p>Hive<br /> 1)Hive 是一个构建在 Hadoop 平台上的数据仓库。<br /> 2)Hive 数据存放在 HDFS 之上。<br /> 3)Hive 数据查询最终被转化为 Ma...

2024-09-05 厉飞雨 阅读(277) 评论(0) 赞(12)

二者的对比大致如下： ES和Hbase的写入都是基于LSM树结构，写入性能应该是相当的，不过ES在写入时需要做更多的事情（比如分词构建倒排索引，构建DocValues，进行字段类型的校验，且主副本都需构建索引等），所以ES消耗的CPU是比较高的，但如果只是满足Hbase相关的查询场景，有些东西也是可以通过配置省去的。 在查询场景中，ES能同时支持...

2024-09-05 厉飞雨 阅读(157) 评论(0) 赞(10)

<p>1）减少调整</p> <p>减少调整这个如何理解呢？HBase 中有几个内容会动态调整，如 region（分区）、HFile，<br /> 所以通过一些方法来减少这些会带来 I/O 开销的调整<br /> Region<br /> 如果没有预建分区的话，那么随着 region 中条数的增加，regio...