2024-11-09 厉飞雨 阅读(27) 评论(0) 赞(1)

工具准备 ---- 到[hadoop](http://hadoop.apache.org/releases.html)官网，点击source下载hadoop-2.7.1-src.tar.gz。 解压 ```lang-bash tar -zxvf hadoop-2.7.1-src.tar.gz ``` 得到hadoop-2.7.1-src文件夹。 进入hadoop-...

2024-11-09 厉飞雨 阅读(20) 评论(0) 赞(4)

首先，在linux系统的/etc/init.d/目录下创建nginx文件，使用如下命令： ```lang-bash vi /etc/init.d/nginx ``` 根据Nginx官方脚本示例，脚本地址：<http://wiki.nginx.org/RedHatNginxInitScript> ```lang-bash nginx="/usr/loc...

2024-11-09 厉飞雨 阅读(21) 评论(0) 赞(4)

关于`Intel`的 `Meltdown`（\[熔断\]\^(Meltdown)）和`Spectre`（\[幽灵\]\^(Spectre)）漏洞，`CentOS`已经推出安全升级。 升级过程： ```lang-bash yum install kernel yum update microcode_ctl Reboot (init 6) ``` 另外升级后可能会系统性能会...

2024-11-09 厉飞雨 阅读(17) 评论(0) 赞(2)

在`Proxmox VE`或其他虚拟环境下经常要用到模版克隆的方法快速部署一台虚拟机 那么部署出来的虚拟机IP也是模版主机的IP 于是克隆部署出来之后的第一件事便是修改虚拟机的IP地址 本文就如何在命令行中快速修改`CentOS 7`的IP地址做一下简单的经验总结。 查看当前网卡信息 -------- ```lang-bash [root@localhost ~...

2024-11-09 厉飞雨 阅读(17) 评论(0) 赞(4)

**Linux系统：Centos 6 x64** **Nginx版本：1.13.3** 第一步 === 安装相关依赖和库文件 ```lang-bash [root@localhost ~]# yum -y install gcc gcc-c++ autoconf automake //gcc、gcc-c++的库文件 [root@localhost ~]# yum...

2024-11-09 厉飞雨 阅读(23) 评论(0) 赞(3)

创建目录 ---- mkdir 文件名 ```lang-bash mkdir /var/www/test #新建一个名为test的文件夹在www下 ``` 新建文本 ---- 在home下新建一个test.sh脚本 ```lang-bash vi /home/test.sh ``` 删除文件或文件夹 -------- ```lang-bash rm /home/t...

2024-11-09 厉飞雨 阅读(14) 评论(0) 赞(2)

由于硬件的原因，机器或多或少的根标准时间对不上，一个月的误差几秒到几分钟不等。对于服务器来说时间不准，会有很多麻烦。例如，支付的时候，无法下单，游戏无法登录等。自己用的PC就无所谓了，手动改一下就行了。 一、时区 1、显示时区 date --help 获取帮助 date -R date +%z 上面两个命令都可 ```lang-bash [root@l...

2024-11-08 厉飞雨 阅读(13) 评论(0) 赞(3)

YARN资源队列规划 1.案例 yz-4m1-01 集群上的队列分为生产型和非生产型。在 2019 年 4 月 12 日凌晨0 点--早上 9 点，非生产型队列占用资源较多，导致集群压力过大，影响了当日早上 9 点的 dwa 下发。生产侧提出了队列资源的优化方案，如下 ![](http://static.51tbox.com/static/2024-08-29/col/...

2024-11-08 厉飞雨 阅读(17) 评论(0) 赞(3)

修改用户 yarn 资源分配

2024-11-08 厉飞雨 阅读(17) 评论(0) 赞(2)

YARN参数调优 #### 1.节点内存资源 yarn.nodemanager.resource.memory-mb NodeManager 一般和 datanode 部署在一起，这些角色本身也要消耗内存，并且操作系统也需要部分内存，建议 Container 内存可以适当降低，这些总的内存相加不能超过节点物理内存，我们给操作系统留 5G 以内的内存 #### 2...