[自制脚本分享] 写了一些大数据开发中经常用到的脚本分享给有需要的人。

2023-10-01 20:18:56 +08:00
 BeiChuanAlex

脚本地址:

https://github.com/jackhawks/dev-helper

主要包含以下脚本:

linux 基础环境构建脚本
1. 安装基础软件 vim rsync lrzsz wget
2. 关闭防火墙
3. 修改主机名
4. 添加 hosts 映射
5. 配置静态 Ip
6. 创建工作目录
7. 创建普通用户
8. 配置 SSH 免密登录


java 集群构建脚本
1. 为集群安装 java 环境


hadoop 集群构建脚本
1. 为集群安装 hadoop

zookeeper 集群构建脚本
1. 为集群安装 zookeeper

jpsall
查看集群所有机器的 jps 进程

xcall
一处命令,同步到集群所有机器上执行

xsync
集群文件分发

hadoop_cluster.sh
Hadoop 集群 启动/停止/重启 脚本

zk_cluster.sh
Zookeeper 集群 启动/停止/重启/查看状态 脚本
2511 次点击
所在节点    分享创造
6 条回复
Bumon
2023-10-02 21:26:41 +08:00
数开来顶一顶,感谢分享!
BeiChuanAlex
2023-10-02 22:32:17 +08:00
@Bumon 感谢支持~~
Scarletlens
2023-10-02 23:01:47 +08:00
感谢分享
swim2sun
2023-10-03 11:54:28 +08:00
大数据开发 = 运维?
BeiChuanAlex
2023-10-03 13:51:56 +08:00
@swim2sun 只是辅助本地开发,不是生产运维。
vokins
2023-10-04 13:17:47 +08:00
感谢分享,收藏一下

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/978488

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX