顺德大良网站建设开发平台运营工作内容
文章目录
- 1 安装java环境
 - 1.1 下载linux下的安装包
 - 1.2 解压缩安装包
 - 1.3 解压后的文件移到/usr/lib目录下
 - 1.4 配置java环境变量
 
- 2 kafka的安装部署
 - 2.1 下载安装kafka
 - 2.2 配置和启动zookeeper
 - 2.3 启动和停止kafka
 
1 安装java环境
1.1 下载linux下的安装包
(1)登录官网下载地址,找到对应压缩包。
 
 (2)点击下载链接弹出如下窗口,勾选协议,继续点击下载链接。
 
 (3)需要登录账户。如果已经有账户则直接登录;没有就需要注册一个账户。登录账户后就可以直接下载了。
1.2 解压缩安装包
tar -zxvf jdk-8u352-linux-x64.tar.gz 
 
解压后的文件夹为jdk1.8.0_351,进入文件夹和查看文件:
cd jdk1.8.0_351
ls
 
可以看到bin目录:
bin        	include         					jmc.txt  
legal  			LICENS							README.html  
src.zip     	THIRDPARTYLICENSEREADME.txt		COPYRIGHT  
javafx-src.zip  jre      						lib    
man      		release      					THIRDPARTYLICENSEREADME-JAVAFX.txt
 
1.3 解压后的文件移到/usr/lib目录下
(1)将解压后的文件移到/usr/lib目录下:
sudo mkdir /usr/lib/jdk
 
(2)将解压的jdk文件移动到新建的/usr/lib/jdk目录下来:
sudo mv jdk1.8.0_351 /usr/lib/jdk/
 
1.4 配置java环境变量
这里是将环境变量配置在etc/profile,即为所有用户配置JDK环境。
(1)使用命令打开/etc/profile文件:
sudo vim /etc/profile
 
(2)在末尾添加以下几行:
#set java env 
export JAVA_HOME=/usr/lib/jdk/jdk1.8.0_351 
export JRE_HOME=${JAVA_HOME}/jre     
export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib     
export PATH=${JAVA_HOME}/bin:$PATH
 
(3)执行命令使修改立即生效:
source /etc/profile
 
(4)测试安装是否成功:
java -version
 
出现版本号说明安装成功。
java version "1.8.0_351"
Java(TM) SE Runtime Environment (build 1.8.0_351-b10)
Java HotSpot(TM) 64-Bit Server VM (build 25.351-b10, mixed mode)
 
2 kafka的安装部署
2.1 下载安装kafka
(1)下载Kafka。
wget https://archive.apache.org/dist/kafka/2.0.0/kafka_2.11-2.0.0.tgz
 
(2)解压缩Kafka。下载的kafka是已经编译好的程序,只需要解压即可得到执行程序。
tar -zxvf kafka_2.11-2.0.0.tgz
 
(3)进入kafka目录,以及查看对应的文件和目录。
cd kafka_2.11-2.0.0 
ls
 
bin:为执行程序
 config:为配置文件
 libs:为库文件
bin  config  libs  LICENSE  NOTICE  site-docs
 
2.2 配置和启动zookeeper
Kafka 3.0开始将zookeeper剥离出去了,下载的版本是2.11程序里自带了zookeeper,kafka自带的Zookeeper程序脚本与配置文件名与原生Zookeeper稍有不同。
kafka自带的Zookeeper程序使用bin/zookeeper-server-start.sh,以及bin/zookeeper-server-stop.sh来启动和停止Zookeeper。
# 启动zookeeper:
zookeeper-server-start.sh # 停止zookeeper:
zookeeper-server-stop.sh
 
kafka依赖于zookeeper来做master选举以及其他数据的维护。
 在config目录下,存在一些配置文件:
zookeeper.properties 
server.properties
 
因此可以通过下面的脚本来启动zookeeper服务,当然,也可以自己独立搭建zookeeper的集群来实现。这里我们直接使用kafka自带的zookeeper。
cd bin/
# 前台运行:
sh zookeeper-server-start.sh  ../config/zookeeper.properties# 后台运行:
sh zookeeper-server-start.sh -daemon ../config/zookeeper.properties
 
启动zookeeper,默认端口为:2181,可以通过命令lsof -i:2181 查看zookeeper是否启动成功。
COMMAND    PID USER   FD   TYPE  DEVICE SIZE/OFF NODE NAME
java    128387  fly   96u  IPv6 2591167      0t0  TCP *:2181 (LISTEN)
 
2.3 启动和停止kafka
(1)修改server.properties(在config目录), 增加zookeeper的配置,这里只是本地的配置,如果是另一台机器运行zookeeper,要配置对应的ip地址。
############################# Zookeeper ############################## Zookeeper connection string (see zookeeper docs for details).
# This is a comma separated host:port pairs, each corresponding to a zk
# server. e.g. "127.0.0.1:3000,127.0.0.1:3001,127.0.0.1:3002".
# You can also append an optional chroot string to the urls to specify the
# root directory for all kafka znodes.
zookeeper.connect=localhost:2181# Timeout in ms for connecting to zookeeper
zookeeper.connection.timeout.ms=6000
 
(2)启动kafka(kafka安装路径的bin目录下执行),默认启动端口9092。
sh kafka-server-start.sh -daemon ../config/server.properties
 
(3)停止kafka(kafka安装路径的bin目录下执行)。
sh kafka-server-stop.sh -daemon ../config/server.properties
