芝法酱学习笔记(0.1)——Ubuntu下,Java开发环境的基本搭建
一、本章目标
书接上回,服务器已经安装完成,下面我们需要安装基本的开发环境。本次学习打算以Java后端开发为中心进行拓展,目前先安装Java开发、部署必备的一些软件。
基础部分
- gcc
gcc是c++的编译软件,一些软件的安装包需要源码编译,故预先安装 - JDK
搞Java研发,自然离不开JDK。打算安装几个经典版本,JDK8,JDK11,JDK17,JDK(最新)
在环境变量设置上,增加一个默认版本的变量,方便shell脚本自动设置 - maven
毫无疑问,maven也是必须安装的。现在很少有人手动编译Java工程了吧 - mysql
关系型数据库先搞个mysql,打算装8.x版本 - redis
一般作为缓存,属于现代Java开发必备中间件 - nginx/openresty
用于网关和前端部署。我一般习惯安装openresty版本的,方便做lua拓展 - tomcat
一些老项目还是使用Spring框架做的,还是有必要稍微研究一下。
拓展安装
但这些远远不够,我们还需要设计出一套方便CI,CD的流程,故需要安装如下软件
- docker
- harbor
- nexus
- jenkins
K8S相关的暂时先不安装,等搞到那个地方的时候再安装。由于篇幅限制,这些每样单独开一篇文章。
二、gcc等基础软件安装
2.1 gcc安装
这些基础软件,我们使用Ubuntu的apt-get命令安装
apt update
apt install gcc
apt install g++
apt install build-essential
更新一下Ubuntu
do-release-upgrade
三、ubuntu文件夹规划
在做一些安装前,我们需要对Ubuntu的文件夹做一些规划,方便日后管理。初步规划如图:
先在根目录创建一个WORK的文件夹,在该文件夹下创建如下子文件夹内
mkdir DOWNLOADS DOCUMENTS SDK MIDDLEWARE SOFTWARE APP
其中:
- DOWNLOADS作为下载文件夹
- DOCUMENTS存放文档
- SDK 存放类似JDK的代码库
- MIDDLEWARE 放诸如mysql redis tomcat的中间件
- SOFTWARE 放普通软件
- APP 放部署的项目
四、JDK安装
4.1 下载与解压
JDK的安装包可以去Oracle官网下载
这里要注意,我们要下载的是Linux版的,并且是X64,不要下成arm64了。
JDK8和JDK11,可以直接从我提供的链接下载,注意,这里的链接需要注册一下Oracle账号。
下载好的tar包,拖到DOWNLOADS下
mkdir /WORK/SDK/JAVA
cd /WORK/DOWNLOADS
tar -xzvf jdk-8u411-linux-x64.tar.gz -C /WORK/SDK/JAVA
tar -xzvf jdk-11.0.23_linux-x64_bin.tar.gz -C /WORK/SDK/JAVA
tar -xzvf jdk-17_linux-x64_bin.tar.gz -C /WORK/SDK/JAVA
tar -xzvf jdk-21_linux-x64_bin.tar.gz -C /WORK/SDK/JAVA
cd /WORK/SDK/JAVA
mv jdk1.8.0_411 8
mv jdk-11.0.23 11
mv jdk-17.0.12 17
mv jdk-21.0.4 21
4.2 配置环境变量
linux系统下的环境变量脚本,通常放在/etc/profile中,阅读该脚本代码,我们可以大概猜出,该脚本的意思就是遍历profile.d文件夹下的所有脚本,并执行他。所以,我更推荐在这个文件夹下配置环境变量的脚本。
cd /etc/profile.d
vim java.sh
export JAVA_DEFAULT_VERSION=17
JAVA_HOME=/WORK/SDK/JAVA
export JAVA_HOME_8=$JAVA_HOME/8
export JAVA_HOME_11=$JAVA_HOME/11
export JAVA_HOME_17=$JAVA_HOME/17
export JAVA_HOME_22=$JAVA_HOME/22
export JAVA_HOME=$JAVA_HOME/$JAVA_DEFAULT_VERSION
export PATH=$JAVA_HOME/bin:$PATH
```bash
chmod +x java.sh
source /etc/profile
java --version
如果展示出Java的版本,说明配置成功
五、安装maven
我写这篇帖子的时候,maven的版本是3.9.8,我就按这个版本配置了
5.1 安装解压
首先从官网下载安装包
tar -xzvf apache-maven-3.9.8-bin.tar.gz -C /WORK/SOFTWARE/maven/
mv apache-maven-3.9.8 3.9
5.2 配置config文件
maven的配置文件放在conf/settings.xml中,我们在搭建nexus时会再次修改这个文件,本次只配置Java的Jar包下载位置即可。
<localRepository>/WORK/SDK/JAVA/reposity</localRepository>
5.3 配置环境变量
vim /etc/profile.d/meven.sh
MAVEN_VERSION=3.9
export MAVEN_HOME=/WORK/SOFTWARE/maven/$MAVEN_VERSION
export PATH=$PATH:$MAVEN_HOME/bin
source /etc/profile
mvn --version
如果出现maven版本,则说明安装成功
六、安装mysql
6.1 下载安装
首先去官网下载dpkg包,放到/WORK/DOWNLOADS下
dpkg -i /WORK/DOWNLOADS/mysql-apt-config_0.8.32-1_all.deb
apt-get update
apt-get install mysql-server
systemctl status mysql
6.2 配置账号
我们先搞2个mysql账号,一个是app,用于Java连接mysql;一个是dbMgr,用于管理mysql
mysql> create role role_dbMgr;
mysql> create role role_app;
mysql> GRANT ALL ON *.* to role_dbMgr;
mysql> GRANT SELECT,UPDATE,INSERT,DELETE ON *.* to role_app;
mysql> select user,authentication_string,plugin,host from user;
mysql> CREATE USER 'dbMgr'@'%' IDENTIFIED WITH caching_sha2_password by '??@7' DEFAULT ROLE role_dbMgr COMMENT 'database manager';
mysql> CREATE USER 'app'@'%' IDENTIFIED WITH caching_sha2_password by 'Ilv0404@1314' DEFAULT ROLE role_app COMMENT 'app user';
mysql> flush privileges;
七、安装redis
7.1 下载安装
cd /WORK/DOWNLOADS
wget https://download.redis.io/redis-stable.tar.gz
mkdir /WORK/SOFTWARE/redis
mkdir /WORK/MIDDLEWARE/redis
mkdir /WORK/MIDDLEWARE/redis/current
tar -xzvf redis-stable.tar.gz -C /WORK/SOFTWARE/redis
cd /WORK/SOFTWARE/redis
mv redis-stable current
cd current
apt-get install pkg-config
make
make install
编译后的可执行文件会放到src下
默认会把redis的工具装到/usr/local/bin下
7.2 配置
使用vim编辑redis.conf修改以下配置
requirepass ilv0404@1314 #连接密码
daemonize yes #用守护进程启动
logfile log/redis.log #log文件存放位置
dir /WORK/MIDDLEWARE/redis/current #指定dump.rdb路径
pidfile /WORK/MIDDLEWARE/redis/current/run/redis_6379.pid #pid位置
dbfilename dump.rdb
7.3 redis自启动
mkdir /etc/redis
cp redis.conf /etc/redis/redis.conf
cd /etc/systemd/system
vim redis.service
做如下编辑
[Unit]
Description=Redis Server
After=network.target[Service]
Type=falk
ExecStart=/usr/local/bin/redis-server /etc/redis/redis.conf
ExecStartPost=/bin/sleep 1 #这是黄金一笔
ExecStop=/usr/local/bin/redis-cli -a ???@1314 shutdown
Restart=always
User=redis
Group=redis
PIDFile=/WORK/MIDDLEWARE/redis/current/run/redis_6379.pid
RuntimeDirectory=/WORK/MIDDLEWARE/redis/run
RuntimeDirectoryMode=2755[Install]
WantedBy=multi-user.target
systemctl daemon-reload
systemctl enable redis
7.4 遇到的问题
当出现如下警告时:
WARNING Memory overcommit must be enabled! Without it, a background save or replication may fail under low memory condition.
Being disabled, it can also cause failures without low memory condition, see https://github.com/jemalloc/jemalloc/issues/1328.
To fix this issue add 'vm.overcommit_memory = 1' to /etc/sysctl.conf and then reboot or run the command 'sysctl vm.overcommit_memory=1' for this to take effect.
则需要修改/etc/sysctl.conf文件,添加
vm.overcommit_memory = 1
注意我/etc/systemd/system/redis.service中的那个黄金一笔。由于我们使用传统的守护进程,系统在启动时可能没来得及生成守护进程的pid文件,然而ubuntu找不到对应的文件,以为redis挂了,所以就没有后面的事情了。
当出现用命令行启动redis没问题,但使用systemctl启动redis没有pid时,就要注意这个问题。
还有一种用系统管理pid的方法,supervised systemd,暂时不想研究了。
参考帖子
八、安装openresty
8.1 下载安装
openresty的安装,可以参考官网的说明进行
查看一下系统的版本
lsb_release -a
由于先前,我进行过ubuntu的升级,我现在的版本是22.x的,故采用相应的办法安装
apt install apt-transport-https
apt install ca-certificates
apt-get -y install --no-install-recommends wget gnupg ca-certificates lsb-release
wget -O - https://openresty.org/package/pubkey.gpg | sudo gpg --dearmor -o /usr/share/keyrings/openresty.gpgecho "deb [arch=$(dpkg --print-architecture) signed-by=/usr/share/keyrings/openresty.gpg] http://openresty.org/package/ubuntu $(lsb_release -sc) main" | sudo tee /etc/apt/sources.list.d/openresty.list > /dev/null
apt-get update
sudo apt-get -y install openresty
8.2 设置环境变量
为了方便日后操作,我们把openresty和nginx设置环境变量
默认openresty安装在/usr/local/openresty目录下
cd /etc/profile.d
vim openresty.sh
...
chmod +x openresty.sh
cd ..
source profile
which nginx
nginx -v
shell 脚本内容
PATH=/usr/local/openresty/bin:$PATH
PATH=/usr/local/openresty/nginx/sbin:$PATH
export PATH
8.3 创建工作目录
首先,我打算把所有部署的服务放在工作目录/WORK/APP中
cd /WORK
mkdir APP
cd APP
mkdir nginx
cd nginx
mkdir html conf logs lua
#把nginx自带的一些文件拷过来
cd /usr/local/openresty/nginx
cp -r html /WORK/APP/nginx
cp -r conf /WORK/APP/nginx
html 文件夹下,放置静态页面。我们首先在这个文件夹下,放一个测试页面,写上hello openresty
conf 文件夹下,放置nginx的配置
logs 文件夹下,放置日志
lua 文件夹下,放置lua脚本
8.4 启动nginx
cd /WORK/APP/nginx
nginx -s stop
nginx -p `pwd`/ -c conf/nginx.conf
通过ip访问服务器,查看是否能访问到我们刚才编写的hello openresty
8.5 测试lua
在lua文件夹下,创建一个init.lua的文件,创建一个斐波那契额数列的函数,lua文件如下:
_G.zhifa_math = {}_G.zhifa_math.fabMemo = {}
_G.zhifa_math.fabMemo[1] = 1
_G.zhifa_math.fabMemo[2] = 1_G.zhifa_math.fab = function (n)if type(n) ~= "number" or n < 1 thenreturn nilendn = math.floor(n)if _G.zhifa_math.fabMemo[n] ~= nil thenreturn _G.zhifa_math.fabMemo[n]endlocal res = _G.zhifa_math.fab(n-1) + _G.zhifa_math.fab(n-2)_G.zhifa_math.fabMemo[n] = resreturn res
end
配置conf/nginx.conf
#服务器启动,加载lua文件
init_worker_by_lua_block{package.path = "/WORK/APP/nginx/lua/?.lua;" .. package.pathdofile "lua/init.lua"return}server {listen 80;...location /fab {default_type text/plain;content_by_lua_block {local args = ngx.req.get_uri_args()if nil == args.n thenngx.say('the integer n is required which indicate the index of fabArr')endlocal n = tonumber(args.n)if n < 2 thenngx.say('n must be an integer larger than 2')endlocal res = zhifa_math.fab(n)ngx.say("result is : "..res)}}}
重新加载文件
nginx -p `pwd`/ -c conf/nginx.conf -s reload