开发和运维 | Home

November 10, 2021 • 分类:java • 标签:jdk

Linux环境

先检查是否已经安装jdk

        shell
        
java -version

rpm -qa|grep openjdk -i   # 检查系统安装的openjdk

rpm -e --nodeps XXX(需要删除的软件名) #如果存在openjdk,就用这个命令逐一删除

创建jdk安装目录和软件包存储目录，并上传jdk文件。将文件解压剪贴到jdk安装目录后配置环境变量即可。

        shell
        
    
mkdir /usr/java
mkdir /home/software

tar -zxvf jdk-8u191-linux-x64.tar.gz
mv jdk1.8.0_191/ /usr/java/

配置环境变量，（修改profile文件）

shell

vim /etc/profile  #配置环境变量，加入如下信息：(按esc退出插入模式后 :wq 保存退出)

        text
        
    
export JAVA_HOME=/usr/java/jdk1.8.0_191
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export PATH=$JAVA_HOME/bin:$PATH

刷新profile，使其生效

shell

source /etc/profile

Windows

下载安装JDK

到 oracle官网下载适合的JDK安装包，注意要选择自己系统对应的版本

Jar包的导入

November 12, 2021 • 分类:java • 标签:jar

普通Java项目如何导入Jar包

虽然maven导入jar包更简单实用，但也存在需要在普通java项目中导入jar包的需求。

注：演示的IDEA为2021版，其他版本可能略有差异

项目目录下新建 lib 目录，并将需要导入的 jar 包复制到该文件夹如：（以导入 mysql驱动包为例）
将 lib 目录下的所有依赖导入到指定模块

打开 File -> Project Structure （Ctrl + Shift + Alt + S）-> 点击加号 -> 选择我们创建的 lib 目录 -> 确认即可

然后选择需要该依赖的模块，点击 OK

此时我们打开该模块的依赖，可以看到 lib 下的依赖已经导入成功

导入成功后该jar包还可以打开查看源码 (^▽^)

项目中途导入新的jar包

新版IDEA直接将jar包复制到 lib 文件夹即可

Java简介及发展史

November 11, 2021 • 分类:java • 标签:jdk

一 Java的起源和发展史

1. Java的起源

2. JDK1-7

1996年1月23日，JDK 1.0发布，Java语言有了第一个正式版本的运行环境。JDK 1.0提供了一个纯解释执行的Java虚拟机实现（Sun Classic VM）。JDK 1.0版本的代表技术包括：Java虚拟机、Applet、AWT等。

1996年4月，十个最主要的操作系统和计算机供应商声明将在其产品中嵌入Java技术。同年9月，已有大约8.3万个网页应用了Java技术来制作。在1996年5月底，Sun于美国旧金山举行了首届JavaOne大会，从此JavaOne成为全世界数百万Java语言开发者每年一度的技术盛会。

1997年2月19日，Sun公司发布了JDK 1.1，Java里许多最基础的技术支撑点（如JDBC等）都是在JDK 1.1版本中提出的，JDK 1.1版的技术代表有：JAR文件格式、JDBC、JavaBeans、RMI等。Java语言的语法也有了一定的增强，如内部类（Inner Class）和反射（Reflection）都是在这时候出现的。直到1999年4月8日，JDK 1.1一共发布了1.1.0至1.1.8这9个版本。从1.1.4以后，每个JDK版本都有一个属于自己的名字（工程代号），分别为：JDK 1.1.4-Sparkler（宝石）、JDK 1.1.5-Pumpkin（南瓜）、JDK 1.1.6-Abigail（阿比盖尔，女子名）、JDK 1.1.7-Brutus（布鲁图，古罗马政治家和将军）和JDK 1.1.8-Chelsea（切尔西，城市名）。
1998年12月4日，JDK迎来了一个里程碑式的重要版本：工程代号为Playground（竞技场）的JDK 1.2，Sun在这个版本中把Java技术体系拆分为三个方向，分别是面向桌面应用开发的J2SE（Java 2 Platform，Standard Edition）、面向企业级开发的J2EE（Java 2 Platform，Enterprise Edition）和面向手机等移动终端开发的J2ME（Java 2 Platform，Micro Edition）。在这个版本中出现的代表性技术非常多，如EJB、Java Plug-in、Java IDL、Swing等，并且这个版本中Java虚拟机第一次内置了JIT（Just In Time）即时编译器（JDK 1.2中曾并存过三个虚拟机，Classic VM、HotSpot VM和Exact VM，其中Exact VM只在Solaris平台出现过；后面两款虚拟机都是内置了JIT即时编译器的，而之前版本所带的Classic VM只能以外挂的形式使用即时编译器）。在语言和API层面上，Java添加了strictfp关键字，Java类库添加了现在Java编码之中极为常用的一系列Collections集合类等。在1999年3月和7月，分别有JDK 1.2.1和JDK 1.2.2两个小升级版本发布。

1999年4月27日，HotSpot虚拟机诞生。HotSpot最初由一家名为“Longview Techno-logies”的小公司开发，由于HotSpot的优异表现，这家公司在1997年被Sun公司收购。Hot-Spot虚拟机刚发布时是作为JDK 1.2的附加程序提供的，后来它成为JDK 1.3及之后所有JDK版本的默认Java虚拟机。
2000年5月8日，工程代号为Kestrel（美洲红隼）的JDK 1.3发布。相对于JDK 1.2，JDK1.3的改进主要体现在Java类库上（如数学运算和新的Timer API等），JNDI服务从JDK 1.3开始被作为一项平台级服务提供（以前JNDI仅仅是一项扩展服务），使用CORBA IIOP来实现RMI的通信协议，等等。这个版本还对Java 2D做了很多改进，提供了大量新的Java 2D API，并且新添加了JavaSound类库。JDK 1.3有1个修正版本JDK 1.3.1，工程代号为Ladybird（瓢虫），于2001年5月17日发布。自从JDK 1.3开始，Sun公司维持着稳定的研发节奏：大约每隔两年发布一个JDK的主版本，以动物命名，期间发布的各个修正版本则以昆虫作为工程代号。

Kryo序列化问题

November 11, 2024 • 分类:java • 标签:Kryo

深藏不露的Bug：当Kryo序列化遇上toString()

在软件开发中，我们时常与各种Bug不期而遇。有些Bug显而易见，错误日志直指病灶；而另一些则如冰山一角，表面现象可能误导我们偏离真正的根源。

本文将详细复盘一个在Java项目中，因错误处理Kryo序列化字节流而导致的Bug: ClassNotFoundException，揭示一个使用Kryo序列化后又使用 toString() 导致的Bug。

项目背景和问题分析

AI工具日趋强大，为了熟悉Spring AI和体验现在AI编程工具的潜力，我选择了使用AI来辅助我开发一个基于Spring AI的项目。

一个令人困惑的Bug

在使用Spring AI构建聊天功能时，实现对话记忆（ChatMemory）时计划采用Kryo进行序列化，并存储于Redis中。

于是我在IDEA中通过 AI 插件实现了 RedisChatMemory 类，以实现基于Redis的AI对话记忆功能。代码如下：

        java
        
    
import org.springframework.ai.chat.memory.ChatMemory;
import org.springframework.ai.chat.messages.Message;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.data.redis.core.StringRedisTemplate;
import org.springframework.stereotype.Component;
import com.esotericsoftware.kryo.Kryo;
import com.esotericsoftware.kryo.io.Output;
import com.esotericsoftware.kryo.io.Input;
import org.objenesis.strategy.StdInstantiatorStrategy;

import java.io.ByteArrayInputStream;
import java.io.ByteArrayOutputStream;
import java.util.ArrayList;
import java.util.List;

@Component
public class RedisChatMemory implements ChatMemory {

    private final StringRedisTemplate redisTemplate;
    private static final Kryo kryo = new Kryo();
    
    static {
        kryo.setRegistrationRequired(false);
        // 设置实例化策略
        kryo.setInstantiatorStrategy(new StdInstantiatorStrategy());
    }

    @Autowired
    public RedisChatMemory(StringRedisTemplate redisTemplate) {
        this.redisTemplate = redisTemplate;
    }

    @Override
    public void add(String conversationId, List<Message> messages) {
        List<Message> conversationMessages = getOrCreateConversation(conversationId);
        conversationMessages.addAll(messages);
        saveConversation(conversationId, conversationMessages);
    }

    @Override
    public List<Message> get(String conversationId, int lastN) {
        List<Message> allMessages = getOrCreateConversation(conversationId);
        return allMessages.stream()
                .skip(Math.max(0, allMessages.size() - lastN))
                .toList();
    }

    @Override
    public void clear(String conversationId) {
        redisTemplate.delete(conversationId);
    }

    private List<Message> getOrCreateConversation(String conversationId) {
        String data = redisTemplate.opsForValue().get(conversationId);
        if (data != null && !data.isEmpty()) {
            try (Input input = new Input(new ByteArrayInputStream(data.getBytes()))) {
                return kryo.readObject(input, ArrayList.class);
            } catch (Exception e) {
                e.printStackTrace();
            }
        }
        return new ArrayList<>();
    }

    private void saveConversation(String conversationId, List<Message> messages) {
        try (ByteArrayOutputStream bos = new ByteArrayOutputStream();
             Output output = new Output(bos)) {
            kryo.writeObject(output, messages);
            output.flush();
            redisTemplate.opsForValue().set(conversationId, bos.toString());
        } catch (Exception e) {
            e.printStackTrace();
        }
    }
}

然而，系统在运行中突然抛出异常：

VM和Linux安装

November 10, 2022 • 分类:linux • 标签:VMware

Virtual Machines | Linux安装 | 终端工具

VMware Workstation

虚拟交换机和网卡

在VMware虚拟网络编辑器中，也有三个 虚拟交换机 分别对应不同的网络模式：

ℹ️ VMware相关网络虚拟设备

VMnet0：这是VMware用于虚拟 桥接网络 下的虚拟交换机;

VMnet1：这是VMware用于虚拟 Host-Only （仅主机）网络下的虚拟交换机;

VMnet8：这是VMware用于虚拟 NAT网络 下的虚拟交换机;

在主机的网络连接里面可以看到多了两块网卡：

        bash
        
VMware Network Adapter VMnet1：这是Host用于与Host-Only虚拟网络进行通信的虚拟网卡;

VMware Network Adapter VMnet8：这是Host用于与NAT虚拟网络进行通信的虚拟网卡;

vmware为我们提供了三种网络工作模式，它们分别是：Bridged(桥接模式)、NAT(网络地址转换模式)、Host-Only(仅主机模式)。

Bridged(桥接)

桥接模式（Bridge Mode）通过将两个或多个局域网连接在一起，形成一个扩展的局域网，使得这些局域网的设备能够互相通信。在桥接模式中，设备之间的数据流量可以直接传输，并且不经过路由器进行转发。

桥接模式下所有虚拟机都和主机在同一网段，可以把它们看成是"平等"的关系

💡 Bridged(桥接模式)配置静态IP

在VM的虚拟机 设置 –> 网络适配器 将网络连接模式选择为桥接模式并确保 编辑 –> 虚拟网络编辑器 中将桥接 VMnet0 桥接至主机中的正确网卡

先通过 ipconfig 查看宿主机的网络信息（因为桥接模式虚拟机与宿主机在同一网段下）

        bash
        
    
连接特定的 DNS 后缀 . . . . . . . :
IPv4 地址 . . . . . . . . . . . . : 192.168.243.54
子网掩码  . . . . . . . . . . . . : 255.255.255.0
默认网关. . . . . . . . . . . . . : 192.168.243.158

进入虚拟机修改配置文件，以CentOS7为例：

bash

vi /etc/sysconfig/network-scripts/ifcfg-ens33   # 打开ifcfg-ens33⽂件，修改配置

在桥接模式下，虚拟机IP地址需要与主机在同一网段，如果需要联网，则网关与DNS需要与主机网卡一致:

Kubernetes集群搭建

November 10, 2023 • 分类:Kubernetes • 标签:kubeadm

CentOS虚拟机的Kubernetes主从架构集群搭建

参考Blog：K8S集群搭建

Linux基础环境准备

此次K8S集群开发环境采用VM+CentOS7.9搭建，先准备一个基本环境完善的Linux系统作为模板，利用VM克隆出搭建集群所需的机器，再修改必要的配置文件即可

基础Linux环境：基于VM环境的 CentOS7.9 , 设置好固定静态IP（NAT模式），内网互通

关闭Swap分区

kubelet要求必须禁用交换分区，所以kubeadm初始化时回检测swap是否关闭，如果没有关闭会报错

        bash
        
    
# 临时关闭，重启恢复
swapoff -a

# 永久关闭，注释swap行
vim /etc/fstab
# /dev/mapper/centos-swap swap                    swap    defaults        0 0

重启后验证 Swap 是否禁用:

bash

free -h  #输出中的 Swap 部分应该显示为 0B

禁用SELinux

        bash
        
    
# 临时禁用 SELinux
sudo setenforce 0

sudo vim /etc/selinux/config
# 找到 SELINUX 参数，并将其值设置为 disabled
SELINUX=disabled

也可以直接执行如下命令：

KubeSphere离线安装

November 10, 2024 • 分类:Kubernetes • 标签:kubesphere

KubeSphere离线安装Kubernetes集群

官网也有介绍关于离线环境中部署 Kubernetes v1.28.12 和 KubeSphere v4.1.2 的教程：离线安装 KubeSphere

但有一些细节地方容易出错，加上高度集成的工具，安装过程出错很难排查

本次实验通过两台CentOS7.9的虚拟机进行：

IP	hostname	角色和作用
192.168.16.60	ks-registry	离线环境的镜像仓库节点
192.168.16.61	ks-master	制作离线包（需要联网），集群主节点和工作节点

所有节点需要安装如下软甲：

bash

yum install socat conntrack -y

实验环境并且最好关闭防火墙，交换分区等，详细设置参考：linux基础环境设置，避免后续安装出问题

构建离线安装包

先根据版本信息获取镜像列表，具体参考官网即可：获取版本信息及镜像列表

拓展插件建议全部勾选，因为有的插件存在依赖，若没选中需要的依赖，后续无法顺利安装插件

kubesphere将会发送以下三个文件到指定邮箱：kubesphere-images.txt, kk-manifest.yaml, kk-manifest-mirror.yaml

下载相关工具

以下命令需要联网（最好提前配置好代理），也可以预先使用 export KKZONE=cn 命令

安装 KubeKey （安装kubernetes的工具），执行以下命令安装⼯具 KubeKey：

bash

curl -sSL https://get-kk.kubesphere.io | sh -

下载完成后当前目录下将生成 KubeKey 二进制文件 kk

Java基础语法

Java核心特性

Javaweb开发

数据可与ORM框架

Spring Framework

常用库和工具

缓存和消息队列

其他常用中间件

分布式与微服务

Spring Cloud

综合应用与项目实践

常见面试题总结

前端基础入门

常用工具和框架

性能优化和Web安全

Web3理论基础

Python基础语法

Python图像处理

Python Web开发

Python应用及项目

C/CPP基础

Go语言基础

Linux系统

Git和CI/CD

Docker/Kubernetes

操纵系统和网络

数据结构与算法

设计模式

Linux环境

Windows

下载安装JDK

一 Java的起源和发展史

1. Java的起源

2. JDK1-7

项目背景和问题分析

一个令人困惑的Bug

VMware Workstation

虚拟交换机和网卡

Bridged(桥接)

Linux基础环境准备

关闭Swap分区

禁用SELinux

构建离线安装包

下载相关工具