若离风博客

简单的技术博客

好长时间没有写博客了,也不是很忙,只是说不知道写什么而已。这段时间一直在搞技术,毕竟去年很长时间都没有搞技术了,想在最短的时间内恢复之前的技术水平,现在前端和后端一起推进,努力成为一名全栈工程师,然后再成为一名独立开发者,所谓的独立开发其实就是创业了,只不过这个公司就你一个老板,目前23岁了,希望在27岁之前能够实现吧,按照我这种性格,一辈子帮别人打工那是不可能的,同时这也是为了避免30岁之后的尴尬局面吧,目前的互联网局势实在不容乐观。

可是现在又出现了一个棘手的问题,前后端一起搞的话在短时间内肯定是没法深入的,而现在的大厂面试又需要你对某一项技术了解得很深,毕竟一线大厂产品用户量极多,如何优化就显得非常重要,基本上都是前后端分离开发,都需要有专门的技术人员,很少说全栈开发的,即使有那要么就是天才,要么就是上了年纪的技术大佬~~~~。按照目前的情况,光说技术方面的话,使用下轮子和现成的解决方案也基本上可以将一个项目从前端写到后端再到部署,但是就是没有点子,不知道写什么,不知道用户究竟有什么需求,之前一直说想做一款微信小程序,目前也一直还没开始,还在斟酌要不要真的做,毕竟真的做了也要花费大量的时间和金钱,而且市面上类似功能的小程序也有很多,试错的成本有点大。

目前我正缺的就是一种发现需求和创新的能力,有没有哪位佬有独立开发想法的,有的话带我一手呗!

前言

gitCalendar之前是一位大佬开发的插件,插件可以获取github日历并显示在hexo博客上,但是这个插件的API好长时间都没有更新过,导致大部分功能都不可以使用,今天我看了一下,那位大佬的api是用python写的一个类似爬虫的脚本,爬取github上的数据解析之后显示在自己的博客,按照原作者的功能我检查了一下github发现之前的字段已经不在了。

image-20240209003626531

那么使用爬虫爬取数据的方式也就失效了,继续使用原来的办法那将获取到一个空的对象,没有数据,那么如何再获取日历的数据呢?其实github官方也有现成的接口给我们去使用不需要写那么麻烦的爬虫,还随时会失效

使用之前你需要去作者这里了解,先装好作者的原版,如果比较懒也可以直接看下面:https://github.com/Zfour/python_github_calendar_api

前端插件安装

1
npm install hexo-filter-gitcalendar --save

在hexo配置文件中配置,我这里使用的是buttfuly主题,注意不是主题配置文件,是hexo配置文件

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
# butterfly
githubcalendar:
enable: true
priority: 3
enable_page: /
user: ruolifeng
layout:
type: id
name: recent-posts
index: 0
githubcalendar_html: '<div class="recent-post-item" style="width:100%;height:auto;padding:10px;"><div id="github_loading" style="width:10%;height:100%;margin:0 auto;display: block"><svg xmlns="http://www.w3.org/2000/svg" xmlns:xlink="http://www.w3.org/1999/xlink" viewBox="0 0 50 50" style="enable-background:new 0 0 50 50" xml:space="preserve"><path fill="#d0d0d0" d="M25.251,6.461c-10.318,0-18.683,8.365-18.683,18.683h4.068c0-8.071,6.543-14.615,14.615-14.615V6.461z" transform="rotate(275.098 25 25)"><animateTransform attributeType="xml" attributeName="transform" type="rotate" from="0 25 25" to="360 25 25" dur="0.6s" repeatCount="indefinite"></animateTransform></path></svg></div><div id="github_container"></div></div>'
pc_minheight: 280px
mobile_minheight: 0px
color: "['#ebedf0', '#f0fff4', '#dcffe4', '#bef5cb', '#85e89d', '#34d058', '#28a745', '#22863a', '#176f2c', '#165c26', '#144620']"
api: https://gitcalendar.rlfit.cn/contributions
# api: https://python-gitee-calendar-api.vercel.app/api
calendar_js: https://cdn.jsdelivr.net/gh/Zfour/hexo-github-calendar@1.21/hexo_githubcalendar.js
plus_style: ""

GraphQL查询

使用github官方提供的GraphQL接口查询,这也是官方推荐的一种方式:https://api.github.com/graphql

使用这个接口需要你提供token作为安全验证,创建的方式为

1
github->setting->developer seting->person access tokens->Tokens

image-20240209004950893

里面的权限建议全部选择,本来可以不用选择任何权限的,但是尝试获取之后,获取的日历数据不全,只有全部权限都选上时候才能获取完整的数据

创建好token之后保存好

接下来就是编写代码,由于我比较擅长Java于是就用Java写了,本来可以不用springboot的但是还是用了

API编写

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
package cn.rlfit.gitcalendarspringboot.controller;

import org.json.JSONArray;
import org.json.JSONObject;
import org.springframework.beans.factory.annotation.Value;
import org.springframework.web.bind.annotation.GetMapping;
import org.springframework.web.bind.annotation.PathVariable;
import org.springframework.web.bind.annotation.RestController;

import java.net.http.HttpClient;
import java.net.http.HttpRequest;
import java.net.http.HttpResponse;
import java.net.URI;

@RestController
public class GitHubContributionsApplication {

@Value("${token}")
private String token;

@GetMapping("/contributions/{username}")
public String getContributions(@PathVariable("username") String username) throws Exception {
// GraphQL查询
String query = String.format("""
{
"query": "query { user(login: \\"%s\\") { contributionsCollection { contributionCalendar { totalContributions weeks { contributionDays { date contributionCount } } } } } }"
}""", username);

// 发送请求
HttpClient client = HttpClient.newHttpClient();
HttpRequest request = HttpRequest.newBuilder()
.uri(URI.create("https://api.github.com/graphql"))
.header("Authorization", "Bearer " + token)
.header("Content-Type", "application/json")
.POST(HttpRequest.BodyPublishers.ofString(query))
.build();

HttpResponse<String> response = client.send(request, HttpResponse.BodyHandlers.ofString());

// 处理响应
JSONObject json = new JSONObject(response.body());
JSONObject data = json.getJSONObject("data").getJSONObject("user").getJSONObject("contributionsCollection").getJSONObject("contributionCalendar");

// 提取和格式化数据
int totalContributions = data.getInt("totalContributions");
JSONArray weeks = data.getJSONArray("weeks");
JSONArray newContributions = new JSONArray();
for (int i = 0; i < weeks.length(); i++) {
JSONObject week = weeks.getJSONObject(i);
JSONArray contributionDays = week.getJSONArray("contributionDays");
JSONArray weekContributions = new JSONArray();
for (int j = 0; j < contributionDays.length(); j++) {
JSONObject day = contributionDays.getJSONObject(j);
JSONObject newDay = new JSONObject();
newDay.put("date", day.getString("date"));
newDay.put("count", day.getInt("contributionCount"));
weekContributions.put(newDay);
}
newContributions.put(weekContributions);
}

JSONObject finalData = new JSONObject();
finalData.put("total", totalContributions);
finalData.put("contributions", newContributions);

return finalData.toString(4);
}
}

我们创建好一个springboot项目之后将上述代码放在和启动类同一级目录,由于访问存在跨域问题,所以还要创建配置类,解决跨域问题

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
package cn.rlfit.gitcalendarspringboot.config;

import org.springframework.beans.factory.annotation.Value;
import org.springframework.context.annotation.Configuration;
import org.springframework.web.servlet.config.annotation.CorsRegistry;
import org.springframework.web.servlet.config.annotation.WebMvcConfigurer;

@Configuration
public class WebConfig implements WebMvcConfigurer {
@Value("${filePath}")
private String filePath;
@Value("${source}")
private String source;
@Override
public void addCorsMappings(CorsRegistry registry) {
System.out.println(filePath);
System.out.println(source);
registry.addMapping(filePath) // 允许跨域请求的路径
.allowedOrigins(source) // 允许的源
.allowedMethods("GET", "POST", "PUT", "DELETE") // 允许的HTTP方法
.allowCredentials(true).maxAge(3600);
}
}

待会需要使用docker部署所以就将配置提取出来放在配置文件中了,方便之后的修改

1
2
3
4
5
6
#token
token=ghp_
#可以访问的路径,基本上不用改
filePath=/**
#可以跨域的域名,你的博客域名
source=http://localhost:4000/

目录结构

image-20240209005906413

填上上述配置我们在本地启动,尝试获取数据

image-20240209010034525

发现可以正常获取数据,但是特别注意的是上面的请求路径,由于springboot无法配置作者之前配置的请求参数方式,所以待会需要简单修改一下前端插件的代码

前端代码修改

image-20240209010415135

找到上面的插件,进入index.js文件,将箭头指出的?修改为/,修改之后待会请求的时候就不会出错了,之后去作者提供的配置文件处将api地址替换成我们的:image-20240209010748465其他代码不需要更改,这里的域名是我自己配置的,大佬的话应该自己会搭建了吧!

部署

为了方便我使用docker的方式进行部署,如果还不会使用docker的小伙伴可以看我的这篇文章,很重要

下面我就将我的配置文件放在这里了

docker搭建步骤

  • 首先创建一个文件夹,这里举例为test将刚才的Java代码打包成jar包,将jar包放在test文件夹中,如果不会打包的可以评论我给大家发

  • 创建一个名为Dockerfile的文件在test文件夹中,将下面的代码写在里面

    1
    2
    3
    4
    5
    6
    7
    FROM openjdk:17-jdk-alpine

    COPY ./app.jar /temp/app.jar

    COPY ./config/application.properties /temp/config/application.properties

    ENTRYPOINT ["java", "-jar", "/temp/app.jar","--spring.config.location=/temp/config/application.properties"]
  • 创建一个docker-compose.yaml文件在test文件夹中,写如下面的代码

    1
    2
    3
    4
    5
    6
    7
    8
    9
    version: '3.8'

    services:
    calendar:
    build: .
    ports:
    - "8900:8080"
    volumes:
    - ./config/application.properties:/temp/config/application.properties
  • 创建一个config文件夹在test文件夹中,在里面创建一个application.properties文件将上面我说过的配置文件代码写在里面,记得改成你自己的

    1
    2
    3
    4
    5
    6
    #token
    token=ghp_
    #可以访问的路径,基本上不用改
    filePath=/**
    #可以跨域的域名,你的博客域名
    source=http://localhost:4000/
  • 上传test文件夹到你的机器

    image-20240209011943242

再次提醒test是我举例的文件夹,你可以任意命名

打开shell控制台cd到该文件夹目录

image-20240209012057684

执行命令

1
2
docker-compose up -d
docker ps -a

出现下面的界面说明部署成功

image-20240209012419027

此时我们就可以使用你的ip地址:8900/contributions/你的github名字获取数据了,此时如果你不需要使用域名就将ip填过去,如果你想使用域名,那么就使用NGINX进行反向代理,也可以使用宝塔,如果你想使用宝塔那么你起初就该装好

如果你不想使用docker部署,也可以直接安装宝塔或者给你的虚拟机配置jdk环境使用java -jar app.jar命令进行部署,此时需要将你的配置文件位置不变,你也可以使用作者的那种方式部署在免费的机器上

image-20240209013757695

1.1.什么是Docker

微服务虽然具备各种各样的优势,但服务的拆分通用给部署带来了很大的麻烦。

  • 分布式系统中,依赖的组件非常多,不同组件之间部署时往往会产生一些冲突。
  • 在数百上千台服务中重复部署,环境不一定一致,会遇到各种问题

1.1.1.应用部署的环境问题

大型项目组件较多,运行环境也较为复杂,部署时会碰到一些问题:

  • 依赖关系复杂,容易出现兼容性问题

  • 开发、测试、生产环境有差异

image-20210731141907366

例如一个项目中,部署时需要依赖于node.js、Redis、RabbitMQ、MySQL等,这些服务部署时所需要的函数库、依赖项各不相同,甚至会有冲突。给部署带来了极大的困难。

1.1.2.Docker解决依赖兼容问题

而Docker确巧妙的解决了这些问题,Docker是如何实现的呢?

Docker为了解决依赖的兼容问题的,采用了两个手段:

  • 将应用的Libs(函数库)、Deps(依赖)、配置与应用一起打包

  • 将每个应用放到一个隔离容器去运行,避免互相干扰

image-20210731142219735

这样打包好的应用包中,既包含应用本身,也保护应用所需要的Libs、Deps,无需再操作系统上安装这些,自然就不存在不同应用之间的兼容问题了。

虽然解决了不同应用的兼容问题,但是开发、测试等环境会存在差异,操作系统版本也会有差异,怎么解决这些问题呢?

1.1.3.Docker解决操作系统环境差异

要解决不同操作系统环境差异问题,必须先了解操作系统结构。以一个Ubuntu操作系统为例,结构如下:

image-20210731143401460

结构包括:

  • 计算机硬件:例如CPU、内存、磁盘等
  • 系统内核:所有Linux发行版的内核都是Linux,例如CentOS、Ubuntu、Fedora等。内核可以与计算机硬件交互,对外提供内核指令,用于操作计算机硬件。
  • 系统应用:操作系统本身提供的应用、函数库。这些函数库是对内核指令的封装,使用更加方便。

应用于计算机交互的流程如下:

1)应用调用操作系统应用(函数库),实现各种功能

2)系统函数库是对内核指令集的封装,会调用内核指令

3)内核指令操作计算机硬件

Ubuntu和CentOSpringBoot都是基于Linux内核,无非是系统应用不同,提供的函数库有差异:

image-20210731144304990

此时,如果将一个Ubuntu版本的MySQL应用安装到CentOS系统,MySQL在调用Ubuntu函数库时,会发现找不到或者不匹配,就会报错了:

image-20210731144458680

Docker如何解决不同系统环境的问题?

  • Docker将用户程序与所需要调用的系统(比如Ubuntu)函数库一起打包
  • Docker运行到不同操作系统时,直接基于打包的函数库,借助于操作系统的Linux内核来运行

如图:

image-20210731144820638

1.1.4.小结

Docker如何解决大型项目依赖关系复杂,不同组件依赖的兼容性问题?

  • Docker允许开发中将应用、依赖、函数库、配置一起打包,形成可移植镜像
  • Docker应用运行在容器中,使用沙箱机制,相互隔离

Docker如何解决开发、测试、生产环境有差异的问题?

  • Docker镜像中包含完整运行环境,包括系统函数库,仅依赖系统的Linux内核,因此可以在任意Linux操作系统上运行

Docker是一个快速交付应用、运行应用的技术,具备下列优势:

  • 可以将程序及其依赖、运行环境一起打包为一个镜像,可以迁移到任意Linux操作系统
  • 运行时利用沙箱机制形成隔离容器,各个应用互不干扰
  • 启动、移除都可以通过一行命令完成,方便快捷

1.2.Docker和虚拟机的区别

Docker可以让一个应用在任何操作系统中非常方便的运行。而以前我们接触的虚拟机,也能在一个操作系统中,运行另外一个操作系统,保护系统中的任何应用。

两者有什么差异呢?

虚拟机(virtual machine)是在操作系统中模拟硬件设备,然后运行另一个操作系统,比如在 Windows 系统里面运行 Ubuntu 系统,这样就可以运行任意的Ubuntu应用了。

Docker仅仅是封装函数库,并没有模拟完整的操作系统,如图:

image-20210731145914960

对比来看:

image-20210731152243765

小结:

Docker和虚拟机的差异:

  • docker是一个系统进程;虚拟机是在操作系统中的操作系统

  • docker体积小、启动速度快、性能好;虚拟机体积大、启动速度慢、性能一般

1.3.Docker架构

1.3.1.镜像和容器

Docker中有几个重要的概念:

镜像(Image):Docker将应用程序及其所需的依赖、函数库、环境、配置等文件打包在一起,称为镜像。

容器(Container):镜像中的应用程序运行后形成的进程就是容器,只是Docker会给容器进程做隔离,对外不可见。

一切应用最终都是代码组成,都是硬盘中的一个个的字节形成的文件。只有运行时,才会加载到内存,形成进程。

镜像,就是把一个应用在硬盘上的文件、及其运行环境、部分系统函数库文件一起打包形成的文件包。这个文件包是只读的。

容器呢,就是将这些文件中编写的程序、函数加载到内存中允许,形成进程,只不过要隔离起来。因此一个镜像可以启动多次,形成多个容器进程。

image-20210731153059464

例如你下载了一个QQ,如果我们将QQ在磁盘上的运行文件及其运行的操作系统依赖打包,形成QQ镜像。然后你可以启动多次,双开、甚至三开QQ,跟多个妹子聊天。

1.3.2.DockerHub

开源应用程序非常多,打包这些应用往往是重复的劳动。为了避免这些重复劳动,人们就会将自己打包的应用镜像,例如Redis、MySQL镜像放到网络上,共享使用,就像GitHub的代码共享一样。

  • DockerHub:DockerHub是一个官方的Docker镜像的托管平台。这样的平台称为Docker Registry。

  • 国内也有类似于DockerHub 的公开服务,比如 网易云镜像服务阿里云镜像库等。

我们一方面可以将自己的镜像共享到DockerHub,另一方面也可以从DockerHub拉取镜像:

image-20210731153743354

1.3.3.Docker架构

我们要使用Docker来操作镜像、容器,就必须要安装Docker。

Docker是一个CS架构的程序,由两部分组成:

  • 服务端(server):Docker守护进程,负责处理Docker指令,管理镜像、容器等

  • 客户端(client):通过命令或RestAPI向Docker服务端发送指令。可以在本地或远程向服务端发送指令。

如图:

image-20210731154257653

1.3.4.小结

镜像:

  • 将应用程序及其依赖、环境、配置打包在一起

容器:

  • 镜像运行起来就是容器,一个镜像可以运行多个容器

Docker结构:

  • 服务端:接收命令或远程请求,操作镜像或容器

  • 客户端:发送命令或者请求到Docker服务端

DockerHub:

  • 一个镜像托管的服务器,类似的还有阿里云镜像服务,统称为DockerRegistry

1.4.安装Docker

企业部署一般都是采用Linux操作系统,而其中又数CentOS发行版占比最多,因此我们在CentOS下安装Docker。参考 资料中的文档:

image-20210731155002425

2.Docker的基本操作

2.1.镜像操作

2.1.1.镜像名称

首先来看下镜像的名称组成:

  • 镜名称一般分两部分组成:[repository]:[tag]。
  • 在没有指定tag时,默认是latest,代表最新版本的镜像

如图:

image-20210731155141362

这里的mysql就是repository,5.7就是tag,合一起就是镜像名称,代表5.7版本的MySQL镜像。

2.1.2.镜像命令

常见的镜像操作命令如图:

image-20210731155649535

2.1.3.案例1-拉取、查看镜像

需求:从DockerHub中拉取一个nginx镜像并查看

1)首先去镜像仓库搜索nginx镜像,比如DockerHub:

image-20210731155844368

2)根据查看到的镜像名称,拉取自己需要的镜像,通过命令:docker pull nginx

image-20210731155856199

3)通过命令:docker images 查看拉取到的镜像

image-20210731155903037

2.1.4.案例2-保存、导入镜像

需求:利用docker save将nginx镜像导出磁盘,然后再通过load加载回来

1)利用docker xx –help命令查看docker save和docker load的语法

例如,查看save命令用法,可以输入命令:

1
docker save --help

结果:

image-20210731161104732

命令格式:

1
docker save -o [保存的目标文件名称] [镜像名称]

2)使用docker save导出镜像到磁盘

运行命令:

1
docker save -o nginx.tar nginx:latest

结果如图:

image-20210731161354344

3)使用docker load加载镜像

先删除本地的nginx镜像:

1
docker rmi nginx:latest

然后运行命令,加载本地文件:

1
docker load -i nginx.tar

结果:

image-20210731161746245

2.1.5.练习

需求:去DockerHub搜索并拉取一个Redis镜像

目标:

1)去DockerHub搜索Redis镜像

2)查看Redis镜像的名称和版本

3)利用docker pull命令拉取镜像

4)利用docker save命令将 redis:latest打包为一个redis.tar包

5)利用docker rmi 删除本地的redis:latest

6)利用docker load 重新加载 redis.tar文件

2.2.容器操作

2.2.1.容器相关命令

容器操作的命令如图:

image-20210731161950495

容器保护三个状态:

  • 运行:进程正常运行
  • 暂停:进程暂停,CPU不再运行,并不释放内存
  • 停止:进程终止,回收进程占用的内存、CPU等资源

其中:

  • docker run:创建并运行一个容器,处于运行状态

  • docker pause:让一个运行的容器暂停

  • docker unpause:让一个容器从暂停状态恢复运行

  • docker stop:停止一个运行的容器

  • docker start:让一个停止的容器再次运行

  • docker rm:删除一个容器

2.2.2.案例-创建并运行一个容器

创建并运行nginx容器的命令:

1
docker run --name containerName -p 80:80 -d nginx

命令解读:

  • docker run :创建并运行一个容器
  • –name : 给容器起一个名字,比如叫做mn
  • -p :将宿主机端口与容器端口映射,冒号左侧是宿主机端口,右侧是容器端口
  • -d:后台运行容器
  • nginx:镜像名称,例如nginx

这里的-p参数,是将容器端口映射到宿主机端口。

默认情况下,容器是隔离环境,我们直接访问宿主机的80端口,肯定访问不到容器中的nginx。

现在,将容器的80与宿主机的80关联起来,当我们访问宿主机的80端口时,就会被映射到容器的80,这样就能访问到nginx了:

image-20210731163255863

2.2.3.案例-进入容器,修改文件

需求:进入Nginx容器,修改HTML文件内容,添加“传智教育欢迎您”

提示:进入容器要用到docker exec命令。

步骤

1)进入容器。进入我们刚刚创建的nginx容器的命令为:

1
docker exec -it mn bash

命令解读:

  • docker exec :进入容器内部,执行一个命令

  • -it : 给当前进入的容器创建一个标准输入、输出终端,允许我们与容器交互

  • mn :要进入的容器的名称

  • bash:进入容器后执行的命令,bash是一个linux终端交互命令

2)进入nginx的HTML所在目录 /usr/share/nginx/html

容器内部会模拟一个独立的Linux文件系统,看起来如同一个linux服务器一样:

image-20210731164159811

nginx的环境、配置、运行文件全部都在这个文件系统中,包括我们要修改的html文件。

查看DockerHub网站中的nginx页面,可以知道nginx的html目录位置在/usr/share/nginx/html

我们执行命令,进入该目录:

1
cd /usr/share/nginx/html

查看目录下文件:

image-20210731164455818

3)修改index.html的内容

容器内没有vi命令,无法直接修改,我们用下面的命令来修改:

1
sed -i -e 's#Welcome to nginx#需要修改的内容#g' -e 's#<head>#<head><meta charset="utf-8">#g' index.html

2.2.4.小结

docker run命令的常见参数有哪些?

  • –name:指定容器名称
  • -p:指定端口映射
  • -d:让容器后台运行

查看容器日志的命令:

  • docker logs
  • 添加 -f 参数可以持续查看日志

查看容器状态:

  • docker ps
  • docker ps -a 查看所有容器,包括已经停止的

2.3.数据卷(容器数据管理)

在之前的nginx案例中,修改nginx的html页面时,需要进入nginx内部。并且因为没有编辑器,修改文件也很麻烦。

这就是因为容器与数据(容器内文件)耦合带来的后果。

image-20210731172440275

要解决这个问题,必须将数据与容器解耦,这就要用到数据卷了。

2.3.1.什么是数据卷

数据卷(volume)是一个虚拟目录,指向宿主机文件系统中的某个目录。

image-20210731173541846

一旦完成数据卷挂载,对容器的一切操作都会作用在数据卷对应的宿主机目录了。

这样,我们操作宿主机的/var/lib/docker/volumes/html目录,就等于操作容器内的/usr/share/nginx/html目录了

2.3.2.数据集操作命令

数据卷操作的基本语法如下:

1
docker volume [COMMAND]

docker volume命令是数据卷操作,根据命令后跟随的command来确定下一步的操作:

  • create 创建一个volume
  • inspect 显示一个或多个volume的信息
  • ls 列出所有的volume
  • prune 删除未使用的volume
  • rm 删除一个或多个指定的volume

2.3.3.创建和查看数据卷

需求:创建一个数据卷,并查看数据卷在宿主机的目录位置

① 创建数据卷

1
docker volume create html

② 查看所有数据

1
docker volume ls

结果:

image-20210731173746910

③ 查看数据卷详细信息卷

1
docker volume inspect html

结果:

image-20210731173809877

可以看到,我们创建的html这个数据卷关联的宿主机目录为/var/lib/docker/volumes/html/_data目录。

小结

数据卷的作用:

  • 将容器与数据分离,解耦合,方便操作容器内数据,保证数据安全

数据卷操作:

  • docker volume create:创建数据卷
  • docker volume ls:查看所有数据卷
  • docker volume inspect:查看数据卷详细信息,包括关联的宿主机目录位置
  • docker volume rm:删除指定数据卷
  • docker volume prune:删除所有未使用的数据卷

2.3.4.挂载数据卷

我们在创建容器时,可以通过 -v 参数来挂载一个数据卷到某个容器内目录,命令格式如下:

1
2
3
4
5
docker run \
--name mn \
-v html:/root/html \
-p 8080:80
nginx \

这里的-v就是挂载数据卷的命令:

  • -v html:/root/htm :把html数据卷挂载到容器内的/root/html这个目录中

2.3.5.案例-给nginx挂载数据卷

需求:创建一个nginx容器,修改容器内的html目录内的index.html内容

分析:上个案例中,我们进入nginx容器内部,已经知道nginx的html目录所在位置/usr/share/nginx/html ,我们需要把这个目录挂载到html这个数据卷上,方便操作其中的内容。

提示:运行容器时使用 -v 参数挂载数据卷

步骤:

① 创建容器并挂载数据卷到容器内的HTML目录

1
docker run --name mn -v html:/usr/share/nginx/html -p 80:80 -d nginx

② 进入html数据卷所在位置,并修改HTML内容

1
2
3
4
5
6
# 查看html数据卷的位置
docker volume inspect html
# 进入该目录
cd /var/lib/docker/volumes/html/_data
# 修改文件
vi index.html

2.3.6.案例-给MySQL挂载本地目录

容器不仅仅可以挂载数据卷,也可以直接挂载到宿主机目录上。关联关系如下:

  • 带数据卷模式:宿主机目录 –> 数据卷 —> 容器内目录
  • 直接挂载模式:宿主机目录 —> 容器内目录

如图:

image-20210731175155453

语法

目录挂载与数据卷挂载的语法是类似的:

  • -v [宿主机目录]:[容器内目录]
  • -v [宿主机文件]:[容器内文件]

需求:创建并运行一个MySQL容器,将宿主机目录直接挂载到容器

实现思路如下:

1)在将 资料中的mysql.tar文件上传到虚拟机,通过load命令加载为镜像

2)创建目录/tmp/mysql/data

3)创建目录/tmp/mysql/conf,将 资料提供的hmy.cnf文件上传到/tmp/mysql/conf

4)去DockerHub查阅资料,创建并运行MySQL容器,要求:

① 挂载/tmp/mysql/data到mysql容器内数据存储目录

② 挂载/tmp/mysql/conf/hmy.cnf到mysql容器的配置文件

③ 设置MySQL密码

2.3.7.小结

docker run的命令中通过 -v 参数挂载文件或目录到容器中:

  • -v volume名称:容器内目录
  • -v 宿主机文件:容器内文
  • -v 宿主机目录:容器内目录

数据卷挂载与目录直接挂载的

  • 数据卷挂载耦合度低,由docker来管理目录,但是目录较深,不好找
  • 目录挂载耦合度高,需要我们自己管理目录,不过目录容易寻找查看

3.Dockerfile自定义镜像

常见的镜像在DockerHub就能找到,但是我们自己写的项目就必须自己构建镜像了。

而要自定义镜像,就必须先了解镜像的结构才行。

3.1.镜像结构

镜像是将应用程序及其需要的系统函数库、环境、配置、依赖打包而成。

我们以MySQL为例,来看看镜像的组成结构:

image-20210731175806273

简单来说,镜像就是在系统函数库、运行环境基础上,添加应用程序文件、配置文件、依赖文件等组合,然后编写好启动脚本打包在一起形成的文件。

我们要构建镜像,其实就是实现上述打包的过程。

3.2.Dockerfile语法

构建自定义的镜像时,并不需要一个个文件去拷贝,打包。

我们只需要告诉Docker,我们的镜像的组成,需要哪些BaseImage、需要拷贝什么文件、需要安装什么依赖、启动脚本是什么,将来Docker会帮助我们构建镜像。

而描述上述信息的文件就是Dockerfile文件。

Dockerfile就是一个文本文件,其中包含一个个的**指令(Instruction)**,用指令来说明要执行什么操作来构建镜像。每一个指令都会形成一层Layer。

image-20210731180321133

更新详细语法说明,请参考官网文档: https://docs.docker.com/engine/reference/builder

3.3.构建Java项目

3.3.1.基于Ubuntu构建Java项目

需求:基于Ubuntu镜像构建一个新镜像,运行一个java项目

  • 步骤1:新建一个空文件夹docker-demo

    image-20210801101207444

  • 步骤2:拷贝资料中的docker-demo.jar文件到docker-demo这个目录

    image-20210801101314816

  • 步骤3:拷贝资料中的jdk8.tar.gz文件到docker-demo这个目录

    image-20210801101410200

  • 步骤4:拷贝资料提供的Dockerfile到docker-demo这个目录

    image-20210801101455590

    其中的内容如下:

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    # 指定基础镜像
    FROM ubuntu:16.04
    # 配置环境变量,JDK的安装目录
    ENV JAVA_DIR=/usr/local

    # 拷贝jdk和java项目的包
    COPY ./jdk8.tar.gz $JAVA_DIR/
    COPY ./docker-demo.jar /tmp/app.jar

    # 安装JDK
    RUN cd $JAVA_DIR \
    && tar -xf ./jdk8.tar.gz \
    && mv ./jdk1.8.0_144 ./java8

    # 配置环境变量
    ENV JAVA_HOME=$JAVA_DIR/java8
    ENV PATH=$PATH:$JAVA_HOME/bin

    # 暴露端口
    EXPOSE 8090
    # 入口,java项目的启动命令
    ENTRYPOINT java -jar /tmp/app.jar
  • 步骤5:进入docker-demo

    将准备好的docker-demo上传到虚拟机任意目录,然后进入docker-demo目录下

  • 步骤6:运行命令:

    1
    docker build -t javaweb:1.0 .

最后访问 http://192.168.150.101:8090/hello/count,其中的ip改成你的虚拟机ip

3.3.2.基于java8构建Java项目

虽然我们可以基于Ubuntu基础镜像,添加任意自己需要的安装包,构建镜像,但是却比较麻烦。所以大多数情况下,我们都可以在一些安装了部分软件的基础镜像上做改造。

例如,构建java项目的镜像,可以在已经准备了JDK的基础镜像基础上构建。

需求:基于java:8-alpine镜像,将一个Java项目构建为镜像

实现思路如下:

  • ① 新建一个空的目录,然后在目录中新建一个文件,命名为Dockerfile

  • ② 拷贝 资料提供的docker-demo.jar到这个目录中

  • ③ 编写Dockerfile文件:

    • a )基于java:8-alpine作为基础镜像

    • b )将app.jar拷贝到镜像中

    • c )暴露端口

    • d )编写入口ENTRYPOINT

      内容如下:

      1
      2
      3
      4
      FROM java:8-alpine
      COPY ./app.jar /tmp/app.jar
      EXPOSE 8090
      ENTRYPOINT java -jar /tmp/app.jar
  • ④ 使用docker build命令构建镜像

  • ⑤ 使用docker run创建容器并运行

3.4.小结

小结:

  1. Dockerfile的本质是一个文件,通过指令描述镜像的构建过程

  2. Dockerfile的第一行必须是FROM,从一个基础镜像来构建

  3. 基础镜像可以是基本操作系统,如Ubuntu。也可以是其他人制作好的镜像,例如:java:8-alpine

4.Docker-Compose

Docker Compose可以基于Compose文件帮我们快速的部署分布式应用,而无需手动一个个创建和运行容器!

image-20210731180921742

4.1.初识DockerCompose

Compose文件是一个文本文件,通过指令定义集群中的每个容器如何运行。格式如下:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
version: "3.8"
services:
  mysql:
    image: mysql:5.7.25
environment:
MYSQL_ROOT_PASSWORD: 123
    volumes:
     - "/tmp/mysql/data:/var/lib/mysql"
     - "/tmp/mysql/conf/hmy.cnf:/etc/mysql/conf.d/hmy.cnf"
  web:
    build: .
    ports:
     - "8090:8090"

上面的Compose文件就描述一个项目,其中包含两个容器:

  • mysql:一个基于mysql:5.7.25镜像构建的容器,并且挂载了两个目录
  • web:一个基于docker build临时构建的镜像容器,映射端口时8090

DockerCompose的详细语法参考官网:https://docs.docker.com/compose/compose-file/

其实DockerCompose文件可以看做是将多个docker run命令写到一个文件,只是语法稍有差异。

4.2.安装DockerCompose

参考资料

4.3.部署微服务集群

需求:将之前学习的cloud-demo微服务集群利用DockerCompose部署

实现思路

① 查看资料提供的cloud-demo文件夹,里面已经编写好了docker-compose文件

② 修改自己的cloud-demo项目,将数据库、nacos地址都命名为docker-compose中的服务名

③ 使用maven打包工具,将项目中的每个微服务都打包为app.jar

④ 将打包好的app.jar拷贝到cloud-demo中的每一个对应的子目录中

⑤ 将cloud-demo上传至虚拟机,利用 docker-compose up -d 来部署

4.3.1.compose文件

查看资料提供的cloud-demo文件夹,里面已经编写好了docker-compose文件,而且每个微服务都准备了一个独立的目录:

image-20210731181341330

内容如下:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
version: "3.2"

services:
nacos:
image: nacos/nacos-server
environment:
MODE: standalone
ports:
- "8848:8848"
mysql:
image: mysql:5.7.25
environment:
MYSQL_ROOT_PASSWORD: 123
volumes:
- "$PWD/mysql/data:/var/lib/mysql"
- "$PWD/mysql/conf:/etc/mysql/conf.d/"
userservice:
build: ./user-service
orderservice:
build: ./order-service
gateway:
build: ./gateway
ports:
- "10010:10010"

可以看到,其中包含5个service服务:

  • nacos:作为注册中心和配置中心
    • image: nacos/nacos-server: 基于nacos/nacos-server镜像构建
    • environment:环境变量
      • MODE: standalone:单点模式启动
    • ports:端口映射,这里暴露了8848端口
  • mysql:数据库
    • image: mysql:5.7.25:镜像版本是mysql:5.7.25
    • environment:环境变量
      • MYSQL_ROOT_PASSWORD: 123:设置数据库root账户的密码为123
    • volumes:数据卷挂载,这里挂载了mysql的data、conf目录,其中有我提前准备好的数据
  • userserviceorderservicegateway:都是基于Dockerfile临时构建的

查看mysql目录,可以看到其中已经准备好了cloud_order、cloud_user表:

image-20210801095205034

查看微服务目录,可以看到都包含Dockerfile文件:

image-20210801095320586

内容如下:

1
2
3
FROM java:8-alpine
COPY ./app.jar /tmp/app.jar
ENTRYPOINT java -jar /tmp/app.jar

4.3.2.修改微服务配置

因为微服务将来要部署为docker容器,而容器之间互联不是通过IP地址,而是通过容器名。这里我们将order-service、user-service、gateway服务的mysql、nacos地址都修改为基于容器名的访问。

如下所示:

1
2
3
4
5
6
7
8
9
10
11
spring:
datasource:
url: jdbc:mysql://mysql:3306/cloud_order?useSSL=false
username: root
password: 123
driver-class-name: com.mysql.jdbc.Driver
application:
name: orderservice
cloud:
nacos:
server-addr: nacos:8848 # nacos服务地址

4.3.3.打包

接下来需要将我们的每个微服务都打包。因为之前查看到Dockerfile中的jar包名称都是app.jar,因此我们的每个微服务都需要用这个名称。

可以通过修改pom.xml中的打包名称来实现,每个微服务都需要修改:

1
2
3
4
5
6
7
8
9
10
<build>
<!-- 服务打包的最终名称 -->
<finalName>app</finalName>
<plugins>
<plugin>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-maven-plugin</artifactId>
</plugin>
</plugins>
</build>

打包后:

image-20210801095951030

4.3.4.拷贝jar包到部署目录

编译打包好的app.jar文件,需要放到Dockerfile的同级目录中。注意:每个微服务的app.jar放到与服务名称对应的目录,别搞错了。

user-service:

image-20210801100201253

order-service:

image-20210801100231495

gateway:

image-20210801100308102

4.3.5.部署

最后,我们需要将文件整个cloud-demo文件夹上传到虚拟机中,理由DockerCompose部署。

上传到任意目录:

image-20210801100955653

部署:

进入cloud-demo目录,然后运行下面的命令:

1
docker-compose up -d

5.Docker镜像仓库

5.1.搭建私有镜像仓库

参考 资料《CentOS7安装Docker.md》

5.2.推送、拉取镜像

推送镜像到私有镜像服务必须先tag,步骤如下:

① 重新tag本地镜像,名称前缀为私有仓库的地址:192.168.150.101:8080/

1
docker tag nginx:latest 192.168.150.101:8080/nginx:1.0 

② 推送镜像

1
docker push 192.168.150.101:8080/nginx:1.0 

③ 拉取镜像

1
docker pull 192.168.150.101:8080/nginx:1.0 

简介

在 Java 世界里面,面向对象还是主流思想,对于习惯了面向对象编程的开发者来说,抽象的概念并不陌生。面向对象编程是对数据进行抽象,而函数式编程是对行为进行抽象。现实世界中,数据和行为并存,程序也是如此,因此这两种编程方式我们都得学。

这种新的抽象方式还有其他好处。很多人不总是在编写性能优先的代码,对于这些人来说,函数式编程带来的好处尤为明显。程序员能编写出更容易阅读的代码——这种代码更多地表达了业务逻辑,而不是从机制上如何实现。易读的代码也易于维护、更可靠、更不容易出错。

在写回调函数和事件处理器时,程序员不必再纠缠于匿名内部类的冗繁和可读性,函数式编程让事件处理系统变得更加简单。能将函数方便地传递也让编写惰性代码变得容易,只有在真正需要的时候,才初始化变量的值。

面向对象编程是对数据进行抽象;函数式编程是对行为进行抽象。

核心思想: 使用不可变值和函数,函数对一个值进行处理,映射成另一个值。

对核心类库的改进主要包括集合类的 API 和新引入的流 Stream。流使程序员可以站在更高的抽象层次上对集合进行操作。

lambda 表达式

  • lambda 表达式仅能放入如下代码: 预定义使用了 @Functional 注释的函数式接口,自带一个抽象函数的方法,或者 SAM(Single Abstract Method 单个抽象方法)类型。这些称为 lambda 表达式的目标类型,可以用作返回类型,或 lambda 目标代码的参数。例如,若一个方法接收 Runnable、Comparable 或者 Callable 接口,都有单个抽象方法,可以传入 lambda 表达式。类似的,如果一个方法接受声明于 java.util.function 包内的接口,例如 Predicate、Function、Consumer 或 Supplier,那么可以向其传 lambda 表达式。

  • lambda 表达式内可以使用方法引用,仅当该方法不修改 lambda 表达式提供的参数。本例中的 lambda 表达式可以换为方法引用,因为这仅是一个参数相同的简单方法调用。

    阅读全文 »

面向切面:aop 编程

5.1、场景模拟

搭建子模块:spring6-aop

5.1.1、声明接口

声明计算器接口 Calculator,包含加减乘除的抽象方法

1
2
3
4
5
6
7
8
9
10
11
public interface Calculator {

int add(int i, int j);

int sub(int i, int j);

int mul(int i, int j);

int div(int i, int j);

}
阅读全文 »

概念

Java 的反射机制是在程序处于运行,对于每一个类都能够知道这个类中的所有属性和方法,对于任意一个对象,都能调用他的任意一个方法和属性;这种动态获取信息以及动态调用对象的方法的功能称为 Java 的反射机制。

在书中提到在程序运行时识别对象的类型和信息的方式有两种,我们事先就已经知道了对象的信息另一种就是我们所说的反射机制

Java 中的反射机制就是将对象中的一个一个组成部分分别映射成为一个个的对象

Class 类,Class 类也是一个实实在在的类,存在于 JDK 的 java.lang 包中。Class 类的实例表示 java 应用运行时的类(class ans enum)或接口(interface and annotation)(每个 java 类运行时都在 JVM 里表现为一个 class 对象,可通过类名.class、类型.getClass()、Class.forName(“类名”)等方法获取 class 对象)。数组同样也被映射为 class 对象的一个类,所有具有相同元素类型和维数的数组都共享该 Class 对象。基本类型 boolean,byte,char,short,int,long,float,double 和关键字 void 同样表现为 class 对象。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
public final class Class<T> implements java.io.Serializable,
GenericDeclaration,
Type,
AnnotatedElement,
TypeDescriptor.OfField<Class<?>>,
Constable {
private static final int ANNOTATION= 0x00002000;
private static final int ENUM = 0x00004000;
private static final int SYNTHETIC = 0x00001000;

private static native void registerNatives();
static {
registerNatives();
}
/*
* Private constructor. Only the Java Virtual Machine creates Class objects.
* This constructor is not used and prevents the default constructor being
* generated.
*/
private Class(ClassLoader loader, Class<?> arrayComponentType) {
// Initialize final field for classLoader. The initialization value of non-null
// prevents future JIT optimizations from assuming this final field is null.
classLoader = loader;
componentType = arrayComponentType;
}
}
...
阅读全文 »

spring 是如何进行对象创建的?

  1. 无参数构造是否被执行

当我们在 User 类的无参数构造方法中输一段话的时候可以发现无参数构造方法被执行了,那么为什么会执行这个方法呢?其实在构建类的时候步骤如下:

  • 读取 application.xml 配置文件
  • 获取类的全路径
  • 使用反射机制进行类的创建

当使用反射进行对象创建的时候也会执行无参构造

创建出来的对象被存放在一个 map 集合中

阅读全文 »

这几天才网上看到这样一个话题“00 后的出路真的只有考研和考公了吗?”这是一个沉重的话题,恰巧也我正是一名名副其实的 00 后,就让我来说说对这件事的看法吧!

为什么会突然冒出这样一个话题呢?这样的话题在之前出现过吗?

我的回答是出现过,不过今年体现的更加明显。

我们先来看一组数据吧!看看近些年考研人数的增长情况:

从图中明显的看出近十年考研人数都是呈现上升的趋势(以上数据来自于网络,可能存在部分误差,如有侵权联系删除),但是今年离奇的下降了,在教育部公布考研数据的时候全世界都被今年考研人数下降了刷屏,那么是不是大家都醒悟了呢?

内卷文化真的消失了呢?

其实不然,在前年年末著名考研教师张雪峰就曾预言 2024 考研人数可能会下降,究竟是什么原因,我后面也会解释。

那我们在来看一看今年的考公人数吧:

阅读全文 »

一转眼跌跌撞撞的 2023 也只剩下最后的一周时间了,此时的我内心有千言万语想要表达,但又不知从何说起,我现在的心情充满了对未来的期待同时也充满了对未来的迷茫和无力感。

再谈考研

昨天考研正式结束,这也意味着我这一年的努力全也都在昨天得到了体现,但是我感觉发挥的不是很好,所以本来说今天要去好好放松一下的,一下子没了心情,考完之后答案也是不太想核对,自己很清楚自己是什么样子,不过想必大家也是知道今年考研试卷的难度的吧,不管数学还是专业课都非常难,不管了,考成什么样就是什么样吧,反正我觉着我已经尽力了也没有什么对不起自己的,即使最后没有考上我也不后悔今年所付出的努力。在今年的一年时间里我收获的不仅仅是知识,更多的是对自己清晰的认识,以及从考研中磨砺出来的精神品质,这都是其他东西所无法代替的。

谈谈 AI

从今年年初以 openAI 为代表 AI 技术在全世界范围内都掀起了不小的波浪,尤其是美国微软,Intel,AMD 各类科技行业的顶尖科技公司也纷纷开始布局 AI,当然国内也定然不会错过这次技术浪潮,也纷纷朝着 AI 领域进发,依我看相较于国外,国内的 AI 技术发展还暂时不足以和国外抗衡。那为什么 AI 技术今年会崛起的那么快呢?这当然不是一个巧合,主要是 openAI 的开放式人工智能以及图像识别技术的爆火,引起了各大互联网厂商危机感,他们都不想因为错失这次机会,从而和科技领域脱节,都想从这个领域中狠狠赚一笔,导致今年许多互联网大厂都开始高薪聘请人工智能领域的专家,从而也促使了这次技术革命的进步:

个人的感觉较目前的发展速度来看,在未来的十几年里人工智能将成为继工农业革命之后又一次的改变人类的革命,这次的革命可能将颠覆我们传统的认知,从前的科幻可能将成为现实,随着马斯克脑机接口的发展人类的永生可能将成为现实。那作为普通人的我们该如何应对这突如其来的变故呢。

我们该如何才能抓住这次机遇

未来的几年里人工智能的普及定将以势不可挡的姿态融入到我们每一个人的生活中,首先受到影响的可能就是我们这些中层人员,可能大家普遍担心的都是目前自己的工作还能不能保住的问题,其中相较于其他工作者来说,脑力工作者事业被替代的可能性会比较大,比如目前正在写文章的我,可能我一小时写的内容 GPT10 分钟就可以给你写完了,同样是我写的代码,可能我自己写会出现一些问题,但是交给 GPT 来写,出错了他还能给你指出问题出现在哪里,更本不慌的,我之前也尝试过使用 GPT 来写代码,真的给我带来了一种危机感:

真的担心自己可能真的被替代,AI 技术的革新可能带来两种极端,一种就是彻底的被 AI 给取代,失业,饭碗被抢,另一种就是利用强大的 AI 给自己办事,从而达到一个人就是一个公司的目的,相信大家都想成为后者,但是并不是每一个人都能成为后者,想要成为后者努力+智商+情商一样都不可或缺,这里就不展开了,当然如何快速获取信息利用信息差也是 AI 时代赚钱的一大利器,个人感觉了解大事除了微博等各种社交平台之外还有一个非常好的平台,那就是股票,有些股票 APP 里面提供了详细的信息,股市的变动也能使你预测出一些接下来可能会发生的事情。作为一个普通人,我们很容易失业而不是抓住机遇,那么想要跳出这个诅咒最基础的就是学会如何使用 AI 工具,起初 CHATGPT 刚出来的时候作为国内用户是不可以直接使用的,需要借助一些特殊的手段,当然作为一个 21 世纪的好青年如果这都不会那就该好好反思一下自己这几年到底玩手机是玩些什么了,当然也不排除有的人现在都还不知道 GPT 是个什么东西,更别说使用了。目前国内也有许多的 AI 工具,生成式 AI 工具,这些工具可以帮你画画,帮你做视频,基本上所有的 APP 都已经接入了 AI,可见连个人博客都已经接入了 AI 输出文章摘要,如果说到这你还不下定决心来学习如何使用 AI 工具那我说,你就慢了,下面是知友推荐的一些比较不错的 AI 助手,使用的时候注意甄别:

阅读全文 »

今天是考研倒计时的最后一天,明天就要上战场了,此时的我已经从图书馆把明后天需要使用的书搬回来了,走了那么久的路,唯独今天走在路上的时候内心有些许复杂的情绪,或许只有走过的人才懂吧,不过没关系,我一定会铭记这段时间,剩下的八年时间里也定将竭尽全力

0%