第四阶段/第四模块/作业总结.md · Shawn/chenxiaonan

## 作业一

### 环境软件版本

CentOS：7.7

FastDFS：5.11

Nginx：1.17.8

### 实现思路

由于OpenResty官方不建议我们自己在Nginx添加lua-nginx-module这个模块，所以我直接使用了OpenResty。

#### 1、FastDFS搭建

##### 安装编译环境

```shell
yum install git gcc gcc-c++ make automake vim wget libevent -y
```

##### 安装libfastcommon基础库

```shell
mkdir /root/fastdfs
cd /root/fastdfs
git clone https://github.com/happyfish100/libfastcommon.git --depth 1 cd libfastcommon/
./make.sh && ./make.sh install
```

##### 安装FastDFS

```shell
wget https://codeload.github.com/happyfish100/fastdfs/zip/V5.11
unzip V5.11
cd fastdfs-5.11/
./make.sh && ./make.sh install
```

###### 修改配置文件

```shell
cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf
cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf
cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf
cp /root/fastdfs/fastdfs-5.11/conf/http.conf /etc/fdfs
cp /root/fastdfs/fastdfs-5.11/conf/mime.types /etc/fdfs
```

tracker.conf

```shell
vim /etc/fdfs/tracker.conf
base_path=/home/fastdfs
```

storage.conf

```
vim /etc/fdfs/storage.conf
base_path=/home/fastdfs
store_path0=/home/fastdfs
tracker_server=192.168.31.199:22122
http.server_port=8888
```

##### 下载fastdfs-nginx-module

```
wget https://codeload.github.com/happyfish100/fastdfs-nginx-module/zip/V1.20 -O fastdfs-nginx-module.zip
unzip fastdfs-nginx-module.zip
cd fastdfs-nginx-module-1.20/
```

###### 修改配置文件config

```
vim config
// 修改以下配置项
tracker_server=192.168.31.199:22122
url_have_group_name=true
store_path0=/home/fastdfs
```

##### 安装OpenResty并添加Fastdfs-nginx-module模块

```shell
wget https://openresty.org/download/openresty-1.15.8.2.tar.gz
tar zxvf openresty-1.15.8.2.tar.gz 
cd openresty-1.15.8.2/
./configure --add-module=/root/fastdfs/fastdfs-nginx-module-1.20/src
make
make install
```

######  验证安装结果

```shell
/usr/local/openresty/nginx/sbin/nginx -V
```

> nginx version: openresty/1.15.8.2
> built by gcc 4.8.5 20150623 (Red Hat 4.8.5-39) (GCC) 
> built with OpenSSL 1.0.2k-fips  26 Jan 2017
> TLS SNI support enabled
> configure arguments: --prefix=/usr/local/openresty/nginx --with-cc-opt=-O2 ... --add-module=/root/fastdfs/fastdfs-nginx-module-1.20/src --with-stream --with-stream_ssl_module --with-stream_ssl_preread_module --with-http_ssl_module

可以看到，fastdfs-nginx-module已经添加成功。

###### 修改Nginx配置

```
vim /usr/local/openresty/nginx/conf/nginx.conf
```

添加lua脚本目录配置

```
lua_package_path "/usr/local/openresty/nginx/lua/?.lua;;";
```

添加如下配置

```json
server {
	listen 8888;
	server_name localhost;
	location ~/group[0-9]/ {
  	ngx_fastdfs_module;
  }
}
```

###### 启动OpenResty

```shell
/usr/local/openresty/nginx/sbin/nginx
```

#### 2、安装GraphicsMagick工具

##### 安装libjpeg

```shell
wget   http://ftp.icm.edu.pl/pub/unix/graphics/GraphicsMagick/delegates/libjpeg-6b.zip
unzip libjpeg-6b.zip
cd 
./configure
make & make install
```

##### 安装libpng

```shell
wget  ftp://ftp.graphicsmagick.org/pub/GraphicsMagick/delegates/libpng-1.6.2.tar.gz
tar zxvf libpng-1.6.2.tar.gz
cd libpng-1.6.2
./configure
make & make install
```

##### 安装GraphicsMagick

下载安装包并解压

```shell
wget http://ftp.icm.edu.pl/pub/unix/graphics/GraphicsMagick/1.3/GraphicsMagick-1.3.34.tar.gz
tar zxvf GraphicsMagick-1.3.34.tar.gz
```

编译配置

```shell
cd GraphicsMagick-1.3.34/
./configure
```

从configure的结果中可以看到，JPEG和PNG格式已经支持了。

```shell

-----------------------------------------------------------------
...
JPEG v1           --with-jpeg=yes        	yes
JPEG-2000         --with-jp2=yes          	no
LCMS v2           --with-lcms2=yes        	no
LZMA              --with-lzma=yes        	no
Magick++          --with-magick-plus-plus=yes	yes
PERL              --with-perl=no        	no
PNG               --with-png=yes          	yes (-lpng16)
```

执行安装

```shell
make & make install
```

测试GraphicsMagick

```shell
gm convert pngtest.png -resize 100x100 out.png
```

此处遇到一个错误：

```shell
gm: error while loading shared libraries: libpng16.so.16: cannot open shared object file: No such file or directory
```

还好找到了解决方法：

```shell
ln -s /usr/local/libpng-1.6.2/.libs/libpng16.so.16 /lib64/libpng16.so.16
```

#### 3、OpenResty集成GraphicsMagick工具

下载对应的lua脚本并增加Nginx动态生成缩略图的配置。

将fastdfs.lua和restyfastdfs.lua文件放到/usr/local/openresty/nginx/lua目录下。

修改Nginx配置如下：

```config
location /group1/M00 {
	alias /data/images;

set $image_root "/data/images";
	if ($uri ~ "/([a-zA-Z0-9]+)/([a-zA-Z0-9]+)/([a-zA-Z0-9]+)/([a-zA-Z0-9]+)/(.*)") {
  	set $image_dir "$image_root/$3/$4/";
		set $image_name "$5";
    set $file "$image_dir$image_name";
  }

if (!-f $file) {
    lua_code_cache off;
    content_by_lua_file "lua/fastdfs.lua";
  }
}
```

此部分参考了[hpxl](https://github.com/hpxl/nginx-lua-fastdfs-GraphicsMagick)的[nginx.conf](https://github.com/hpxl/nginx-lua-fastdfs-GraphicsMagick/blob/master/nginx.conf)、[fastdfs.lua](https://github.com/hpxl/nginx-lua-fastdfs-GraphicsMagick/blob/master/lua/fastdfs.lua)、[restyfastdfs.lua](https://github.com/hpxl/nginx-lua-fastdfs-GraphicsMagick/blob/master/lua/restyfastdfs.lua)文件。

##### 测试

首先从浏览器访问原始图片测试：

```
http://192.168.31.199:8888/group1/M00/00/00/wKgfx176BfaAblaNAAB1M2C_lGA241.png
```

然后再访问缩略图测试：

```
http://192.168.31.199:8888/group1/M00/00/00/wKgfx176BfaAblaNAAB1M2C_lGA241.png_80x80.png
http://192.168.31.199:8888/group1/M00/00/00/wKgfx176BfaAblaNAAB1M2C_lGA241.png_800x600.png
http://192.168.31.199:8888/group1/M00/00/00/wKgfx176BfaAblaNAAB1M2C_lGA241.png_40x40.png
```

这里遗留的问题是Nginx里面的location只能配置为固定的目录/group1/M00，配置为正则表达式就会被301重定向，导致404错误，目前还没有搞清楚，后续需要继续尝试。

## 作业二

### 实现思路

#### 1、阿里云OSS Bucket创建

首先去阿里云官网开通OSS功能，创建一个Bucket，读写权限设置为私有访问，并申请好AccessKey。

![截屏2020-06-29下午10.12.19](http://cdn.shawnan.xyz/PicGo/截屏2020-06-29下午10.12.19.png)

#### 2、项目搭建

参考课堂内容，新建一个SpringBoot项目，编写aliyun.properties配置文件，此处把允许上传的文件类型和最大上传文件放到了配置文件当中。

```properties
aliyun.endpoint=http://oss-cn-hangzhou.aliyuncs.com
aliyun.accessKeyId=xxxx
aliyun.accessKeySecret=xxxx
aliyun.bucketName=shawnantest
aliyun.urlPrefix=https://shawnantest.oss-cn-hangzhou.aliyuncs.com/
aliyun.allowFileType=.jpg,.jpeg,.png
aliyun.maxFileSize=5120
```

还有一个要注意的点是需要配置spring内置的Tomcat允许上传的文件大小，默认大小是1MB，所以无法进行5MB的文件测试，需要修改以下配置项：

```properties
server.port=8080
spring.servlet.multipart.max-file-size=15MB
spring.servlet.multipart.max-request-size=100MB
```

#### 3、功能实现

##### 上传功能

首先判断文件类型是否符合，然后判断文件大小是否符合，如果不符合返回相应的提示消息。

```java
public UpLoadResult upload(MultipartFile multipartFile){
  // 校验图片格式
  boolean isLegal = true;
  String msg = "";
  List<String> allowFileType = Arrays.asList(aliyunConfig.getAllowFileType().split(","));
  String fileName = multipartFile.getOriginalFilename();
  String fileType = fileName.substring(fileName.lastIndexOf('.'));
  if(!allowFileType.contains(fileType)){
    isLegal = false;
    msg = "只允许上传.jpg、.jpeg、.png类型的文件";
  }
  // 校验文件大小
  if (multipartFile.getSize() / 1024 > aliyunConfig.getMaxFileSize()) {
    isLegal = false;
    msg = "文件大小不能超过5MB";
  }
  UpLoadResult upLoadResult = new UpLoadResult();
  if (!isLegal){
    upLoadResult.setStatus("error");
    upLoadResult.setResponse(msg);
    return upLoadResult;
  }
  String filePath = getFilePath(fileName);
  try {
    ossClient.putObject(aliyunConfig.getBucketName(), filePath, new ByteArrayInputStream(multipartFile.getBytes()));
  } catch (IOException e) {
    e.printStackTrace();
    // 上传失败
    upLoadResult.setStatus("error");
    upLoadResult.setResponse("上传失败");
    return upLoadResult;
  }
  upLoadResult.setStatus("success");
  upLoadResult.setName(aliyunConfig.getUrlPrefix() + filePath);
  upLoadResult.setUid(filePath);
  upLoadResult.setResponse("上传成功");
  return upLoadResult;
}
```

##### 下载功能

下载功能也是利用阿里OSS提供的SDK进行实现，此处采用边从阿里云OSS读边往前端写的方式，不在本地存储文件。

```java
public void downloadFile(String fileUrl, HttpServletResponse response) throws IOException {
  OSSObject ossObject = ossClient.getObject(aliyunConfig.getBucketName(), fileUrl);
  InputStream inputStream = ossObject.getObjectContent();
  response.setHeader("Content-disposition", "attachment;filename=" + URLEncoder.encode(fileUrl, "UTF-8"));
  response.setCharacterEncoding("UTF-8");
  ServletOutputStream outputStream = null;
  try {
    outputStream = response.getOutputStream();
    byte[] buffer= new byte[1024];
    int length = -1;
    while ((length = inputStream.read(buffer)) != -1){
      outputStream.write(buffer,0, length);
    }
  } catch (IOException e) {
    e.printStackTrace();
  } finally {
    try {
      inputStream.close();
      outputStream.flush();
      outputStream.close();
    } catch (IOException e) {
      e.printStackTrace();
    }
  }
}
```

##### 删除功能

删除时首先判断文件是否存在，不存在则提示文件不存在，存在则直接删除并返回成功。

```java
public String deleteFile(String fileUrl) {
  if (!ossClient.doesObjectExist(aliyunConfig.getBucketName(), fileUrl)) {
    return "删除失败，文件不存在";
  }
  ossClient.deleteObject(aliyunConfig.getBucketName(), fileUrl);
  return "删除成功";
}
```

Shawn/chenxiaonan

简介

发行版

贡献者

近期动态

Shawn/chenxiaonan .gitee-modal { width: 500px !important; }

简介

发行版

贡献者

近期动态

搜索帮助

Shawn/chenxiaonan