GitHub: https://github.com/Qihoo360/wayne

文档: 由于wayne 官方文档链接已经失效了,我们可以通过这里查看 wayne 文档, 除了这个地方,我们询问之前开发者是还有一个地方存有官方文档的。 https://github.com/Qihoo360/cloud-website 这个地方存有历史官网文档。

一、wayne 构建原因

wayne 自己构建的原因: 由于1.8.5 和 1.8.6 是不支持 k8s 高一点的版本(1.16+)。 由于我们近期新项目使用了的k8s 版本是 1.20 我们在我们老的wayne版本上是不支持的.

1.1 、老版本报错内容

具体现象就是: 点击发布提示没有找到对应的资源,后端报错。

E1220 17:35:19.031666       1 reflector.go:126] pkg/mod/k8s.io/client-go@v11.0.0+incompatible/tools/cache/reflector.go:94: Failed to list *v1beta1.DaemonSet: the server could not find the requested resource
E1220 17:35:19.031758 1 reflector.go:126] pkg/mod/k8s.io/client-go@v11.0.0+incompatible/tools/cache/reflector.go:94: Failed to list *v1beta1.StatefulSet: the server could not find the requested resource
E1220 17:35:19.035617 1 reflector.go:126] pkg/mod/k8s.io/client-go@v11.0.0+incompatible/tools/cache/reflector.go:94: Failed to list *v1beta1.Deployment: the server could not find the requested resource
E1220 17:35:19.073638 1 reflector.go:126] pkg/mod/k8s.io/client-go@v11.0.0+incompatible/tools/cache/reflector.go:94: Failed to list *v1beta1.ReplicaSet: the server could not find the requested resource
E1220 17:35:19.073648 1 reflector.go:126] pkg/mod/k8s.io/client-go@v11.0.0+incompatible/tools/cache/reflector.go:94: Failed to list *v1beta1.ReplicaSet: the server could not find the requested resource

1.2 、wayne 官方

支持1.16+ 代码 issue: https://github.com/Qihoo360/wayne/pull/565, 也合并到master了,前后端都有更新, 但是目前看wayne-frontend前端镜像是没有更新的。 后端镜像是有更新的,

二、构建步骤

目前我们的策略是, 前端镜像自己构建,后端镜像使用 dockerhub 上面的 latest。

2.1 、前端镜像

构建需要环境:

  1. docker 需要安装

    yum install -y yum-utils \
    device-mapper-persistent-data \
    lvm2
    # 阿里的源,国内使用较快
    yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
    # 生成缓存
    yum makecache
    # 安装最新稳定版本 Docker CE
    yum install docker-ce docker-ce-cli containerd.io
    systemctl start docker
  2. git 需要安装

    yum install git -y
  3. 拉取代码

    1. 拉取

      cd /opt && git clone https://github.com/Qihoo360/wayne.git
      cd wayne
      git submodule update --init --recursive # 这个必须执行,首次执行会有输出,如果没有输出的话,那么从新拉取下,然后执行。
    2. 使用down zip 方式不要使用这个,这个存在一些问题。

  4. 我们看下 Makefile

    .PHONY: run-backend run-worker run-frontend syncdb release
    
    MAKEFLAGS += --warn-undefined-variables
    
    # Build variables
    REGISTRY_URI :=360cloud
    RELEASE_VERSION :=$(shell git describe --always --tags)
    UI_BUILD_VERSION :=v1.0.2
    SERVER_BUILD_VERSION :=v1.0.2 update-version:
    ./hack/updateversion.sh # run module
    run-backend:
    cd src/backend/ && go run main.go run-frontend:
    cd src/frontend/ && npm start # dev
    syncdb:
    go run src/backend/database/syncdb.go orm syncdb sqlall:
    go run src/backend/database/syncdb.go orm sqlall > _dev/wayne.sql initdata:
    go run src/backend/database/generatedata/main.go > _dev/wayne-data.sql swagger-openapi:
    cd src/backend && swagger generate spec -o ./swagger/openapi.swagger.json ## server builder image
    build-server-image:
    docker build --no-cache -t $(REGISTRY_URI)/wayne-server-builder:$(SERVER_BUILD_VERSION) -f hack/build/server/Dockerfile . ## ui builder image
    build-ui-image:
    docker build --no-cache -t $(REGISTRY_URI)/wayne-ui-builder:$(UI_BUILD_VERSION) -f hack/build/ui/Dockerfile . # release, requiring Docker 17.05 or higher on the daemon and client
    build-backend-image:
    @echo "version: $(RELEASE_VERSION)"
    docker build --no-cache -t $(REGISTRY_URI)/wayne-backend:$(RELEASE_VERSION) . build-frontend-image:
    @echo "version: $(RELEASE_VERSION)"
    docker build --no-cache -t $(REGISTRY_URI)/wayne-frontend:$(RELEASE_VERSION) -f hack/build/frontend/Dockerfile . push-image:
    docker tag $(REGISTRY_URI)/wayne-backend:$(RELEASE_VERSION) $(REGISTRY_URI)/wayne-backend:latest
    docker push $(REGISTRY_URI)/wayne-backend:$(RELEASE_VERSION)
    docker push $(REGISTRY_URI)/wayne-backend:latest
    docker tag $(REGISTRY_URI)/wayne-frontend:$(RELEASE_VERSION) $(REGISTRY_URI)/wayne-frontend:latest
    docker push $(REGISTRY_URI)/wayne-frontend:$(RELEASE_VERSION)
    docker push $(REGISTRY_URI)/wayne-frontend:latest

    我们找到 build-frontend-image, 我们可以看到是使用了 ./hack/build/frontend/Dockerfile

    # requiring Docker 17.05 or higher on the daemon and client
    # see https://docs.docker.com/develop/develop-images/multistage-build/
    # BUILD COMMAND :
    # docker --build-arg RELEASE_VERSION=v1.0.0 -t infra/wayne:v1.0.0 . # build ui
    FROM 360cloud/wayne-ui-builder:v1.0.2 as frontend COPY src/frontend /workspace RUN cd /workspace && \
    npm run build:aot # build server
    FROM openresty/openresty:1.15.8.1-1-centos COPY --from=frontend /workspace/dist/ /usr/local/openresty/nginx/html/ RUN ln -sf /usr/share/zoneinfo/Asia/Shanghai /etc/localtime && \
    sed -i '/index index.html index.htm;/a\ try_files $uri $uri/ /index.html;' /etc/nginx/conf.d/default.conf CMD ["/usr/local/openresty/bin/openresty", "-g", "daemon off;"]

    看这个dockerfile ,我们会发现,这个镜像的构建是通过将src 的源码,然后 npm run build 进行构建,然后将构建好了包,然后拷贝到openresty 镜像了。

    如果拉取镜像慢的话,网上找下教程。

    配置 163 镜像源

    sudo mkdir -p /etc/docker
    sudo tee /etc/docker/daemon.json <<-'EOF'
    {
    "registry-mirrors": ["http://hub-mirror.c.163.com"]
    }
    EOF
    sudo systemctl daemon-reload
    sudo systemctl restart docker
  5. 构建前端镜像

    make  build-frontend-image

    如果遇到一些问题,可以看末尾。

  6. 给镜像增加tag,上传至 dockerhub

    docker pull djxslp/wayne-frontend:latest  # 这个是我已经构建好了的镜像。是自己基于github 代码的master 分支编译的(2021.12.21 15:00)

2.1 、后端镜像

使用dockerhub 上面最新的

360cloud/wayne-backend:latest

自己构建

Dockerfile 的内容

# requiring Docker 17.05 or higher on the daemon and client
# see https://docs.docker.com/develop/develop-images/multistage-build/
# BUILD COMMAND :
# docker --build-arg RELEASE_VERSION=v1.0.0 -t infra/wayne:v1.0.0 . # build server
FROM 360cloud/wayne-server-builder:v1.0.2 as backend COPY go.mod /go/src/github.com/Qihoo360/wayne
COPY go.sum /go/src/github.com/Qihoo360/wayne
COPY src/backend /go/src/github.com/Qihoo360/wayne/src/backend RUN export GO111MODULE=on && \
export GOPROXY=https://goproxy.io && \
cd /go/src/github.com/Qihoo360/wayne/src/backend && \
bee generate docs && \
bee pack -o /_build # build release image
FROM 360cloud/centos:7 RUN ln -sf /usr/share/zoneinfo/Asia/Shanghai /etc/localtime COPY --from=backend /_build/backend.tar.gz /opt/wayne/ WORKDIR /opt/wayne/ RUN tar -xzvf backend.tar.gz CMD ["./backend"

构建命令

 make  build-backend-image

自己构建的

docker pull djxslp/wayne-backend:latest  # 是自己基于github 代码的master 分支编译的(2021.12.21 15:00),最终容器内的监听端口是 8081, 需要注意下。

三、配置和数据库导入

基于 docker-compose 部署, cd hack/docker-compose/

3.1 、前端配置

./conf/config.js

window.CONFIG = {
URL: 'http://yourip:8080',
RAVEN: false,
RAVEN_DSN: 'RAVEN_DSN'
};

需要改的参数 URL: 值为需要为后端后面绑定的域名,示例: https://backend-wayne.baidu.com

3.2、后端配置

./conf/app.conf

必须需要修改的:数据库配置,其他的可以根据情况进行配置。

## mysql
DBName = "wayne"
DBTns = "tcp(127.0.0.1:3306)"
DBUser = "wayne"
DBPasswd = "123456"
DBLoc = "Asia%2FShanghai"
DBConnTTL = 30

3.3 、数据库导入

  1. 后端数据库

    1. 手动导入, 我把一个刚安装的数据库导出了。 链接: https://djxblog.oss-cn-shenzhen.aliyuncs.com/picture/typora/wayne.sql
    2. 程序自动创建, 这个需要给到一个较高的权限,且 wayne 库原本不存在,如果库存在,则不会进行自动创建。

3.4、 启动服务

  1. 安装docker-compose

    curl -L https://github.com/docker/compose/releases/download/1.24.0/docker-compose-`uname -s`-`uname -m` -o /usr/local/bin/docker-compose
    chmod +x /usr/local/bin/docker-compose
  2. 启动服务

    cd  hack/docker-compose
    docker-compose up -d

四、中途遇到的问题和一些思考

登录无效参数 Invalid Param

问题原因:

https://github.com/Qihoo360/wayne/pull/578

之前版本(1.8.5/1.8.6), 用户名和密码都是在 URL 中的,也就是如图所示,现在新的版本是改为JSON 了。

版本未找到, 也就是tag 未指定。

[root@ops-pinpoint-185 wayne]# make  build-frontend-image
fatal: Not a valid object name HEAD
version:
docker build --no-cache -t 360cloud/wayne-frontend: -f hack/build/frontend/Dockerfile .
invalid argument "360cloud/wayne-frontend:" for "-t, --tag" flag: invalid reference format
See 'docker build --help'.

我们直接在 Makefile 里面写死版本。

RELEASE_VERSION :=v1.8.7.1

最新文章

  1. Fragment配合RadioGroup实现点击切换布局
  2. 【转】Oracle Database PSU/CPU
  3. MinHash算法
  4. 【Bootstrap】Bootstrap和Java分页-第一篇
  5. js 淡入淡出的图片
  6. Linux14.04安装JDK
  7. 理解JavaScript中的事件路由冒泡过程及委托代理机制
  8. 关于面试mysql优化的几点纪要
  9. Android必会小功能总结
  10. android 随手记 videoview循环播放网络视频 和mediaplayer+sufaceview播放网络视频
  11. Oracle datafile特殊字符处理
  12. nosql db and javascript performance
  13. POJ 3528 求三维凸包表面积
  14. 国际化之ResourceBundle
  15. gulp package.json
  16. Apache和Tomcat整合(一个Apache 不同域名处理多个不同业务)
  17. bzoj 4537 HNOI2016 最小公倍数
  18. spring boot jpa 使用update 报错解决办法
  19. idea看源码
  20. 开发神器之phpstorm破解与日常使用

热门文章

  1. BZOJ 3238 差异
  2. Codeforces 639E - Bear and Paradox(二分+贪心)
  3. Windows下的Python多版本管理?
  4. makefile高级用法
  5. Identity Server 4 从入门到落地(八)—— .Net Framework 客户端
  6. 剑指 Offer 10- I. 斐波那契数列
  7. docker创建tomcat容器无法正常访问
  8. Linux基础命令---httpd守护进程
  9. 接口测试 python+PyCharm 环境搭建
  10. Netty 编解码奥秘