资讯专栏INFORMATION COLUMN

Golang 微服务教程(二)

sevi_stuo / 2814人阅读

摘要:定义微服务作为客户端调用的函数实现中的接口,使作为的服务端检查是否有适合的货轮货物被承运解析命令行参数作为的客户端增加货物并运行更新中的货物,塞入三个集装箱,重量和容量都变大。

译文链接:wuYin/blog
原文链接:ewanvalentine.io,翻译已获作者 Ewan Valentine 授权。

本节未细致介绍 Docker,更多可参考:《第一本Docker书 修订版》

前言

在上一篇中,我们使用 gRPC 初步实现了我们的微服务,本节将 Docker 化该微服务并引入 go-micro 框架代替 gRPC 简化服务的实现。

Docker 背景

占据着云计算的优势,微服务架构越来越流行,同时它的云端分布式的运行环境也对我们的开发、测试和部署提出了很高的要求,容器(container)便是一项解决方案。

在传统软件开发中,应用直接部署在环境和依赖都准备好的系统上,或在一台物理服务器上部署在由 Chef 或 Puppet 管理的虚拟集群里。这种部署方案不利于横向扩展,比如要部署多台物理服务器,需要都安装相同的依赖,再部署,很是麻烦。

vagrant 这类管理多个虚拟机的工具,虽然使项目的部署更为遍历,但每个虚拟机都运行有一个完整的操作系统,十分耗费宿主主机的资源,并不适合微服务的开发和部署。

容器 特性

容器 是精简版的操作系统,但并不运行一个 kernel 或系统底层相关的驱动,它只包含一些 run-time 必需的库,多个容器共享宿主主机的 kernel,多个容器之间相互隔离,互补影响。可参考:Redhat topic

优势

容器的运行环境只包含代码所需要的依赖,而不是使用完整的操作系统包含一大堆不需要的组件。此外,容器本身的体积相比虚拟机是比较小的,比如对比 ubuntu 16.04 优势不言而喻:

虚拟机大小

容器镜像大小

Docker 与容器

一般人会认为容器技术就是 Docker,实则不然,Docker 只是容器技术的一种实现,因为其操作简便且学习门槛低,所以如此流行。

Docker 化微服务 Dockerfile

创建微服务部署的 Dockerfile

</>复制代码

  1. # 若运行环境是 Linux 则需把 alpine 换成 debian
  2. # 使用最新版 alpine 作为基础镜像
  3. FROM alpine:latest
  4. # 在容器的根目录下创建 app 目录
  5. RUN mkdir /app
  6. # 将工作目录切换到 /app 下
  7. WORKDIR /app
  8. # 将微服务的服务端运行文件拷贝到 /app 下
  9. ADD consignment-service /app/consignment-service
  10. # 运行服务端
  11. CMD ["./consignment-service"]

alpine 是一个超轻量级 Linux 发行版本,专为 Docker 中 Web 应用而生。它能保证绝大多数 web 应用可以正常运行,即使它只包含必要的 run-time 文件和依赖,镜像大小只有 4 MB,相比上边 Ubuntu16.4 节约了 99.7% 的空间:

由于 docker 镜像的超轻量级,在上边部署和运行微服务耗费的资源是很小的。

编译项目

为了在 alpine 上运行我们的微服务,向 Makefile 追加命令:

</>复制代码

  1. build:
  2. ...
  3. # 告知 Go 编译器生成二进制文件的目标环境:amd64 CPU 的 Linux 系统
  4. GOOS=linux GOARCH=amd64 go build
  5. # 根据当前目录下的 Dockerfile 生成名为 consignment-service 的镜像
  6. docker build -t consignment-service .

需手动指定 GOOSGOARCH 的值,否则在 macOS 上编译出的文件是无法在 alpine 容器中运行的。

其中 docker build 将程序的执行文件 consignment-service 及其所需的 run-time 环境打包成了一个镜像,以后在 docker 中直接 run 镜像即可启动该微服务。

你可以把你的镜像分享到 DockerHub,二者的关系类比 npm 与 nodejs、composer 与 PHP,去 DockerHub 瞧一瞧,会发现很多优秀的开源软件都已 Docker 化,参考演讲:Willy Wonka of Containers

关于 Docker 构建镜像的细节,请参考书籍《第一本 Docker 书》第四章

运行 Docker 化后的微服务

继续在 Makefile 中追加命令:

</>复制代码

  1. build:
  2. ...
  3. run:
  4. # 在 Docker alpine 容器的 50001 端口上运行 consignment-service 服务
  5. # 可添加 -d 参数将微服务放到后台运行
  6. docker run -p 50051:50051 consignment-service

由于 Docker 有自己独立的网络层,所以需要指定将容器的端口映射到本机的那个端口,使用 -p 参数即可指定,比如 -p 8080:50051 是将容器 50051端口映射到本机 8080 端口,注意顺序是反的。更多参考:Docker 文档

现在运行 make build && make run 即可在 docker 中运行我们的微服务,此时在本机执行微服务的客户端代码,将成功调用 docker 中的微服务:

Go-micro 为什么不继续使用 gRPC ? 管理麻烦

在客户端代码(consignment-cli/cli.go)中,我们手动指定了服务端的地址和端口,在本地修改不是很麻烦。但在生产环境中,各服务可能不在同一台主机上(分布式独立运行),其中任一服务重新部署后 IP 或运行的端口发生变化,其他服务将无法再调用它。如果你有很多个服务,彼此指定 IP 和端口来相互调用,那管理起来很麻烦

服务发现

为解决服务间的调用问题,服务发现(service discovery)出现了,它作为一个注册中心会记录每个微服务的 IP 和端口,各微服务上线时会在它那注册,下线时会注销,其他服务可通过名字或 ID 找到该服务类比门面模式。

为不重复造轮子,我们直接使用实现了服务注册的 go-micro 框架。

安装

</>复制代码

  1. go get -u github.com/micro/protobuf/proto
  2. go get -u github.com/micro/protobuf/protoc-gen-go

使用 go-micro 自己的编译器插件,在 Makefile 中修改 protoc 命令:

</>复制代码

  1. build:
  2. # 不再使用 grpc 插件
  3. protoc -I. --go_out=plugins=micro:$(GOPATH)/src/shippy/consignment-service proto/consignment/consignment.proto
服务端使用 go-micro

你会发现重新生成的 consignment.pb.go 大有不同。修改服务端代码 main.go 使用 go-micro

</>复制代码

  1. package main
  2. import (
  3. pb "shippy/consignment-service/proto/consignment"
  4. "context"
  5. "log"
  6. "github.com/micro/go-micro"
  7. )
  8. //
  9. // 仓库接口
  10. //
  11. type IRepository interface {
  12. Create(consignment *pb.Consignment) (*pb.Consignment, error) // 存放新货物
  13. GetAll() []*pb.Consignment // 获取仓库中所有的货物
  14. }
  15. //
  16. // 我们存放多批货物的仓库,实现了 IRepository 接口
  17. //
  18. type Repository struct {
  19. consignments []*pb.Consignment
  20. }
  21. func (repo *Repository) Create(consignment *pb.Consignment) (*pb.Consignment, error) {
  22. repo.consignments = append(repo.consignments, consignment)
  23. return consignment, nil
  24. }
  25. func (repo *Repository) GetAll() []*pb.Consignment {
  26. return repo.consignments
  27. }
  28. //
  29. // 定义微服务
  30. //
  31. type service struct {
  32. repo Repository
  33. }
  34. //
  35. // 实现 consignment.pb.go 中的 ShippingServiceHandler 接口
  36. // 使 service 作为 gRPC 的服务端
  37. //
  38. // 托运新的货物
  39. // func (s *service) CreateConsignment(ctx context.Context, req *pb.Consignment) (*pb.Response, error) {
  40. func (s *service) CreateConsignment(ctx context.Context, req *pb.Consignment, resp *pb.Response) error {
  41. // 接收承运的货物
  42. consignment, err := s.repo.Create(req)
  43. if err != nil {
  44. return err
  45. }
  46. resp = &pb.Response{Created: true, Consignment: consignment}
  47. return nil
  48. }
  49. // 获取目前所有托运的货物
  50. // func (s *service) GetConsignments(ctx context.Context, req *pb.GetRequest) (*pb.Response, error) {
  51. func (s *service) GetConsignments(ctx context.Context, req *pb.GetRequest, resp *pb.Response) error {
  52. allConsignments := s.repo.GetAll()
  53. resp = &pb.Response{Consignments: allConsignments}
  54. return nil
  55. }
  56. func main() {
  57. server := micro.NewService(
  58. // 必须和 consignment.proto 中的 package 一致
  59. micro.Name("go.micro.srv.consignment"),
  60. micro.Version("latest"),
  61. )
  62. // 解析命令行参数
  63. server.Init()
  64. repo := Repository{}
  65. pb.RegisterShippingServiceHandler(server.Server(), &service{repo})
  66. if err := server.Run(); err != nil {
  67. log.Fatalf("failed to serve: %v", err)
  68. }
  69. }

go-micro 的实现相比 gRPC 有 3 个主要的变化:

创建 RPC 服务器的流程

micro.NewService(...Option) 简化了微服务的注册流程, micro.Run() 也简化了 gRPCServer.Serve(),不再需要手动创建 TCP 连接并监听。

微服务的 interface

注意看代码中第 47、59 行,会发现 go-micro 将响应参数 Response 提到了入参,只返回 error,整合了 gRPC 的 [四种运行模式]()

运行地址的管理

服务的监听端口没有在代码中写死,go-mirco 会自动使用系统或命令行中变量 MICRO_SERVER_ADDRESS 的地址

对应更新一下 Makefile

</>复制代码

  1. run:
  2. docker run -p 50051:50051
  3. -e MICRO_SERVER_ADDRESS=:50051
  4. -e MICRO_REGISTRY=mdns
  5. consignment-service

-e 选项用于设置镜像中的环境变量,其中 MICRO_REGISTRY=mdns 会使 go-micro 在本地使用 mdns 多播作为服务发现的中间层。在生产环境一般会使用 Consul 或 Etcd 代替 mdns 做服务发现,在本地开发先一切从简。

现在执行 make build && make run,你的 consignment-service 就有服务发现的功能了。

客户端使用 go-micro

我们需要更新一下客户端的代码,使用 go-micro 来调用微服务:

</>复制代码

  1. func main() {
  2. cmd.Init()
  3. // 创建微服务的客户端,简化了手动 Dial 连接服务端的步骤
  4. client := pb.NewShippingServiceClient("go.micro.srv.consignment", microclient.DefaultClient)
  5. ...
  6. }

现在运行 go run cli.go 会报错:

因为服务端运行在 Docker 中,而 Docker 有自己独立的 mdns,与宿主主机 Mac 的 mdns 不一致。把客户端也 Docker 化,这样服务端与客户端就在同一个网络层下,顺利使用 mdns 做服务发现。

Docker 化客户端

创建客户端的 Dokerfile

</>复制代码

  1. FROM alpine:latest
  2. RUN mkdir -p /app
  3. WORKDIR /app
  4. # 将当前目录下的货物信息文件 consignment.json 拷贝到 /app 目录下
  5. ADD consignment.json /app/consignment.json
  6. ADD consignment-cli /app/consignment-cli
  7. CMD ["./consignment-cli"]

创建文件 consignment-cli/Makefile

</>复制代码

  1. build:
  2. GOOS=linux GOARCH=amd64 go build
  3. docker build -t consignment-cli .
  4. run:
  5. docker run -e MICRO_REGISTRY=mdns consignment-cli
调用微服务

执行 make build && make run,即可看到客户端成功调用 RPC:

注明:译者的代码暂时未把 Golang 集成到 Dockerfile 中,读者有兴趣可参考原文。

VesselService

上边的 consignment-service 负责记录货物的托运信息,现在创建第二个微服务 vessel-service 来选择合适的货轮来运送货物,关系如下:

consignment.json 文件中的三个集装箱组成的货物,目前可以通过 consignment-service 管理货物的信息,现在用 vessel-service 去检查货轮是否能装得下这批货物。

创建 protobuf 文件

</>复制代码

  1. // vessel-service/proto/vessel/vessel.proto
  2. syntax = "proto3";
  3. package go.micro.srv.vessel;
  4. service VesselService {
  5. // 检查是否有能运送货物的轮船
  6. rpc FindAvailable (Specification) returns (Response) {
  7. }
  8. }
  9. // 每条货轮的熟悉
  10. message Vessel {
  11. string id = 1; // 编号
  12. int32 capacity = 2; // 最大容量(船体容量即是集装箱的个数)
  13. int32 max_weight = 3; // 最大载重
  14. string name = 4; // 名字
  15. bool available = 5; // 是否可用
  16. string ower_id = 6; // 归属
  17. }
  18. // 等待运送的货物
  19. message Specification {
  20. int32 capacity = 1; // 容量(内部集装箱的个数)
  21. int32 max_weight = 2; // 重量
  22. }
  23. // 货轮装得下的话
  24. // 返回的多条货轮信息
  25. message Response {
  26. Vessel vessel = 1;
  27. repeated Vessel vessels = 2;
  28. }
创建 Makefile 与 Dockerfile

现在创建 vessel-service/Makefile 来编译项目:

</>复制代码

  1. build:
  2. protoc -I. --go_out=plugins=micro:$(GOPATH)/src/shippy/vessel-service proto/vessel/vessel.proto
  3. # dep 工具暂不可用,直接手动编译
  4. GOOS=linux GOARCH=amd64 go build
  5. docker build -t vessel-service .
  6. run:
  7. docker run -p 50052:50051 -e MICRO_SERVER_ADDRESS=:50051 -e MICRO_REGISTRY=mdns vessel-service

注意第二个微服务运行在宿主主机(macOS)的 50052 端口,50051 已被第一个占用。

现在创建 Dockerfile 来容器化 vessel-service:

</>复制代码

  1. # 暂未将 Golang 集成到 docker 中
  2. FROM alpine:latest
  3. RUN mkdir /app
  4. WORKDIR /app
  5. ADD vessel-service /app/vessel-service
  6. CMD ["./vessel-service"]
实现货船微服务的逻辑

</>复制代码

  1. package main
  2. import (
  3. pb "shippy/vessel-service/proto/vessel"
  4. "github.com/pkg/errors"
  5. "context"
  6. "github.com/micro/go-micro"
  7. "log"
  8. )
  9. type Repository interface {
  10. FindAvailable(*pb.Specification) (*pb.Vessel, error)
  11. }
  12. type VesselRepository struct {
  13. vessels []*pb.Vessel
  14. }
  15. // 接口实现
  16. func (repo *VesselRepository) FindAvailable(spec *pb.Specification) (*pb.Vessel, error) {
  17. // 选择最近一条容量、载重都符合的货轮
  18. for _, v := range repo.vessels {
  19. if v.Capacity >= spec.Capacity && v.MaxWeight >= spec.MaxWeight {
  20. return v, nil
  21. }
  22. }
  23. return nil, errors.New("No vessel can"t be use")
  24. }
  25. // 定义货船服务
  26. type service struct {
  27. repo Repository
  28. }
  29. // 实现服务端
  30. func (s *service) FindAvailable(ctx context.Context, spec *pb.Specification, resp *pb.Response) error {
  31. // 调用内部方法查找
  32. v, err := s.repo.FindAvailable(spec)
  33. if err != nil {
  34. return err
  35. }
  36. resp.Vessel = v
  37. return nil
  38. }
  39. func main() {
  40. // 停留在港口的货船,先写死
  41. vessels := []*pb.Vessel{
  42. {Id: "vessel001", Name: "Boaty McBoatface", MaxWeight: 200000, Capacity: 500},
  43. }
  44. repo := &VesselRepository{vessels}
  45. server := micro.NewService(
  46. micro.Name("go.micro.srv.vessel"),
  47. micro.Version("latest"),
  48. )
  49. server.Init()
  50. // 将实现服务端的 API 注册到服务端
  51. pb.RegisterVesselServiceHandler(server.Server(), &service{repo})
  52. if err := server.Run(); err != nil {
  53. log.Fatalf("failed to serve: %v", err)
  54. }
  55. }
货运服务与货船服务交互

现在需要修改 consignent-service/main.go,使其作为客户端去调用 vessel-service,查看有没有合适的轮船来运输这批货物。

</>复制代码

  1. // consignent-service/main.go
  2. package main
  3. import (...)
  4. // 定义微服务
  5. type service struct {
  6. repo Repository
  7. // consignment-service 作为客户端调用 vessel-service 的函数
  8. vesselClient vesselPb.VesselServiceClient
  9. }
  10. // 实现 consignment.pb.go 中的 ShippingServiceHandler 接口,使 service 作为 gRPC 的服务端
  11. func (s *service) CreateConsignment(ctx context.Context, req *pb.Consignment, resp *pb.Response) error {
  12. // 检查是否有适合的货轮
  13. vReq := &vesselPb.Specification{
  14. Capacity: int32(len(req.Containers)),
  15. MaxWeight: req.Weight,
  16. }
  17. vResp, err := s.vesselClient.FindAvailable(context.Background(), vReq)
  18. if err != nil {
  19. return err
  20. }
  21. // 货物被承运
  22. log.Printf("found vessel: %s
  23. ", vResp.Vessel.Name)
  24. req.VesselId = vResp.Vessel.Id
  25. consignment, err := s.repo.Create(req)
  26. if err != nil {
  27. return err
  28. }
  29. resp.Created = true
  30. resp.Consignment = consignment
  31. return nil
  32. }
  33. // ...
  34. func main() {
  35. // ...
  36. // 解析命令行参数
  37. server.Init()
  38. repo := Repository{}
  39. // 作为 vessel-service 的客户端
  40. vClient := vesselPb.NewVesselServiceClient("go.micro.srv.vessel", server.Client())
  41. pb.RegisterShippingServiceHandler(server.Server(), &service{repo, vClient})
  42. if err := server.Run(); err != nil {
  43. log.Fatalf("failed to serve: %v", err)
  44. }
  45. }
增加货物并运行

更新 consignment-cli/consignment.json 中的货物,塞入三个集装箱,重量和容量都变大。

</>复制代码

  1. {
  2. "description": "This is a test consignment",
  3. "weight": 55000,
  4. "containers": [
  5. {
  6. "customer_id": "cust001",
  7. "user_id": "user001",
  8. "origin": "Manchester, United Kingdom"
  9. },
  10. {
  11. "customer_id": "cust002",
  12. "user_id": "user001",
  13. "origin": "Derby, United Kingdom"
  14. },
  15. {
  16. "customer_id": "cust005",
  17. "user_id": "user001",
  18. "origin": "Sheffield, United Kingdom"
  19. }
  20. ]
  21. }

至此,我们完整的将 consignment-cli,consignment-service,vessel-service 三者流程跑通了。

客户端用户请求托运货物,货运服务向货船服务检查容量、重量是否超标,再运送:

总结

本节中将更为易用的 go-micro 替代了 gRPC 同时进行了微服务的 Docker 化。最后创建了 vessel-service 货轮微服务来运送货物,并成功与货轮微服务进行了通信。

不过货物数据都是存放在文件 consignment.json 中的,第三节我们将这些数据存储到 MongoDB 数据库中,并在代码中使用 ORM 对数据进行操作,同时使用 docker-compose 来统一 Docker 化后的两个微服务。

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/27342.html

相关文章

  • Golang 服务教程(三)

    摘要:本节将学习来统一管理和部署微服务,引入第三个微服务并进行存储数据。到目前为止,要想启动微服务的容器,均在其中的同时设置其环境变量,服务多了以后管理起来十分麻烦。 译文链接:wuYin/blog原文链接:ewanvalentine.io,翻译已获作者 Ewan Valentine 授权。 本文完整代码:GitHub 在上节中,我们使用 go-micro 重新实现了微服务并进行了 Doc...

    Drummor 评论0 收藏0
  • 2017年1月前端月报

    摘要:平日学习接触过的网站积累,以每月的形式发布。年以前看这个网址概况在线地址前端开发群月报提交原则技术文章新的为主。 平日学习接触过的网站积累,以每月的形式发布。2017年以前看这个网址:http://www.kancloud.cn/jsfron... 概况 在线地址:http://www.kancloud.cn/jsfront/month/82796 JS前端开发群月报 提交原则: 技...

    FuisonDesign 评论0 收藏0
  • 2017年1月前端月报

    摘要:平日学习接触过的网站积累,以每月的形式发布。年以前看这个网址概况在线地址前端开发群月报提交原则技术文章新的为主。 平日学习接触过的网站积累,以每月的形式发布。2017年以前看这个网址:http://www.kancloud.cn/jsfron... 概况 在线地址:http://www.kancloud.cn/jsfront/month/82796 JS前端开发群月报 提交原则: 技...

    ivyzhang 评论0 收藏0
  • 2017年1月前端月报

    摘要:平日学习接触过的网站积累,以每月的形式发布。年以前看这个网址概况在线地址前端开发群月报提交原则技术文章新的为主。 平日学习接触过的网站积累,以每月的形式发布。2017年以前看这个网址:http://www.kancloud.cn/jsfron... 概况 在线地址:http://www.kancloud.cn/jsfront/month/82796 JS前端开发群月报 提交原则: 技...

    CloudwiseAPM 评论0 收藏0

发表评论

0条评论

sevi_stuo

|高级讲师

TA的文章

阅读更多
最新活动
阅读需要支付1元查看
<