add sdk download impl

liuxiaolong

2020-06-08 2a4041f16c6588921c87df93927e9076c2cc309d

 service/SdkDownLoad.go

@@ -1,17 +1,23 @@
package service

import (
   "basic.com/valib/licence.git"
   "bytes"
   "crypto/md5"
   "encoding/hex"
   "encoding/json"
   "errors"
   "fmt"
   "io"
   "io/ioutil"
   "net/http"
   "os"
   "path"
   "path/filepath"
   "strings"
   "webserver/extend/config"

   reqUtil "webserver/extend/util"

   "webserver/util"

@@ -127,30 +133,60 @@
   }
}

func GetSdkList(sdkName string) []map[string]interface{} {
   // 待返回的数据
   sdks, idsCache := queryDatabase(sdkName)

   // 查询本地已经存在的算法和远端的全部算法, 然后和已安装的比对, 返回全部可用的算法组. 未安装的算法在前端走下载流程
   localSdks := GetLocalSdks()
   for _, sdk := range localSdks {
      id := sdk["id"].(string)
      if !idsCache[id] {
         idsCache[id] = true

         sdk["enable"] = false
         sdk["installed"] = false

         // 不返回参数信息
         delete(sdk, "args")
         sdks = append(sdks, sdk)
func GetSdkList(sdkName string) []SdkInsOrUpgrade {
   var api dbapi.SdkApi
   localSdks := api.FindAll(sdkName) //本地已安装所有算法
   localSdkM := make(map[string]SdkInsOrUpgrade)
   for _,ls :=range localSdks {
      siou := SdkInsOrUpgrade{
         Installed: true,
      }

      siou.Sdk = Sdk{
         Id: ls.Id,
         IpcId: ls.IpcId,
         SdkType: ls.SdkType,
         SdkName: ls.SdkName,
         Icon: ls.Icon,
         Url: ls.Url,
         CreateTime: ls.CreateTime,
         CreateBy: ls.CreateBy,
         UpdateTime: ls.UpdateTime,
         Enable: ls.Enable,
         DelFlag: int(ls.DelFlag),
         IconBlob: ls.IconBlob,
         Version: ls.Version,
      }
      localSdkM[siou.Id] = siou
   }

   // 目前还没有远端算法库,
   // remoteSdks := getRemoteSdks()
   //远端可用的算法
   remoteSdks := findAllMySdk()
   logger.Debug("remoteSdks:", remoteSdks)

   for sdkId,sdk := range remoteSdks {
      if v,ok := localSdkM[sdkId];ok { //本地已安装
         ls := v
         if shouldVersionBeUpgrade(ls.Version, sdk.Version) { //判断版本号是否需要升级
            ls.Installed = true
            ls.IsUpgrade = true //需要升级
            ls.RemoteVersion = sdk.Version //远端的版本号
         }
         localSdkM[sdkId] = ls
      } else { //本地未安装，需要安装
         bIns := SdkInsOrUpgrade{
            RemoteVersion: sdk.Version,
            IsUpgrade: false,
            Installed: false,
         }
         bIns.Sdk = sdk
         localSdkM[sdkId] = bIns
      }
   }

   sdks := make([]SdkInsOrUpgrade, 0)
   for _,v := range localSdkM {
      sdks = append(sdks, v)
   }
   return sdks
}

@@ -175,6 +211,49 @@
   }

   return sdks, ids
}


type shopSdks struct {
   Sdks []Sdk `json:"sdks"`
}

const (
   token = "Bearer eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJleHAiOjQ3NDUwMjU5MjMsInVzZXIiOiJ7XCJpZFwiOlwiZTZjY2QzNmQtNGYxNi00NmZjLTg4ZDUtMDczNjU4NjZkMjA1XCIsXCJwZXJtaXNzaW9uc1wiOltcInByb2R1Y3RNYW5nZTpwdWJsaXNoXCIsXCJjb2RlTWFuZ2U6dmlld1wiLFwiZGV2aWNlTWFuYWdlOmFkZFwiLFwiYWRtaW5NYW5hZ2VcIixcIm9yZGVyTWFuZ2VcIixcImRldmljZU1hbmFnZTp2aWV3XCIsXCJwcm9kdWN0TWFuZ2U6YWRkXCIsXCJhZG1pbk1hbmFnZTp2aWV3XCIsXCJjb2RlTWFuZ2U6YWRkXCIsXCJwcm9kdWN0TWFuZ2U6b2ZmU2FsZVwiLFwib3JkZXJNYW5nZTpjYW5jZWxcIixcInByb2R1Y3RDZW50ZXI6ZG93bmxvYWRcIixcInByb2R1Y3RDZW50ZXI6YnV5XCIsXCJwcm9kdWN0TWFuZ2U6dmlld1wiLFwiYXBpXCIsXCJob21lXCIsXCJvcmRlck1hbmdlOnBheVwiLFwiYWRtaW5NYW5hZ2U6YWRkXCIsXCJvcmRlck1hbmdlOmRvd25sb2FkXCIsXCJwcm9kdWN0Q2VudGVyXCIsXCJkZXZpY2VNYW5hZ2U6dW5iaW5kXCIsXCJvcmRlck1hbmdlOnZpZXdcIixcImFkbWluTWFuYWdlOmVkaXRcIixcImRldmljZU1hbmFnZVwiLFwidmlwTWFuYWdlOmFkZFwiLFwidmlwTWFuYWdlOnZpZXdcIixcInByb2R1Y3RDZW50ZXI6dmlld1wiLFwidmlwTWFuYWdlOmVkaXRcIixcInZpcE1hbmFnZVwiLFwicHJvZHVjdE1hbmdlOmVkaXRcIixcImNvZGVNYW5nZVwiLFwicHJvZHVjdE1hbmdlXCJdLFwidXNlcm5hbWVcIjpcImJhc2ljXCJ9In0.vwjAFkWuEyadRLvIOGK8LFE3MjpY3SQ7j6AlTXnQDG8"
)

func findAllMySdk() map[string]Sdk {
   url := "http://"+config.ShopConf.Url+"/data/api-s/sdk/findAllMySdk"
   machineCode := licence.GetMachineCode()
   fmt.Println("url:", url, "machineCode:", machineCode)
   paramBody := map[string]interface{} {
      "serverId": config.Server.AnalyServerId,
      "machineCode": machineCode,
   }
   header := map[string]string {
      "Authorization": token,
   }
   respBody, err := reqUtil.DoPostRequest(url, reqUtil.CONTENT_TYPE_JSON, paramBody, nil, header)
   if err != nil {
      logger.Debug("DoPostRequest err:", err)
      return nil
   }
   var res dbapi.Result
   if err = json.Unmarshal(respBody, &res); err != nil {
      logger.Debug("unmarshal err:", err)
      return nil
   }
   bytes, _ := json.Marshal(res.Data)
   var ss shopSdks
   if err := json.Unmarshal(bytes, &ss);err != nil {
      logger.Debug("unmarshal err:", err)
      return nil
   }
   m := make(map[string]Sdk)
   for _,s := range ss.Sdks {
      m[s.Id] = s
   }
   return m
}

func GetLocalSdks() []map[string]interface{} {
@@ -222,3 +301,71 @@

   return nil
}

type downOrUpResp struct {
   Url string `json:"url"`
   md5 string `json:"md5"`
}

//下载或者升级算法
func DownloadOrUpgrade(sdkId string) (bool,error) {
   url := "http://"+config.ShopConf.Url+"/data/api-s/sdk/downloadOrUpgrade"
   machineCode := licence.GetMachineCode()
   if machineCode == "" {
      logger.Debug("获取机器码失败")
      return false, errors.New("获取机器码失败")
   }
    paramBody := map[string]interface{}{
       "sdkId": sdkId,
       "machineCode": machineCode,
   }
   header := map[string]string {
      "Authorization": token,
   }
   respBody, err := reqUtil.DoPostRequest(url, reqUtil.CONTENT_TYPE_JSON, paramBody, nil, header)
   if err != nil {
      logger.Debug("DoPostRequest err:", err)
      return false, err
   }
   var res dbapi.Result
   if err = json.Unmarshal(respBody, &res); err != nil {
      logger.Debug("unmarshal err:", err)
      return false, err
   }
   bytes, _ := json.Marshal(res.Data)
   var resp downOrUpResp
   if err := json.Unmarshal(bytes, &resp);err != nil {
      logger.Debug("unmarshal err:", err)
      return false, err
   }
   if resp.Url == "" || resp.md5 == "" {
      return false, errors.New("获取下载安装包失败")
   }

   //2.下载安装（升级）包，验证md5后安装
   configPatchPath := ""
   if config.Server.PatchPath != "" {
      configPatchPath = config.Server.PatchPath
   } else {
      configPatchPath = "../patch"
   }
   if !reqUtil.DirExists(configPatchPath) {
      os.Mkdir(configPatchPath, 0777)
   }
   filenameWithSuffix := path.Base(resp.Url)
   ext := path.Ext(filenameWithSuffix)
   downUrl := "http://"+config.ShopConf.Url+"/files/"+resp.Url

   gzFilePath := configPatchPath + "/" + resp.md5+ext
   err = reqUtil.DownloadFile(gzFilePath, downUrl)
   if err != nil {
      logger.Debug("DownloadFile err:", err)
      return false, err
   }
   b, err := installSdk(resp.md5, ext)
   if b {
      return true, nil
   }

   return false, err
}