add get buckets contrl

sunty

2020-08-20 9d88c7c467f8d93af4aab9ba0b6d6c01c2ffc546

 service/SdkDownLoad.go

@@ -1,17 +1,23 @@
package service

import (
   "basic.com/valib/licence.git"
   "bytes"
   "crypto/md5"
   "encoding/hex"
   "encoding/json"
   "errors"
   "fmt"
   "io"
   "io/ioutil"
   "net/http"
   "os"
   "path"
   "path/filepath"
   "strings"
   "webserver/extend/config"

   reqUtil "webserver/extend/util"

   "webserver/util"

@@ -127,31 +133,83 @@
   }
}

func GetSdkList(sdkName string) []map[string]interface{} {
   // 待返回的数据
   sdks, idsCache := queryDatabase(sdkName)
//installedFlag 如果是true,表示只查本地的，不需要比对查看未安装的算法
func GetSdkList(sdkName string, installedFlag bool) []SdkInsOrUpgrade {
   var api dbapi.SdkApi
   localSdks := api.FindAll(sdkName) //本地已安装所有算法,带顺序
   if localSdks == nil {
      return []SdkInsOrUpgrade{}
   }
   installedSdks := make([]SdkInsOrUpgrade, len(localSdks))

   // 查询本地已经存在的算法和远端的全部算法, 然后和已安装的比对, 返回全部可用的算法组. 未安装的算法在前端走下载流程
   localSdks := GetLocalSdks()
   for _, sdk := range localSdks {
      id := sdk["id"].(string)
      if !idsCache[id] {
         idsCache[id] = true

         sdk["enable"] = false
         sdk["installed"] = false

         // 不返回参数信息
         delete(sdk, "args")
         sdks = append(sdks, sdk)
   localSdkM := make(map[string]SdkInsOrUpgrade)
   for idx,ls :=range localSdks {
      siou := SdkInsOrUpgrade{
         Installed: true,
      }
      sdk := Sdk{
         CreateTime: ls.CreateTime,
         CreateBy: ls.CreateBy,
         UpdateTime: ls.UpdateTime,
         Enable: ls.Enable,
         DelFlag: int(ls.DelFlag),
      }
      var sc SdkCommon
      sc.copyFromProto(ls)
      sdk.SdkCommon = sc

      for _,arg := range ls.Args {
         sdk.Args = append(sdk.Args, SdkArg{
            Alias: arg.Alias,
            Name: arg.Name,
            Type: arg.Type,
            Must: arg.Must,
            Unit: arg.Unit,
            Range: arg.Range,
            DefaultValue: arg.DefaultValue,
            DefaultOperator: arg.DefaultOperator,
            Sort: int(arg.Sort),
         })
      }
      siou.Sdk = sdk
      localSdkM[siou.Id] = siou
      installedSdks[idx] = siou
   }

   // 目前还没有远端算法库,
   // remoteSdks := getRemoteSdks()
   nInsSdks := make([]SdkInsOrUpgrade,0)
   if !installedFlag {
      //远端可用的算法
      remoteSdks := findAllMySdk()
      //logger.Debug("remoteSdks:", remoteSdks)

   return sdks
      for _,sdk := range remoteSdks {
         if v,ok := localSdkM[sdk.Id];ok { //本地已安装
            ls := v
            if shouldVersionBeUpgrade(ls.Version, sdk.Version) { //判断版本号是否需要升级
               ls.Installed = true
               ls.IsUpgrade = true //需要升级
               ls.RemoteVersion = sdk.Version //远端的版本号
            }
            localSdkM[sdk.Id] = ls
            for index,es := range installedSdks {
               if es.Id == sdk.Id {
                  installedSdks[index] = ls
                  break
               }
            }
         } else { //本地未安装，需要安装
            bIns := SdkInsOrUpgrade{
               RemoteVersion: sdk.Version,
               IsUpgrade: false,
               Installed: false,
            }
            bIns.Sdk = sdk
            nInsSdks = append(nInsSdks, bIns)
         }
      }
   }

   return append(installedSdks, nInsSdks...)
}

func queryDatabase(sdkName string) ([]map[string]interface{}, map[string]bool) {
@@ -175,6 +233,46 @@
   }

   return sdks, ids
}


type shopSdks struct {
   Sdks []Sdk `json:"sdks"`
}

const (
   token = "Bearer eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXVCJ9.eyJleHAiOjQ3NDUwMjU5MjMsInVzZXIiOiJ7XCJpZFwiOlwiZTZjY2QzNmQtNGYxNi00NmZjLTg4ZDUtMDczNjU4NjZkMjA1XCIsXCJwZXJtaXNzaW9uc1wiOltcInByb2R1Y3RNYW5nZTpwdWJsaXNoXCIsXCJjb2RlTWFuZ2U6dmlld1wiLFwiZGV2aWNlTWFuYWdlOmFkZFwiLFwiYWRtaW5NYW5hZ2VcIixcIm9yZGVyTWFuZ2VcIixcImRldmljZU1hbmFnZTp2aWV3XCIsXCJwcm9kdWN0TWFuZ2U6YWRkXCIsXCJhZG1pbk1hbmFnZTp2aWV3XCIsXCJjb2RlTWFuZ2U6YWRkXCIsXCJwcm9kdWN0TWFuZ2U6b2ZmU2FsZVwiLFwib3JkZXJNYW5nZTpjYW5jZWxcIixcInByb2R1Y3RDZW50ZXI6ZG93bmxvYWRcIixcInByb2R1Y3RDZW50ZXI6YnV5XCIsXCJwcm9kdWN0TWFuZ2U6dmlld1wiLFwiYXBpXCIsXCJob21lXCIsXCJvcmRlck1hbmdlOnBheVwiLFwiYWRtaW5NYW5hZ2U6YWRkXCIsXCJvcmRlck1hbmdlOmRvd25sb2FkXCIsXCJwcm9kdWN0Q2VudGVyXCIsXCJkZXZpY2VNYW5hZ2U6dW5iaW5kXCIsXCJvcmRlck1hbmdlOnZpZXdcIixcImFkbWluTWFuYWdlOmVkaXRcIixcImRldmljZU1hbmFnZVwiLFwidmlwTWFuYWdlOmFkZFwiLFwidmlwTWFuYWdlOnZpZXdcIixcInByb2R1Y3RDZW50ZXI6dmlld1wiLFwidmlwTWFuYWdlOmVkaXRcIixcInZpcE1hbmFnZVwiLFwicHJvZHVjdE1hbmdlOmVkaXRcIixcImNvZGVNYW5nZVwiLFwicHJvZHVjdE1hbmdlXCJdLFwidXNlcm5hbWVcIjpcImJhc2ljXCJ9In0.vwjAFkWuEyadRLvIOGK8LFE3MjpY3SQ7j6AlTXnQDG8"
)

func findAllMySdk() []Sdk {
   url := "http://"+config.ShopConf.Url+"/data/api-s/sdk/findAllMySdk"
   machineCode := licence.GetMachineCode()
   fmt.Println("url:", url, "machineCode:", machineCode)
   paramBody := map[string]interface{} {
      "serverId": config.Server.AnalyServerId,
      "machineCode": machineCode,
   }
   header := map[string]string {
      "Authorization": token,
   }
   respBody, err := reqUtil.DoPostRequest(url, reqUtil.CONTENT_TYPE_JSON, paramBody, nil, header)
   if err != nil {
      logger.Debug("DoPostRequest err:", err)
      return nil
   }
   var res dbapi.Result
   if err = json.Unmarshal(respBody, &res); err != nil {
      logger.Debug("unmarshal err:", err)
      return nil
   }
   bytes, _ := json.Marshal(res.Data)
   var ss shopSdks
   if err := json.Unmarshal(bytes, &ss);err != nil {
      logger.Debug("unmarshal err:", err)
      return nil
   }

   return ss.Sdks
}

func GetLocalSdks() []map[string]interface{} {
@@ -222,3 +320,79 @@

   return nil
}

type downOrUpResp struct {
   Url string `json:"url"`
   Md5 string `json:"md5"`
}

//下载或者升级算法
func DownloadOrUpgrade(sdkId string) (bool,error) {
   url := "http://"+config.ShopConf.Url+"/data/api-s/sdk/downloadOrUpgrade"
   machineCode := licence.GetMachineCode()
   if machineCode == "" {
      logger.Debug("获取机器码失败")
      return false, errors.New("获取机器码失败")
   }
    paramBody := map[string]interface{}{
       "sdkId": sdkId,
       "machineCode": machineCode,
   }
   header := map[string]string {
      "Authorization": token,
   }
   respBody, err := reqUtil.DoPostRequest(url, reqUtil.CONTENT_TYPE_JSON, paramBody, nil, header)
   if err != nil {
      logger.Debug("DoPostRequest err:", err)
      return false, err
   }
   var res dbapi.Result
   if err = json.Unmarshal(respBody, &res); err != nil {
      logger.Debug("unmarshal err:", err)
      return false, err
   }
   if !res.Success {
      logger.Debug("res.Data:", res.Data)
      return false, errors.New("请求商城失败")
   }
   bytes, _ := json.Marshal(res.Data)
   var resp downOrUpResp
   if err := json.Unmarshal(bytes, &resp);err != nil {
      logger.Debug("unmarshal err:", err)
      return false, err
   }
   logger.Debug("res.Data:", res.Data, "resp:", resp)
   if resp.Url == "" || resp.Md5 == "" {
      return false, errors.New("获取下载安装包失败")
   }

   //2.下载安装（升级）包，验证md5后安装
   configPatchPath := ""
   if config.Server.PatchPath != "" {
      configPatchPath = config.Server.PatchPath
   } else {
      configPatchPath = "../patch"
   }
   if !reqUtil.DirExists(configPatchPath) {
      os.Mkdir(configPatchPath, 0777)
   }
   filenameWithSuffix := path.Base(resp.Url)
   ext := path.Ext(filenameWithSuffix)
   downUrl := "http://"+config.ShopConf.Url+"/files/"+resp.Url

   gzFilePath := configPatchPath + "/" + resp.Md5+ext
   err = reqUtil.DownloadFile(gzFilePath, downUrl)
   if err != nil {
      logger.Debug("DownloadFile err:", err)
      return false, err
   }
   if unPackB,unPackErr := unPackPatchPackage(resp.Md5, ext); !unPackB { //解压失败
      return false, unPackErr
   }
   b, err := installSdk(resp.Md5, ext)
   if b {
      return true, nil
   }

   return false, err
}