remove no use code

zhangmeng

2019-12-13 330a9e5cb636286cdb399cd305856e5f419c540f

 sdk/sdk.go

@@ -1,16 +1,14 @@
package sdk

import (
   "fmt"
   // "golang.org/x/sys/unix"

   "github.com/gogo/protobuf/proto"
   "taskpubsub/tasktag"
   "taskpubsub/util"

   "github.com/gogo/protobuf/proto"

   "basic.com/pubsub/protomsg.git"
   "basic.com/valib/deliver.git"
   "taskpubsub/logger"
   "basic.com/valib/logger.git"
)

const (
@@ -23,25 +21,6 @@

var shm bool = false

var innerRecvTopic = []string{
   "facedetect-sdk-no-track", //to sdk-no-track 以图搜图
}

var innerSendTopic = []string{
   "facedetect-sdk-no-track",      //to sdk-no-track 以图搜图
   "virtual-faceextract-sdk-pull", //to web 以图搜图
}

func initInnerTopic() {
   for _, sendTopic := range innerSendTopic {
      createSdkSendServerAndListen(sendTopic)
   }

   for _, recvTopic := range innerRecvTopic {
      createSdkRecvServerAndListen(recvTopic)
   }
}

func Init(useShm bool) {

   shm = useShm
@@ -49,16 +28,7 @@
   logger.Info("============= init sdk info =====================")
   for _, sdkid := range util.Sdklist { // 创建sdk server
      createSdkTopicAndServer(sdkid)
      logger.Info()
   }

   // 手动输入的主题
   initInnerTopic()

   // es
   SdkMap["es"] = make(chan protomsg.SdkMessage)
   logger.Info("create es channel: ")
   go DealEsTopic()

   go autoUpdateSdk(util.Sdkflag)
}
@@ -85,23 +55,24 @@
func createSdkSendServerAndListen(id string) {
   if _, isExist := SdkMap[id]; !isExist { //不存在
      SdkMap[id] = make(chan protomsg.SdkMessage)
      logger.Info("create", id)
   }

   url := fmt.Sprintf("ipc:///tmp/%s%s.ipc", id, postPush)
   url := "ipc:///tmp/" + id + postPush + ".ipc"
   m := deliver.PushPull
   if shm{
   if shm {
      m = deliver.Shm
      url = id + postPush
      // unix.Unlink("/dev/shm/" + url)
   }

   socket, err := util.NewSocketListen(int(m), url, shm)
   if err != nil {
      delete(SdkMap, id)
      logger.Error(id, "create socket error!")
      return
   }

   SocketManage[id] = socket
   logger.Info("SDK URL Send: ", url)

   go Send(id, socket, SdkMap[id])
}
@@ -112,13 +83,12 @@
      logger.Info("create", id)
   }

   url := fmt.Sprintf("ipc:///tmp/%s%s.ipc", id, postPull)
   url := "ipc:///tmp/" + id + postPull + ".ipc"
   m := deliver.PushPull
   if shm{
   if shm {
      m = deliver.Shm
      url = id + postPull

      // unix.Unlink("/dev/shm/" + url)
   }

   socket, err := util.NewSocketListen(int(m), url, shm)
@@ -128,7 +98,9 @@
      logger.Error(id, "create socket error!")
      return
   }

   SocketManage[id] = socket
   logger.Info("SDK URL Recv: ", url)

   go Recv(socket)
}
@@ -154,14 +126,6 @@
      }

      newSdkList := util.Sdklist

      // 手动添加的全部加上
      for _, sendTopic := range innerSendTopic {
         newSdkList = append(newSdkList, sendTopic)
      }
      for _, recvTopic := range innerRecvTopic {
         newSdkList = append(newSdkList, recvTopic)
      }

      sdkListUpdate := util.Difference(oldSdkList, newSdkList)
      logger.Info(sdkListUpdate)
@@ -195,24 +159,51 @@
func GetSdkSendTopic(sdkmsg protomsg.SdkMessage) (sendTopic string) {
   if int(sdkmsg.Tasklab.Index) < len(sdkmsg.Tasklab.Sdkinfos) {
      sendTopic = sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Ipcid
      // if "Yolo" != sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdktype &&
      //    "FaceDetect" != sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdktype &&
      //    "FaceCompare" != sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdktype {
      //    //if sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdktype == "" {
      //    logger.Info("----------Sdktype:yitusoutu")
      //    logger.Info("分发的主题:", sendTopic, "!Sdktype：", sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdktype)
      // }
   } else {
      sendTopic = "es"
   }
   logger.Debug("分发的主题: ", sendTopic, "位置：", int(sdkmsg.Tasklab.Index)+1, "/", len(sdkmsg.Tasklab.Sdkinfos))
   return

   return sendTopic
}

func Recv(socket util.SocketContext) {

   tryCount := 0

   var repsdkmsg = protomsg.SdkMessage{}
   for {
      select {
      case <-socket.Context.Done():
         socket.Sock.Close()

         logger.Info("socket close")
         return
      default:
         if msg, err := socket.Sock.Recv(); err != nil {

            // tryCount++
            // socket = util.MaybeRestartSocket(socket, &tryCount)

            if socket.UseSHM {
               if tryCount > util.ShmMaxTryCount {
                  socket.Sock.Close()
                  socket, err = util.NewSocketListen(socket.Mode, socket.URL, socket.UseSHM)
                  // logger.Info("SDK SEND SHM TRY :", util.ShmMaxTryCount, " RESTART IT")
                  tryCount = 0
                  continue
               }
               tryCount++
            }
            continue
         } else {

            err = proto.Unmarshal(msg, &repsdkmsg)
            if err != nil {
               logger.Error("unmarshal error: ", err)
@@ -222,6 +213,7 @@
            //调用计算函数， 分发给下一个主题
            nexttopic := GetSdkSendTopic(repsdkmsg)
            SdkMap[nexttopic] <- repsdkmsg
            logger.Info("recv from URL: ", socket.URL, " success: ", len(msg), " send to: ", repsdkmsg)
         }
      }
   }
@@ -229,9 +221,13 @@

func Send(sdkid string, socket util.SocketContext, in chan protomsg.SdkMessage) {

   tryCount := 0

   for {
      select {
      case <-socket.Context.Done():
         socket.Sock.Close()

         logger.Info("socket is close")
         return
      case v, ok := <-in:
@@ -243,10 +239,26 @@
            }

            if err := socket.Sock.Send(data); err != nil {
               logger.Error("failed send:sdkid=", sdkid)

               // tryCount++
               // socket = util.MaybeRestartSocket(socket, &tryCount)

               if socket.UseSHM {
                  if tryCount > util.ShmMaxTryCount {
                     socket.Sock.Close()
                     socket, err = util.NewSocketListen(socket.Mode, socket.URL, socket.UseSHM)
                     // logger.Info("SDK SEND SHM TRY :", util.ShmMaxTryCount, " RESTART IT")
                     tryCount = 0
                     continue
                  }
                  tryCount++
               }

               continue
            }
            logger.Debug(sdkid, " send success: ", len(data))

            logger.Info("send to sdk id: ", sdkid, " success: ", len(data))

         } else {
            logger.Debug(sdkid, " 主题关闭, 关闭send()")
            return