zhangmeng
2019-12-13 330a9e5cb636286cdb399cd305856e5f419c540f
sdk/sdk.go
@@ -21,25 +21,6 @@
var shm bool = false
var innerRecvTopic = []string{
   "facedetect-sdk-no-track", //to sdk-no-track 以图搜图
}
var innerSendTopic = []string{
   "facedetect-sdk-no-track",      //to sdk-no-track 以图搜图
   "virtual-faceextract-sdk-pull", //to web 以图搜图
}
func initInnerTopic() {
   // for _, sendTopic := range innerSendTopic {
   //    createSdkSendServerAndListen(sendTopic)
   // }
   // for _, recvTopic := range innerRecvTopic {
   //    createSdkRecvServerAndListen(recvTopic)
   // }
}
func Init(useShm bool) {
   shm = useShm
@@ -47,16 +28,7 @@
   logger.Info("============= init sdk info =====================")
   for _, sdkid := range util.Sdklist { // 创建sdk server
      createSdkTopicAndServer(sdkid)
      logger.Info()
   }
   // 手动输入的主题
   initInnerTopic()
   // es
   SdkMap["es"] = make(chan protomsg.SdkMessage)
   logger.Info("create es channel: ")
   go DealEsTopic()
   go autoUpdateSdk(util.Sdkflag)
}
@@ -83,7 +55,6 @@
func createSdkSendServerAndListen(id string) {
   if _, isExist := SdkMap[id]; !isExist { //不存在
      SdkMap[id] = make(chan protomsg.SdkMessage)
      logger.Info("create", id)
   }
   url := "ipc:///tmp/" + id + postPush + ".ipc"
@@ -93,15 +64,15 @@
      url = id + postPush
   }
   logger.Info("SDK URL: ", url)
   socket, err := util.NewSocketListen(int(m), url, shm)
   if err != nil {
      delete(SdkMap, id)
      logger.Error(id, "create socket error!")
      return
   }
   SocketManage[id] = socket
   logger.Info("SDK URL Send: ", url)
   go Send(id, socket, SdkMap[id])
}
@@ -127,7 +98,9 @@
      logger.Error(id, "create socket error!")
      return
   }
   SocketManage[id] = socket
   logger.Info("SDK URL Recv: ", url)
   go Recv(socket)
}
@@ -153,14 +126,6 @@
      }
      newSdkList := util.Sdklist
      // 手动添加的全部加上
      for _, sendTopic := range innerSendTopic {
         newSdkList = append(newSdkList, sendTopic)
      }
      for _, recvTopic := range innerRecvTopic {
         newSdkList = append(newSdkList, recvTopic)
      }
      sdkListUpdate := util.Difference(oldSdkList, newSdkList)
      logger.Info(sdkListUpdate)
@@ -194,13 +159,13 @@
func GetSdkSendTopic(sdkmsg protomsg.SdkMessage) (sendTopic string) {
   if int(sdkmsg.Tasklab.Index) < len(sdkmsg.Tasklab.Sdkinfos) {
      sendTopic = sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Ipcid
      if "Yolo" != sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdktype &&
         "FaceDetect" != sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdktype &&
         "FaceCompare" != sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdktype {
         //if sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdktype == "" {
         logger.Info("----------Sdktype:yitusoutu")
         logger.Info("分发的主题:", sendTopic, "!Sdktype:", sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdktype)
      }
      // if "Yolo" != sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdktype &&
      //    "FaceDetect" != sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdktype &&
      //    "FaceCompare" != sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdktype {
      //    //if sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdktype == "" {
      //    logger.Info("----------Sdktype:yitusoutu")
      //    logger.Info("分发的主题:", sendTopic, "!Sdktype:", sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdktype)
      // }
   } else {
      sendTopic = "es"
   }
@@ -216,25 +181,29 @@
   for {
      select {
      case <-socket.Context.Done():
         socket.Sock.Close()
         logger.Info("socket close")
         return
      default:
         if msg, err := socket.Sock.Recv(); err != nil {
            tryCount++
            socket = util.MaybeRestartSocket(socket, &tryCount)
            // if socket.UseSHM {
            //    if tryCount > util.SHMMaxTryCount {
            //       socket.Sock.Close()
            //       socket, err = util.NewSocketListen(socket.Mode, socket.URL, socket.UseSHM)
            //       logger.Info("SDK SEND SHM TRY :", util.SHMMaxTryCount, " RESTART IT")
            //       tryCount = 0
            //       continue
            //    }
            //    tryCount++
            // }
            // tryCount++
            // socket = util.MaybeRestartSocket(socket, &tryCount)
            if socket.UseSHM {
               if tryCount > util.ShmMaxTryCount {
                  socket.Sock.Close()
                  socket, err = util.NewSocketListen(socket.Mode, socket.URL, socket.UseSHM)
                  // logger.Info("SDK SEND SHM TRY :", util.ShmMaxTryCount, " RESTART IT")
                  tryCount = 0
                  continue
               }
               tryCount++
            }
            continue
         } else {
            err = proto.Unmarshal(msg, &repsdkmsg)
            if err != nil {
               logger.Error("unmarshal error: ", err)
@@ -243,10 +212,8 @@
            repsdkmsg.Tasklab.Index++
            //调用计算函数, 分发给下一个主题
            nexttopic := GetSdkSendTopic(repsdkmsg)
            if "facedetect-sdk-no-track" == nexttopic || "virtual-faceextract-sdk-pull" == nexttopic {
               logger.Info("nexttopic:", nexttopic)
            }
            SdkMap[nexttopic] <- repsdkmsg
            logger.Info("recv from URL: ", socket.URL, " success: ", len(msg), " send to: ", repsdkmsg)
         }
      }
   }
@@ -259,6 +226,8 @@
   for {
      select {
      case <-socket.Context.Done():
         socket.Sock.Close()
         logger.Info("socket is close")
         return
      case v, ok := <-in:
@@ -270,29 +239,26 @@
            }
            if err := socket.Sock.Send(data); err != nil {
               if "facedetect-sdk-no-track" == sdkid || "virtual-faceextract-sdk-pull" == sdkid {
                  logger.Error("failed send:sdkid=", sdkid)
               // tryCount++
               // socket = util.MaybeRestartSocket(socket, &tryCount)
               if socket.UseSHM {
                  if tryCount > util.ShmMaxTryCount {
                     socket.Sock.Close()
                     socket, err = util.NewSocketListen(socket.Mode, socket.URL, socket.UseSHM)
                     // logger.Info("SDK SEND SHM TRY :", util.ShmMaxTryCount, " RESTART IT")
                     tryCount = 0
                     continue
                  }
                  tryCount++
               }
               tryCount++
               socket = util.MaybeRestartSocket(socket, &tryCount)
               // if socket.UseSHM {
               //    if tryCount > util.SHMMaxTryCount {
               //       socket.Sock.Close()
               //       socket, err = util.NewSocketListen(socket.Mode, socket.URL, socket.UseSHM)
               //       logger.Info("SDK SEND SHM TRY :", util.SHMMaxTryCount, " RESTART IT")
               //       tryCount = 0
               //       continue
               //    }
               //    tryCount++
               // }
               continue
            }
            if "facedetect-sdk-no-track" == sdkid || "virtual-faceextract-sdk-pull" == sdkid {
               logger.Info(sdkid, " send success: ", len(data))
            }
            logger.Info("send to sdk id: ", sdkid, " success: ", len(data))
         } else {
            logger.Debug(sdkid, " 主题关闭, 关闭send()")
            return