554325746@qq.com
2019-07-22 40d864645ff608e3a81d115fef26bba87954be2c
sdk/sdk.go
@@ -12,6 +12,7 @@
   "basic.com/pubsub/protomsg.git"
   "basic.com/valib/deliver.git"
    "github.com/long/test/logger"
)
const (
@@ -30,18 +31,18 @@
func Init() {
   fmt.Println("============= init sdk info =====================")
   logger.Info("============= init sdk info =====================")
   for _, sdkid := range util.Sdklist { // 创建sdk server
      CreatesdkTopicandServer(sdkid)
      fmt.Println()
      logger.Info()
   }
    // 手动输入的主题
   SdkMap["es"] = make(chan protomsg.SdkMessage)
   fmt.Println("create es channel: ")
   logger.Info("create es channel: ")
    SdkMap["virtual-faceextract-sdk-pull"] = make(chan protomsg.SdkMessage)
   fmt.Println("create virtual-faceextract-sdk-pull")
   logger.Info("create virtual-faceextract-sdk-pull")
    Createwebserver("virtual-faceextract-sdk-pull")
@@ -52,13 +53,13 @@
func CreatesdkTopicandServer(sdkid string) {
   SdkMap[sdkid] = make(chan protomsg.SdkMessage)
   fmt.Println("create sdk channel:  ", sdkid)
   logger.Info("create sdk channel:  ", sdkid)
   url := fmt.Sprintf("ipc:///tmp/%s%s", sdkid, postPull)
   socketser, err := NewSdkSocketListen(deliver.PushPull, sdkid, url)
   if err != nil {
        delete(SdkMap, sdkid)
      fmt.Println(sdkid, "create server error!")
      logger.Error(sdkid, "create server error!")
      return
   }
@@ -69,7 +70,7 @@
   socketdial, err := NewSdkSocketListen(deliver.PushPull, sdkid, url)
   if err != nil {
        delete(SdkMap, sdkid)
      fmt.Println(sdkid, "create dial error!")
      logger.Error(sdkid, "create dial error!")
      return
   }
   go Recv(socketdial)
@@ -81,7 +82,7 @@
    url := fmt.Sprintf("ipc:///tmp/%s%s", webid, postPull)
   socketser, err := NewSdkSocketListen(deliver.PushPull, webid, url)
   if err != nil {
      fmt.Println(webid, "create server error!")
      logger.Error(webid, "create server error!")
      return
   }
   go Send(webid, socketser, SdkMap[webid])
@@ -90,11 +91,11 @@
func DeletesdkTopicandServer(sdkid string) {
   close(SdkMap[sdkid])
   delete(SdkMap, sdkid)
   fmt.Println("删除主题 sdk: ", sdkid)
   logger.Info("删除主题 sdk: ", sdkid)
   SocketManage[sdkid].Cancel()
   delete(SocketManage, sdkid)
   fmt.Println("删除server sdk: ", sdkid)
   logger.Info("删除server sdk: ", sdkid)
}
//单独处理   es 主题的情况
@@ -102,7 +103,7 @@
    for {
        select {
            case <-SdkMap["es"]:
                fmt.Println("es finanl sdk!")
                //logger.Info("es finanl sdk!")
        }
    }
}
@@ -111,7 +112,7 @@
func AutoDelSdk(sdkflag chan bool) {
   for _ = range sdkflag {
      fmt.Println("test autodelsdk")
      logger.Info("test autodelsdk")
      var oldSdk []string
      for key, _ := range SdkMap {
         oldSdk = append(oldSdk, key)
@@ -119,20 +120,19 @@
      util.Sdklist = append(util.Sdklist, "es")
      util.Sdklist = append(util.Sdklist, "virtual-faceextract-sdk-pull")
      sdkChanDel := util.Difference(oldSdk, util.Sdklist)
      fmt.Println(sdkChanDel)
      logger.Info(sdkChanDel)
      for key, op := range sdkChanDel {
         if op == "add" {
            CreatesdkTopicandServer(key)
         } else {
            DeletesdkTopicandServer(key)
            fmt.Println("删除主题 sdk: ", key)
            logger.Info("删除主题 sdk: ", key)
         }
      }
   }
}
//主题
//sdk数据 加工器
func SdkData(cid string,caddr string, taskid string, data []byte) protomsg.SdkMessage {
@@ -148,29 +148,27 @@
      sdkmsg.Tasklab = val.(*protomsg.TaskLabel)
      sdkmsg.Data = data
   }
   //sdkmsg.Tasklab = tasktag.TaskMapLab[taskid]
   return sdkmsg
}
//sdk数据分发器
func SdkSendTopic(sdkmsg protomsg.SdkMessage) (sdksend string) {
   if int(sdkmsg.Tasklab.Index) < len(sdkmsg.Tasklab.Sdkinfos) {
      sdksend = sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdkid
      sdksend = sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Ipcid
   } else {
      sdksend = "es"
   }
   fmt.Printf("分发的主题是:%s 位置 %d/%d\n ", sdksend, int(sdkmsg.Tasklab.Index)+1, len(sdkmsg.Tasklab.Sdkinfos))
    logger.Debug("分发的主题: ", sdksend , "位置:", int(sdkmsg.Tasklab.Index)+1,"/",  len(sdkmsg.Tasklab.Sdkinfos))
   return
}
// create server
func NewSdkSocketListen(mode int, sdkid string, url string) (socket SocketContext, err error) {
   fmt.Println("url is: ", url)
   logger.Info("url is: ", url)
   ctx, cancel := context.WithCancel(context.Background())
   socket.Context = ctx
   socket.Cancel = cancel
   socket.Sock = deliver.NewServer(deliver.Mode(mode), url)
   if socket.Sock == nil {
@@ -182,7 +180,7 @@
}
func NewSdkSocketDial(mode int, sdkid string, url string) (sid string, socket SocketContext, err error) {
   fmt.Println("url is: ", url)
   logger.Info("url is: ", url)
   ctx, cancel := context.WithCancel(context.Background())
   socket.Context = ctx
@@ -203,17 +201,15 @@
   for {
      select {
      case <-socket.Context.Done():
         fmt.Println("socket close")
         logger.Info("socket close")
         return
      default:
         if msg, err := socket.Sock.Recv(); err != nil {
            //fmt.Printf("%s ", err)
            continue
         } else {
            err = proto.Unmarshal(msg, &repsdkmsg)
            fmt.Println("receive len: ", len(msg))
            if err != nil {
               fmt.Println("unmarshal error: ", err)
               logger.Error("unmarshal error: ", err)
               continue
             }
                repsdkmsg.Tasklab.Index++
@@ -226,33 +222,27 @@
}
func Send(sdkid string, socket SocketContext, in chan protomsg.SdkMessage) {
//   var v *protomsg.SdkMessage
//   var ok bool
   for {
      select {
      case <-socket.Context.Done():
         fmt.Println("socket is close")
         logger.Info("socket is close")
         return
        case v, ok := <-in:
         if ok {
            data, err :=v.Marshal()
            if err != nil {
               fmt.Println("proto marshal error ", err)
               logger.Error("proto marshal error ", err)
               continue
                }
            
            fmt.Printf("从管道sdkid=%s 接受数据 %d\n", sdkid, len(data))
            fmt.Println()
            if err := socket.Sock.Send(data); err != nil {
               fmt.Println(socket.Sock)
               fmt.Println("failed send")
               logger.Error("failed send")
               continue
            }
            fmt.Printf("sdkid = %s ,send success:%d \n", sdkid, len(data))
                logger.Debug(sdkid, " send success: ", len(data))
         } else {
            fmt.Println(sdkid, " 主题关闭, 关闭send()")
            logger.Debug(sdkid, " 主题关闭, 关闭send()")
            return
         }
      }