by 192.168.1.124

龙赣华

2019-06-05 d7ee5b3444e7681cfb4574681d54156e148c34da

 sdk/sdk.go

@@ -5,17 +5,23 @@
   "errors"
   "fmt"

   "github.com/long/test/httpclient"
   "github.com/long/test/protomsg"
   //   "github.com/long/test/httpclient"
   "github.com/long/test/tasktag"
   "github.com/long/test/util"

   "github.com/golang/protobuf/proto"
   "github.com/long/test/deliver"

   "basic.com/pubsub/protomsg.git"
   "basic.com/valib/deliver.git"
)

//var doOnce sync.Once
const (
   postPull = "_1.ipc"
   postPush = "_2.ipc"
)

var SocketManage = make(map[string]SocketContext)
var SdkMap = make(map[string]chan *protomsg.SdkMessage)

type SocketContext struct {
   Sock    deliver.Deliver
@@ -25,68 +31,103 @@

func Init() {

   sdklist := SdkAll() //获取所有sdk
   fmt.Println("sdk list have: ", sdklist)

   SdkCreateTopic(sdklist) // 创建主题

   for _, sdkid := range sdklist { // 创建sdk server
      url := fmt.Sprintf("%s%d", "tcp://192.168.1.124:", UrlPort)
      sdkid, socket, err := NewSdkSocketListen(deliver.PushPull, sdkid, url)
      if err != nil {
         continue
      }
      go Send(sdkid, socket, SdkMap[sdkid])
      //break
      //   Recv(socket)
   fmt.Println("============= init sdk info =====================")
   for _, sdkid := range util.Sdklist { // 创建sdk server
      CreatesdkTopicandServer(sdkid)
      fmt.Println()
   }

   SdkMap["es"] = make(chan *protomsg.SdkMessage)
   fmt.Println("create es channel:  ")
   go es(SdkMap["es"])
   go AutoDelSdk(util.Sdkflag)
}

func CreatesdkTopicandServer(sdkid string) {
   SdkMap[sdkid] = make(chan *protomsg.SdkMessage)
   fmt.Println("create sdk channel:  ", sdkid)

   url := fmt.Sprintf("ipc:///tmp/%s%s", sdkid, postPull)
   sdkidser, socketser, err := NewSdkSocketListen(deliver.PushPull, sdkid, url)
   if err != nil {
      delete(SdkMap, sdkid)
      fmt.Println(sdkid, "create server error!")
      return
   }
   go Send(sdkidser, socketser, SdkMap[sdkid])

   url = fmt.Sprintf("ipc:///tmp/%s%s", sdkid, postPush)
   _, socketdial, err := NewSdkSocketListen(deliver.PushPull, sdkid, url)
   if err != nil {
      delete(SdkMap, sdkid)
      fmt.Println(sdkid, "create dial error!")
      return
   }
   go Recv(socketdial)

}
func DeletesdkTopicandServer(sdkid string) {
   close(SdkMap[sdkid])
   delete(SdkMap, sdkid)
   fmt.Println("删除主题 sdk: ", sdkid)

   SocketManage[sdkid].Cancel()
   delete(SocketManage, sdkid)
   fmt.Println("删除server sdk: ", sdkid)
}

//单独处理   es 主题的情况
func es(sdkmsgchan chan *protomsg.SdkMessage) {
   for data := range sdkmsgchan {
      fmt.Println("this data is finish all sdk! ", data)
   for _ = range sdkmsgchan {
      fmt.Println("this data is finish all sdk! ")
   }

}

//动态处理
func AutoDelSdk(Newsdklist []string) {
   var oldSdk []string
   for key, _ := range SdkMap {
      oldSdk = append(oldSdk, key)
   }
   sdkChanDel := util.Difference(oldSdk, Newsdklist)
func AutoDelSdk(sdkflag chan bool) {

   for key, op := range sdkChanDel {
      if op == "add" {
         SdkMap[key] = make(chan *protomsg.SdkMessage)
         fmt.Println("创建主题 sdk: ", key)
      } else {
         close(SdkMap[key])
         delete(SdkMap, key)
         fmt.Println("删除主题 sdk: ", key)
   for _ = range sdkflag {
      fmt.Println("test autodelsdk")
      var oldSdk []string
      for key, _ := range SdkMap {
         oldSdk = append(oldSdk, key)
      }
      util.Sdklist = append(util.Sdklist, "es")
      sdkChanDel := util.Difference(oldSdk, util.Sdklist)
      fmt.Println(sdkChanDel)

      for key, op := range sdkChanDel {
         if op == "add" {
            CreatesdkTopicandServer(key)
         } else {
            DeletesdkTopicandServer(key)
            fmt.Println("删除主题 sdk: ", key)
         }
      }
   }
}

//主题
var SdkMap = make(map[string]chan *protomsg.SdkMessage)

//sdk数据 加工器
func SdkData(cid string, taskid string, data []byte) *protomsg.SdkMessage {
   var sdkmsg = &protomsg.SdkMessage{}
   sdkmsg.Cid = cid
   if _, ok := tasktag.TaskMapLab[taskid]; !ok {
   //if _, ok := tasktag.TaskMapLab[taskid]; !ok {
   //   sdkmsg.Tasklab = nil
   //   return sdkmsg
   //}

   if val, ok := tasktag.TaskMapLab.Load(taskid); ok {
      sdkmsg.Tasklab = nil
      return sdkmsg
   }

   sdkmsg.Tasklab = tasktag.TaskMapLab[taskid]
   sdkmsg.Data = data
   } else {

      sdkmsg.Tasklab = val.(*protomsg.TaskLabel)
      sdkmsg.Data = data
   }
   //sdkmsg.Tasklab = tasktag.TaskMapLab[taskid]
   return sdkmsg
}

@@ -97,32 +138,9 @@
   } else {
      sdksend = "es"
   }
   fmt.Println()
   fmt.Println("分发的主题是： ", sdksend)
   fmt.Println()
   return
}

// 调用  http 借口获取摄像机信息
func SdkAll() (sdklist []string) {
   sdklist = httpclient.GetSdk("http://127.0.0.1:8000/data/api-v/sdk/findskdid")
   return
}

// 创建主题
func SdkCreateTopic(sdklist []string) (err error) {
   for _, sdkid := range sdklist {
      SdkMap[sdkid] = make(chan *protomsg.SdkMessage)
      fmt.Println("create sdk channel:  ", sdkid)
   }

   SdkMap["es"] = make(chan *protomsg.SdkMessage)
   fmt.Println("create es channel:  ")

   return nil
}

var UrlPort = 9000

// create server
func NewSdkSocketListen(mode int, sdkid string, url string) (sid string, socket SocketContext, err error) {
@@ -133,19 +151,33 @@
   socket.Cancel = cancel

   socket.Sock = deliver.NewServer(deliver.Mode(mode), url)
   fmt.Println(sdkid, socket.Sock)

   if socket.Sock == nil {
      return sdkid, socket, errors.New("create listen error")
   }

   SocketManage[sdkid] = socket
   UrlPort++
   return sdkid, socket, nil
}

func NewSdkSocketDial(mode int, sdkid string, url string) (sid string, socket SocketContext, err error) {
   fmt.Println("url is: ", url)
   ctx, cancel := context.WithCancel(context.Background())

   socket.Context = ctx
   socket.Cancel = cancel

   socket.Sock = deliver.NewClient(deliver.Mode(mode), url)

   if socket.Sock == nil {
      return sdkid, socket, errors.New("create listen error")
   }

   SocketManage[sdkid] = socket
   return sdkid, socket, nil
}

func Recv(socket SocketContext) {
   //socket.Sock.SetOption(mangos.OptionRecvDeadline, 1*time.Second)

   var repsdkmsg = &protomsg.SdkMessage{}
   for {
@@ -159,6 +191,7 @@
            continue
         } else {
            err = proto.Unmarshal(msg, repsdkmsg)
            fmt.Println("receive len: ", len(msg))
            if err != nil {
               fmt.Println("unmarshal error: ", err)
               continue
@@ -173,28 +206,35 @@

func Send(sdkid string, socket SocketContext, in chan *protomsg.SdkMessage) {
   var v *protomsg.SdkMessage
   var ok bool

   for {
      select {
      case <-socket.Context.Done():
         fmt.Println("socket is close")
      case v = <-in:
         data, err := proto.Marshal(v)
         if err != nil {
            fmt.Println("proto marshal error ", err)
         }
         fmt.Printf("从管道sdkid=%s 接受数据 %d\n", sdkid, len(data))
         fmt.Println()
         return
      case v, ok = <-in:
         if ok {
            data, err := proto.Marshal(v)
            if err != nil {
               fmt.Println("proto marshal error ", err)
               continue
            }
            fmt.Printf("从管道sdkid=%s 接受数据 %d\n", sdkid, len(data))
            fmt.Println()

         fmt.Println("send len of data: ", len(data))
         if err := socket.Sock.Send(data); err != nil {
            fmt.Println("failed send")
            fmt.Println("send len of data: ", len(data))
            if err := socket.Sock.Send(data); err != nil {
               fmt.Println(socket.Sock)
               fmt.Println("failed send")
               continue
            }
            fmt.Printf("sdkid = %s ,send success:%d \n", sdkid, len(data))
         } else {
            fmt.Println(sdkid, " 主题关闭, 关闭send()")
            return
         }
         fmt.Printf("sdkid = %s ,send success:%d \n", sdkid, len(data))
         //   go func(sock SocketContext) {
         //      doOnce.Do(func() { Recv(sock) })

         //   }(socket)
      }
   }
}