554325746@qq.com
2019-06-27 6fd3413cfa70086864216c59718f7f4fc58b1acc
sdk/sdk.go
@@ -8,8 +8,7 @@
   //   "github.com/long/test/httpclient"
   "github.com/long/test/tasktag"
   "github.com/long/test/util"
   "github.com/golang/protobuf/proto"
    "github.com/gogo/protobuf/proto"
   "basic.com/pubsub/protomsg.git"
   "basic.com/valib/deliver.git"
@@ -21,7 +20,7 @@
)
var SocketManage = make(map[string]SocketContext)
var SdkMap = make(map[string]chan *protomsg.SdkMessage)
var SdkMap = make(map[string]chan protomsg.SdkMessage)
type SocketContext struct {
   Sock    deliver.Deliver
@@ -37,35 +36,57 @@
      fmt.Println()
   }
   SdkMap["es"] = make(chan *protomsg.SdkMessage)
   fmt.Println("create es channel:  ")
   go es(SdkMap["es"])
    // 手动输入的主题
   SdkMap["es"] = make(chan protomsg.SdkMessage)
   fmt.Println("create es channel: ")
    SdkMap["virtual-faceextract-sdk-pull"] = make(chan protomsg.SdkMessage)
   fmt.Println("create virtual-faceextract-sdk-pull")
    Createwebserver("virtual-faceextract-sdk-pull")
   go Dealextern()
   go AutoDelSdk(util.Sdkflag)
}
func CreatesdkTopicandServer(sdkid string) {
   SdkMap[sdkid] = make(chan *protomsg.SdkMessage)
   SdkMap[sdkid] = make(chan protomsg.SdkMessage)
   fmt.Println("create sdk channel:  ", sdkid)
   url := fmt.Sprintf("ipc:///tmp/%s%s", sdkid, postPull)
   sdkidser, socketser, err := NewSdkSocketListen(deliver.PushPull, sdkid, url)
   socketser, err := NewSdkSocketListen(deliver.PushPull, sdkid, url)
   if err != nil {
      delete(SdkMap, sdkid)
        delete(SdkMap, sdkid)
      fmt.Println(sdkid, "create server error!")
      return
   }
   go Send(sdkidser, socketser, SdkMap[sdkid])
   go Send(sdkid, socketser, SdkMap[sdkid])
   url = fmt.Sprintf("ipc:///tmp/%s%s", sdkid, postPush)
   _, socketdial, err := NewSdkSocketListen(deliver.PushPull, sdkid, url)
   socketdial, err := NewSdkSocketListen(deliver.PushPull, sdkid, url)
   if err != nil {
      delete(SdkMap, sdkid)
        delete(SdkMap, sdkid)
      fmt.Println(sdkid, "create dial error!")
      return
   }
   go Recv(socketdial)
}
// web 接受端处理
func Createwebserver(webid string ){
    url := fmt.Sprintf("ipc:///tmp/%s%s", webid, postPull)
   socketser, err := NewSdkSocketListen(deliver.PushPull, webid, url)
   if err != nil {
      fmt.Println(webid, "create server error!")
      return
   }
   go Send(webid, socketser, SdkMap[webid])
}
func DeletesdkTopicandServer(sdkid string) {
   close(SdkMap[sdkid])
   delete(SdkMap, sdkid)
@@ -77,10 +98,13 @@
}
//单独处理   es 主题的情况
func es(sdkmsgchan chan *protomsg.SdkMessage) {
   for _ = range sdkmsgchan {
      fmt.Println("this data is finish all sdk! ")
   }
func Dealextern() {
    for {
        select {
            case esmsg:= <-SdkMap["es"]:
                fmt.Println(esmsg)
        }
    }
}
//动态处理
@@ -93,6 +117,7 @@
         oldSdk = append(oldSdk, key)
      }
      util.Sdklist = append(util.Sdklist, "es")
      util.Sdklist = append(util.Sdklist, "virtual-faceextract-sdk-pull")
      sdkChanDel := util.Difference(oldSdk, util.Sdklist)
      fmt.Println(sdkChanDel)
@@ -110,14 +135,10 @@
//主题
//sdk数据 加工器
func SdkData(cid string, taskid string, data []byte) *protomsg.SdkMessage {
   var sdkmsg = &protomsg.SdkMessage{}
func SdkData(cid string,caddr string, taskid string, data []byte) protomsg.SdkMessage {
   var sdkmsg = protomsg.SdkMessage{}
   sdkmsg.Cid = cid
   //if _, ok := tasktag.TaskMapLab[taskid]; !ok {
   //   sdkmsg.Tasklab = nil
   //   return sdkmsg
   //}
    sdkmsg.Caddr =caddr
   if val, ok := tasktag.TaskMapLab.Load(taskid); !ok {
      sdkmsg.Tasklab = nil
      return sdkmsg
@@ -132,18 +153,18 @@
}
//sdk数据分发器
func SdkSendTopic(sdkmsg *protomsg.SdkMessage) (sdksend string) {
   if int(sdkmsg.Tasklab.Index) < len(sdkmsg.Tasklab.Sdkids) {
      sdksend = sdkmsg.Tasklab.Sdkids[sdkmsg.Tasklab.Index]
func SdkSendTopic(sdkmsg protomsg.SdkMessage) (sdksend string) {
   if int(sdkmsg.Tasklab.Index) < len(sdkmsg.Tasklab.Sdkinfos) {
      sdksend = sdkmsg.Tasklab.Sdkinfos[sdkmsg.Tasklab.Index].Sdkid
   } else {
      sdksend = "es"
   }
   fmt.Println("分发的主题是: ", sdksend)
   fmt.Printf("分发的主题是:%s 位置 %d/%d\n ", sdksend, int(sdkmsg.Tasklab.Index)+1, len(sdkmsg.Tasklab.Sdkinfos))
   return
}
// create server
func NewSdkSocketListen(mode int, sdkid string, url string) (sid string, socket SocketContext, err error) {
func NewSdkSocketListen(mode int, sdkid string, url string) (socket SocketContext, err error) {
   fmt.Println("url is: ", url)
   ctx, cancel := context.WithCancel(context.Background())
@@ -153,11 +174,11 @@
   socket.Sock = deliver.NewServer(deliver.Mode(mode), url)
   if socket.Sock == nil {
      return sdkid, socket, errors.New("create listen error")
      return socket, errors.New("create listen error")
   }
   SocketManage[sdkid] = socket
   return sdkid, socket, nil
   return socket, nil
}
func NewSdkSocketDial(mode int, sdkid string, url string) (sid string, socket SocketContext, err error) {
@@ -178,8 +199,7 @@
}
func Recv(socket SocketContext) {
   var repsdkmsg = &protomsg.SdkMessage{}
   var repsdkmsg = protomsg.SdkMessage{}
   for {
      select {
      case <-socket.Context.Done():
@@ -190,40 +210,40 @@
            //fmt.Printf("%s ", err)
            continue
         } else {
            err = proto.Unmarshal(msg, repsdkmsg)
            err = proto.Unmarshal(msg, &repsdkmsg)
            fmt.Println("receive len: ", len(msg))
            if err != nil {
               fmt.Println("unmarshal error: ", err)
               continue
            }
            //调用计算函数, 分发给下一个主题
            nexttopic := SdkSendTopic(repsdkmsg)
            SdkMap[nexttopic] <- repsdkmsg
             }
                repsdkmsg.Tasklab.Index++
                //调用计算函数, 分发给下一个主题
                nexttopic := SdkSendTopic(repsdkmsg)
                SdkMap[nexttopic] <- repsdkmsg
         }
      }
   }
}
func Send(sdkid string, socket SocketContext, in chan *protomsg.SdkMessage) {
   var v *protomsg.SdkMessage
   var ok bool
func Send(sdkid string, socket SocketContext, in chan protomsg.SdkMessage) {
//   var v *protomsg.SdkMessage
//   var ok bool
   for {
      select {
      case <-socket.Context.Done():
         fmt.Println("socket is close")
         return
      case v, ok = <-in:
        case v, ok := <-in:
         if ok {
            data, err := proto.Marshal(v)
            data, err :=v.Marshal()
            if err != nil {
               fmt.Println("proto marshal error ", err)
               continue
            }
            fmt.Printf("从管道sdkid=%s 接受数据 %d\n", sdkid, len(data))
            fmt.Println()
            fmt.Println("send len of data: ", len(data))
            if err := socket.Sock.Send(data); err != nil {
               fmt.Println(socket.Sock)
               fmt.Println("failed send")
@@ -234,7 +254,7 @@
            fmt.Println(sdkid, " 主题关闭, 关闭send()")
            return
         }
      }
   }
}
}