panlei
2019-07-09 9bb6f2ddbdcc3c06799dd7beb2e19861f982d9d4
main.go
@@ -1,40 +1,58 @@
package main
import (
   "basic.com/dbapi.git"
   "basic.com/pubsub/protomsg.git"
   "basic.com/valib/deliver.git"
   "bufio"
   "bytes"
   "encoding/json"
   "errors"
   "flag"
   "fmt"
   "ruleprocess/logger"
   "github.com/golang/protobuf/proto"
   "gocv.io/x/gocv"
   "image"
   "image/color"
   "io"
   "log"
   "mime/multipart"
   "net/http"
   "os"
   "ruleprocess/insertdata"
   "ruleprocess/cache"
   "ruleprocess/ruleserver"
   "ruleprocess/util"
   "time"
   "basic.com/pubsub/protomsg.git"
   "basic.com/valib/deliver.git"
   "github.com/golang/protobuf/proto"
   "ruleprocess/insertdata"
   "sync"
)
var dbIp = flag.String("dbIp","127.0.0.1","dbserver ip")
var dbPort = flag.Int("dbPort",8001,"default dbPort=8001")
var surveyPort = flag.Int("surveyPort",40007,"survey port") //心跳
var pubPort = flag.Int("pubPort",50007,"pubsub port") //数据更新
var initchan = make(chan bool)
func init () {
   var logFile = "./info.log"
   var logSaveDays   =   15
   // 日志初始化
   logger.Config(logFile, logger.DebugLevel)
   logger.SetSaveDays(logSaveDays)
   logger.Info("loginit success !")
}
func main() {
   //wg := sync.WaitGroup{}
   //wg.Add(1)
   //go ruleserver.TimeTicker()
   //nReciever("ipc:///tmp/sdk-2-rules-process.ipc", deliver.PushPull, 1)
   //wg.Wait()
   resp,err := DrawPolygonOnImage()
   if err != nil {
      log.Println("画框或者上传有问题")
   }
   log.Println(resp["fileUrl"].(string))
   flag.Parse()
   wg := sync.WaitGroup{}
   wg.Add(2)
   dbapi.Init(*dbIp,*dbPort)
   go cache.Init(initchan,*dbIp,*surveyPort,*pubPort)
   logger.Info("cache init completed!!!",<- initchan)//dbserver初始化完毕
   //fmt.Println("缓存初始化完成",<- initchan)//dbserver初始化完毕
   go ruleserver.TimeTicker()
   nReciever("ipc:///tmp/sdk-2-rules-process.ipc", deliver.PushPull, 1)
   wg.Wait()
   //resp,err := DrawPolygonOnImage()
   //if err != nil {
   //   logger.Println("画框或者上传有问题")
   //}
   //logger.Println(resp["fileUrl"].(string))
}
func nReciever(url string, m deliver.Mode, count int) {
   c := deliver.NewServer(m, url)
@@ -53,16 +71,17 @@
      default:
         msg, err = c.Recv()
         if err != nil {
            logger.Info("recv error : ", err)
            fmt.Println("recv error : ", err)
            continue
         } else {
            arg := ruleserver.SdkDatas{}
            m := paramFormat(msg, &arg)
            fmt.Println("解析出来的数据:", arg)
            logger.Info("解析出来的数据:", arg)
            ruleserver.Judge(&arg)
            // 把arg里的打的标签拿出来给m再封装一层
            resultMag := ruleserver.ResultMsg{SdkMessage: m, RuleResult: arg.RuleResult}
            //fmt.Println("打完标签后的结果:",resultMag)
            //logger.Info("打完标签后的结果:",resultMag)
            // 将打完标签的数据插入到ES
            insertdata.InsertToEs(resultMag)
@@ -85,7 +104,7 @@
func paramFormat(msg []byte, args *ruleserver.SdkDatas) protomsg.SdkMessage {
   defer func() {
      if err := recover(); err != nil {
         fmt.Println("解包过程的错误", err.(string))
         logger.Info("解包过程的错误", err.(string))
      }
   }()
@@ -103,7 +122,7 @@
   }
   i := protomsg.Image{}
   err = proto.Unmarshal(bdata, &i)
   //logger.Info("----------------看看有几个算法:",len(m.Tasklab.Sdkinfos))
   for _, sdkinfo := range m.Tasklab.Sdkinfos { // yolo算法
      if sdkinfo.Sdktype == "Yolo" {
         arg := ruleserver.SdkData{}
@@ -124,13 +143,13 @@
         arg.IsStatic = false
         if len(sdkinfo.Sdkdata) > 1 {
            // 大于1才有数据
            fmt.Println("----------------------------------------------------",m.Cid)
            yoloParam := protomsg.ParamYoloObj{}
            err = proto.Unmarshal(sdkinfo.Sdkdata, &yoloParam)
            if err != nil {
               fmt.Println("解析YOLO sdk数据时出现错误", err)
               logger.Info("解析YOLO sdk数据时出现错误", err)
               continue
            }
            logger.Info("------当前算法name",sdkinfo.SdkName,"--------------看看yolo中有几个目标:",len(yoloParam.Infos))
            for _, info := range yoloParam.Infos {
               if info.Typ == 0 {
                  photoMap := ruleserver.PhotoMap{Rects: rectFormat(info.RcObj), Score: float64(info.Prob)*100,IsYolo:true}
@@ -161,15 +180,15 @@
         arg.KeepRight = false
         arg.IsStatic = false
         if len(sdkinfo.Sdkdata) > 1 {
            fmt.Println("----------------------------------------------------",m.Caddr)
            faceParam := protomsg.ParamFacePos{}
            err = proto.Unmarshal(sdkinfo.Sdkdata, &faceParam)
            if err != nil {
               fmt.Println("解析FACE sdk数据时出现错误", err)
               logger.Info("解析FACE sdk数据时出现错误", err)
               continue
            }
            logger.Info("------当前算法name",sdkinfo.SdkName,"--------------看看人脸检测中有几个目标:",len(faceParam.Faces))
            for _, info := range faceParam.Faces {
               photoMap := ruleserver.PhotoMap{Rects: rectFormat(info.Pos.RcFace), Score: float64(info.Pos.Quality)*100, IsYolo:false,ThftRes:*(info.Result)}
               photoMap := ruleserver.PhotoMap{Rects: rectFormat(info.Pos.RcFace), Score: float64(info.Pos.Quality)*100, IsYolo:false,ThftRes:*(info.Result),Feature:info.Feats}
               arg.Photo = append(arg.Photo, photoMap)
            }
            args.Sdkdata = append(args.Sdkdata,&arg)
@@ -177,46 +196,55 @@
            continue
         }
      }
      if sdkinfo.Sdktype == "FaceExtract" { // 人脸提取
         arg := ruleserver.SdkData{}
         arg.TaskId = m.Tasklab.Taskid
         arg.SdkId = sdkinfo.Sdkid
         arg.SdkName = sdkinfo.SdkName
         arg.IsYolo = false
         bdata, err := util.UnCompress(m.Data)
         if err != nil {
            panic("解压缩图片时出现错误")
         }
         i := protomsg.Image{}
         err = proto.Unmarshal(bdata, &i)
         arg.ImageWidth = int(i.Width)
         arg.ImageHeight = int(i.Height)
         // 暂时写死,sdk还没有这俩算法
         arg.KeepRight = false
         arg.IsStatic = false
         if len(sdkinfo.Sdkdata) > 1 {
            fmt.Println("----------------------------------------------------",m.Caddr)
            faceParam := protomsg.ParamFaceFeature{}
            err = proto.Unmarshal(sdkinfo.Sdkdata, &faceParam)
            if err != nil {
               fmt.Println("解析FACE sdk数据时出现错误", err)
               continue
            }
            for _, extComp := range faceParam.ExtComp {
               baseinfos := protomsg.Binfos{}
               err1 := proto.Unmarshal(extComp.Comp, &baseinfos)
               if err1 != nil {
                  fmt.Println("解析FACE sdk数据时出现错误", err)
                  continue
               }
               photoMap := ruleserver.PhotoMap{Rects: rectFormat(extComp.Pos.Pos.RcFace), Score: float64(extComp.Pos.Pos.Quality)*100, IsYolo:false,ThftRes:*(extComp.Pos.Result),Liker:baseinfos.Infos}
               arg.Photo = append(arg.Photo, photoMap)
            }
            args.Sdkdata = append(args.Sdkdata,&arg)
         } else {
            continue
         }
      }
      //if sdkinfo.Sdktype == "FaceExtract" { // 人脸提取
      //   arg := ruleserver.SdkData{}
      //   arg.TaskId = m.Tasklab.Taskid
      //   arg.SdkId = sdkinfo.Sdkid
      //   arg.SdkName = sdkinfo.SdkName
      //   arg.IsYolo = false
      //   bdata, err := util.UnCompress(m.Data)
      //   if err != nil {
      //      panic("解压缩图片时出现错误")
      //   }
      //   i := protomsg.Image{}
      //   err = proto.Unmarshal(bdata, &i)
      //   arg.ImageWidth = int(i.Width)
      //   arg.ImageHeight = int(i.Height)
      //   // 暂时写死,sdk还没有这俩算法
      //   arg.KeepRight = false
      //   arg.IsStatic = false
      //   if len(sdkinfo.Sdkdata) > 1 {
      //      faceParam := protomsg.ParamFaceFeature{}
      //      err = proto.Unmarshal(sdkinfo.Sdkdata, &faceParam)
      //      if err != nil {
      //         logger.Info("解析FACE sdk数据时出现错误", err)
      //         continue
      //      }
      //      for _,faceExtCom := range faceParam.ExtComp  {
      //         binfos := protomsg.Binfos{}
      //         err := proto.Unmarshal(faceExtCom.Comp, &binfos)
      //         if err != nil {
      //            logger.Info("解析人脸比对数据时出现错误", err)
      //            continue
      //         }
      //         logger.Info("_________________________________________________________________解析出的人脸的相似的底库数据",binfos.Infos[0].CompareScore)
      //      }
      //      logger.Info("------当前算法name",sdkinfo.SdkName,"--------------看看人脸提取中有几个目标:",len(faceParam.ExtComp))
      //      for _, extComp := range faceParam.ExtComp {
      //         baseinfos := protomsg.Binfos{}
      //         err1 := proto.Unmarshal(extComp.Comp, &baseinfos)
      //         if err1 != nil {
      //            logger.Info("解析FACE sdk数据时出现错误", err)
      //            continue
      //         }
      //         photoMap := ruleserver.PhotoMap{Rects: rectFormat(extComp.Pos.Pos.RcFace), Score: float64(extComp.Pos.Pos.Quality)*100, IsYolo:false,ThftRes:*(extComp.Pos.Result),Liker:baseinfos.Infos}
      //         arg.Photo = append(arg.Photo, photoMap)
      //      }
      //      args.Sdkdata = append(args.Sdkdata,&arg)
      //   } else {
      //      continue
      //   }
      //}
   }
   return m
@@ -228,7 +256,7 @@
   //imgs := gocv.NewMat()
   ddd, err := RetrieveROM("./105.jpg")
   if err != nil {
      fmt.Println("解码有误",err)
      logger.Info("解码有误",err)
   }
   bbb := bytes.NewBuffer(ddd)  // 必须加一个buffer 不然没有read方法就会报错
   rook, _ := gocv.NewMatFromBytes(500, 500, gocv.MatTypeCV8UC3, bbb.Bytes())
@@ -264,7 +292,7 @@
   //client := &http.Client{Timeout: timeout}
   //resp, err := client.Do(request)
   //if err != nil {
   //   log.Fatal(err)
   //   logger.Fatal(err)
   //   return nil, err
   //}
   //defer func() {
@@ -273,11 +301,11 @@
   //      msg := "上传图片服务器异常"
   //      if _, ok := r.(error); ok {
   //         msg = r.(error).Error()
   //         fmt.Println("panic--recover()得到的是error类型")
   //         logger.Info("panic--recover()得到的是error类型")
   //      }
   //      if _, ok := r.(string); ok {
   //         msg = r.(string)
   //         fmt.Println("panic--recover()得到的是string类型")
   //         logger.Info("panic--recover()得到的是string类型")
   //      }
   //      err0 = errors.New(msg)
   //   }
@@ -287,18 +315,18 @@
   //   body := &bytes.Buffer{}
   //   _, err := body.ReadFrom(resp.Body)
   //   if err != nil {
   //      log.Fatal(err)
   //      logger.Fatal(err)
   //   }
   //   fmt.Println(resp.StatusCode)
   //   //fmt.Println(resp.Header)
   //   fmt.Println(body)
   //   logger.Info(resp.StatusCode)
   //   //logger.Info(resp.Header)
   //   logger.Info(body)
   //   //decoder := json.NewDecoder(strings.NewReader(body.String()))
   //   decoder := make(map[string]interface{})
   //   if err := json.Unmarshal([]byte(body.String()), &decoder); err != nil {
   //      return nil, err
   //   }
      return nil, nil
   }
   //}
}
// 把图片转成二进制流