---
panlei
2019-08-06 52ea408f8ab6d4098a6c3b77042929fe34f10a09
insertdata/insertDataToEs.go
@@ -71,7 +71,7 @@
   AnalyServerName string                 `json:"analyServerName"`
   AnalyServerIp   string                 `json:"analyServerIp"`
   ClusterId       string                 `json:"clusterId"`
   LinkId         string               `json:"linkId"`
   LinkId          string                 `json:"linkId"`
   DetectScore     float64                `json:"detectScore"`
   IsAlarm         int                    `json:"isAlarm"`
   IsAckAlarm      int                    `json:"isAckAlarm"`
@@ -97,7 +97,7 @@
   ClusterId       string      `json:"clusterId"`
   PicSmUrl        []string    `json:"picSmUrl"`
   PicDate         string      `json:"picDate"`
   LinkId         string      `json:"linkId"`
   LinkId          string      `json:"linkId"`
   VideoUrl        string      `json:"videoUrl"`
   IsAlarm         int         `json:"isAlarm"`
   IsAckAlarm      int         `json:"isAckAlarm"`
@@ -110,6 +110,12 @@
   AlarmLevel   string `json:"alarmLevel"`
   RuleText     string `json:"ruleText"`
   DefenceState bool   `json:"defenceState"`
}
// 一个face对多个规则组的归置人脸的结构体
type FaceAndRules struct {
   ruleserver.Arg
   rules []ruleserver.Result
}
// 往ES插数据
@@ -137,19 +143,32 @@
//   //}
//}
func InsertToEs(msg ruleserver.ResultMsg) {
   InsertFace(msg,"")
   //flag := ruleserver.BodyIsSame(msg.SdkMessage)
   //if !flag {
   InsertYolo(msg,"")
   //}
   InsertFace(msg, "")
   // 如果标签中含有持续时间首次报警的timeLabel的话则不需要过人体追踪,不然就没的插入了
   fk := ruleserver.TrackOrNot(msg.RuleResult)
   if fk {
      InsertYolo(msg, "")
      //if msg.Cid == "61de081a-7ed9-4970-8432-41d642c35456" {
      //   logger.Warn("捕捉188摄像机的持续时间任务.....")
      //   os.Exit(1)
      //}
   } else {
      flag := ruleserver.BodyIsSame(msg.SdkMessage)
      if !flag {
         InsertYolo(msg, "")
      }
   }
}
// 往es中插入人脸数据
func InsertFace(msg ruleserver.ResultMsg,linkId string) {
func InsertFace(msg ruleserver.ResultMsg, linkId string) {
   if msg.RuleResult["face"] != nil && len(msg.RuleResult["face"].([]ruleserver.FaceResult)) > 0 {
      logger.Info("往ES插人脸数据")
      for _, faceResult := range msg.RuleResult["face"].([]ruleserver.FaceResult) {
         for _, face := range faceResult.Args {
      faces := []*FaceAndRules{}
      faces = PutFace(faces,msg)
      //logger.Info("整理后的数据:",faces)
      if faces != nil {
         for _,face := range faces {
            // 上传大图
            // 解压缩并上传图片
            bdata, err := util.UnCompress(msg.Data)
@@ -157,8 +176,12 @@
               panic("解压缩图片时出现错误")
            }
            alarmRules := []AlarmRule{}
            alarm := ChangeToString(faceResult.DefenceState, faceResult.AlarmLevel)
            alarmRules = append(alarmRules, AlarmRule{faceResult.RuleGroupId, alarm, faceResult.RuleText, faceResult.DefenceState})
            logger.Warn("人脸id为:",face.Id,"人脸的规则长度为:",len(face.rules))
            //os.Exit(1)
            for _,faceResult := range face.rules {
               alarm := ChangeToString(faceResult.DefenceState, faceResult.AlarmLevel)
               alarmRules = append(alarmRules, AlarmRule{faceResult.RuleGroupId, alarm, faceResult.RuleText, faceResult.DefenceState})
            }
            i := protomsg.Image{}
            err = proto.Unmarshal(bdata, &i)
            bigPhotoUrl := make(map[string]interface{})
@@ -245,87 +268,42 @@
      }
   }
}
func ChangeStatusFace(msg ruleserver.ResultMsg) {
   logger.Info("往ES插入人脸非报警但是状态转换数据")
   // 上传大图
   // 解压缩并上传图片
   bdata, err := util.UnCompress(msg.Data)
   if err != nil {
      panic("解压缩图片时出现错误")
   }
   i := protomsg.Image{}
   err = proto.Unmarshal(bdata, &i)
   bigPhotoUrl := make(map[string]interface{})
   bigPhotoUrl, err = util.PostFormBufferData(weedfsUrl, i, uuid.NewV4().String())
   logger.Debug("========大图路径:", bigPhotoUrl)
   // 人脸检测,没有相似的底库人员
   localConfig, err := cache.GetServerInfo()
   if err != nil {
      logger.Error("查询本机信息失败!")
   }
   serverIp, err := GetLocalIP()
   // 查询cameraName
   camera, err := cache.GetCameraById(msg.Cid)
   if err != nil {
      logger.Error("查询摄像机信息失败")
   }
   esDataId := uuid.NewV4().String()
   pervideo := PerVideoPicture{
      esDataId,
      msg.Cid,
      camera.Addr,
      i.Timestamp,
      strings.Split(bigPhotoUrl["fileUrl"].(string), "/")[1],
      msg.Tasklab.Taskid,
      msg.Tasklab.Taskname,
      "人脸",
      "状态转换数据,非报警数据",
      []AlarmRule{},
      time.Now().Format("2006-01-02 15:04:05"), // 只检测,没有比对时间
      "",
      0,
      "",
      "",
      0,
      0,
      "",
      []string{""},
      "暂无集群",
      localConfig.ServerId,
      localConfig.ServerName,
      serverIp,
      "",
      "",
      0,
      1,
      0,
      0,
      0,
      []*ruleserver.BaseInfo{},
   }
   requstbody, err := json.Marshal(pervideo)
   if err != nil {
      logger.Info("json parse error ", err)
      return
   }
   resp1, err1 := EsReq("POST", videoPersonUrl, requstbody)
   if err1 != nil {
      logger.Error("上传ES出错!---", err1)
// 归置人脸
func PutFace(faces []*FaceAndRules,msg ruleserver.ResultMsg)[]*FaceAndRules{
   if msg.RuleResult["face"] != nil && len(msg.RuleResult["face"].([]ruleserver.FaceResult)) > 0 {
      for _, faceResult := range msg.RuleResult["face"].([]ruleserver.FaceResult) {
         faces = hebingFace(faces, faceResult)
      }
      return faces
   } else {
      logger.Info("插入es返回的信息:", resp1)
      // 发出录像信号
      ruleserver.AddLxMessage(&protomsg.VideotapeInfo{EsDataId: esDataId, CameraId: msg.Cid, TaskId: msg.Tasklab.Taskid, ImgId: i.Id, SdkIds: []string{}, Type: 1})
      return nil
   }
   //if msg.RuleResult["cacheData"] != nil {
   //   InsertFace(msg.RuleResult["cacheData"].(ruleserver.ResultMsg))
   //}
}
func hebingFace(faces []*FaceAndRules, faceResult ruleserver.FaceResult) []*FaceAndRules{
   for _, arg := range faceResult.Args {
      // 拿到每一张人脸
      logger.Info("归置人脸时相似者的数量:",len(arg.Liker))
      flag := false
      for _, face := range faces {
         for _,lik := range face.Liker {
            logger.Warn("--------合并人脸时相似者:",lik.PersonId,lik.TableName)
         }
         if arg.Id == face.Id {
            flag = true
            face.rules = append(face.rules,faceResult.Result)
            face.Liker = append(face.Liker,arg.Liker...)
         }
      }
      if !flag {
         faces = append(faces, &FaceAndRules{arg, []ruleserver.Result{faceResult.Result}})
      }
   }
   return faces
}
// 往es中插入yolo数据
func InsertYolo(msg ruleserver.ResultMsg,linkId string) {
func InsertYolo(msg ruleserver.ResultMsg, linkId string) {
   if msg.RuleResult["yolo"] != nil && len(msg.RuleResult["yolo"].([]ruleserver.Result)) > 0 {
      // 先判断一下数据带的规则标签是否有可以插入的
      flag := false
@@ -373,11 +351,11 @@
         }
         linkFlag := false
         for _, yoloResult := range msg.RuleResult["yolo"].([]ruleserver.Result) {
            if (yoloResult.Others.TimeLabel == "01" || yoloResult.Others.TimeLabel == "10") && yoloResult.Others.LinkCache != nil && len(yoloResult.Others.LinkCache) > 1{
            if (yoloResult.Others.TimeLabel == "01" || yoloResult.Others.TimeLabel == "10") && yoloResult.Others.LinkCache != nil && len(yoloResult.Others.LinkCache) > 1 {
               linkId := uuid.NewV4().String()
               for _, msg2 := range yoloResult.Others.LinkCache {
                  logger.Warn("插入联动数据","此帧数据的id为",msg2.Cid)
                  InsertYolo(msg2,linkId)
                  logger.Warn("插入联动数据", "此帧数据的id为", msg2.Cid)
                  InsertYolo(msg2, linkId)
                  linkFlag = true
               }
            }
@@ -547,6 +525,84 @@
      //os.Exit(1)
   }
}
func ChangeStatusFace(msg ruleserver.ResultMsg) {
   logger.Info("往ES插入人脸非报警但是状态转换数据")
   // 上传大图
   // 解压缩并上传图片
   bdata, err := util.UnCompress(msg.Data)
   if err != nil {
      panic("解压缩图片时出现错误")
   }
   i := protomsg.Image{}
   err = proto.Unmarshal(bdata, &i)
   bigPhotoUrl := make(map[string]interface{})
   bigPhotoUrl, err = util.PostFormBufferData(weedfsUrl, i, uuid.NewV4().String())
   logger.Debug("========大图路径:", bigPhotoUrl)
   // 人脸检测,没有相似的底库人员
   localConfig, err := cache.GetServerInfo()
   if err != nil {
      logger.Error("查询本机信息失败!")
   }
   serverIp, err := GetLocalIP()
   // 查询cameraName
   camera, err := cache.GetCameraById(msg.Cid)
   if err != nil {
      logger.Error("查询摄像机信息失败")
   }
   esDataId := uuid.NewV4().String()
   pervideo := PerVideoPicture{
      esDataId,
      msg.Cid,
      camera.Addr,
      i.Timestamp,
      strings.Split(bigPhotoUrl["fileUrl"].(string), "/")[1],
      msg.Tasklab.Taskid,
      msg.Tasklab.Taskname,
      "人脸",
      "状态转换数据,非报警数据",
      []AlarmRule{},
      time.Now().Format("2006-01-02 15:04:05"), // 只检测,没有比对时间
      "",
      0,
      "",
      "",
      0,
      0,
      "",
      []string{""},
      "暂无集群",
      localConfig.ServerId,
      localConfig.ServerName,
      serverIp,
      "",
      "",
      0,
      1,
      0,
      0,
      0,
      []*ruleserver.BaseInfo{},
   }
   requstbody, err := json.Marshal(pervideo)
   if err != nil {
      logger.Info("json parse error ", err)
      return
   }
   resp1, err1 := EsReq("POST", videoPersonUrl, requstbody)
   if err1 != nil {
      logger.Error("上传ES出错!---", err1)
   } else {
      logger.Info("插入es返回的信息:", resp1)
      // 发出录像信号
      ruleserver.AddLxMessage(&protomsg.VideotapeInfo{EsDataId: esDataId, CameraId: msg.Cid, TaskId: msg.Tasklab.Taskid, ImgId: i.Id, SdkIds: []string{}, Type: 1})
   }
   //if msg.RuleResult["cacheData"] != nil {
   //   InsertFace(msg.RuleResult["cacheData"].(ruleserver.ResultMsg))
   //}
}
// 获取本机ip
func GetLocalIP() (ipv4 string, err error) {
@@ -630,3 +686,100 @@
   }
   return race
}
//for _, faceResult := range msg.RuleResult["face"].([]ruleserver.FaceResult) {
//   for _, face := range faceResult.Args {
//      // 上传大图
//      // 解压缩并上传图片
//      bdata, err := util.UnCompress(msg.Data)
//      if err != nil {
//         panic("解压缩图片时出现错误")
//      }
//      alarmRules := []AlarmRule{}
//      alarm := ChangeToString(faceResult.DefenceState, faceResult.AlarmLevel)
//      alarmRules = append(alarmRules, AlarmRule{faceResult.RuleGroupId, alarm, faceResult.RuleText, faceResult.DefenceState})
//      i := protomsg.Image{}
//      err = proto.Unmarshal(bdata, &i)
//      bigPhotoUrl := make(map[string]interface{})
//      bigPhotoUrl, err = util.PostFormBufferData(weedfsUrl, i, uuid.NewV4().String())
//      logger.Debug("========大图路径:", bigPhotoUrl)
//      // 人脸检测,没有相似的底库人员
//      localConfig, err := cache.GetServerInfo()
//      if err != nil {
//         logger.Error("查询本机信息失败!")
//      }
//      serverIp, err := GetLocalIP()
//      // 查询cameraName
//      camera, err := cache.GetCameraById(msg.Cid)
//      if err != nil {
//         logger.Error("查询摄像机信息失败")
//      }
//      bytes := util.SubImg(i, int(face.Location.X), int(face.Location.Y), int(face.Location.X+face.Location.Width), int(face.Location.Y+face.Location.Height))
//      resp, err := util.PostFormBufferData1(weedfsUrl, bytes, uuid.NewV4().String())
//      if err != nil {
//         logger.Error("上传小图出错")
//      }
//      logger.Info("================小图地址:", resp["fileUrl"].(string))
//      sex := ""
//      if face.ThftRes.Gender == 1 {
//         sex = "男"
//      } else {
//         sex = "女"
//      }
//      race := getRaceString(face.ThftRes.Race)
//      ageDescription := getDescription(face.ThftRes.Age)
//      esDataId := uuid.NewV4().String()
//      linksId := ""
//      if linkId != "" {
//         linksId = linkId
//      }
//      pervideo := PerVideoPicture{
//         esDataId,
//         msg.Cid,
//         camera.Addr,
//         i.Timestamp,
//         strings.Split(bigPhotoUrl["fileUrl"].(string), "/")[1],
//         msg.Tasklab.Taskid,
//         msg.Tasklab.Taskname,
//         "人脸",
//         "",
//         alarmRules,
//         time.Now().Format("2006-01-02 15:04:05"), // 只检测,没有比对时间
//         sex,
//         face.ThftRes.Age,
//         ageDescription,
//         race,
//         face.ThftRes.Smile,
//         face.ThftRes.Beauty,
//         base64.StdEncoding.EncodeToString(face.Feature),
//         []string{strings.Split(resp["fileUrl"].(string), "/")[1]},
//         "暂无集群",
//         localConfig.ServerId,
//         localConfig.ServerName,
//         serverIp,
//         "",
//         linksId,
//         face.Score,
//         1,
//         0,
//         0,
//         0,
//         face.Liker,
//      }
//      requstbody, err := json.Marshal(pervideo)
//
//      if err != nil {
//         logger.Info("json parse error ", err)
//         return
//      }
//      resp1, err1 := EsReq("POST", videoPersonUrl, requstbody)
//      if err1 != nil {
//         logger.Error("上传ES出错!---", err1)
//      } else {
//         logger.Info("插入es返回的信息:", resp1)
//         // 发出录像信号
//         ruleserver.AddLxMessage(&protomsg.VideotapeInfo{EsDataId: esDataId, CameraId: msg.Cid, TaskId: msg.Tasklab.Taskid, ImgId: i.Id, SdkIds: []string{}, Type: 1})
//      }
//   }
//}