GetYUV format is NV12

zhangmeng

2023-12-26 18a05d269516a5e33d8460291c2f93e73d95adce

 csrc/wrapper.cpp

@@ -1,6 +1,7 @@
#include "wrapper.hpp"

#include <thread>
#include <atomic>
#include <unistd.h>
#include <sys/time.h>

@@ -45,7 +46,11 @@
    ,audio_(false)
    ,gb_(0)
    ,cpu_(0)
    ,devid_(-1)
    ,run_dec_(false)
    ,run_stream_(true)
    ,run_rec_(false)
    ,work_start(false)
    ,thread_(nullptr)
    ,stop_stream_(false)
    ,stream_(nullptr)
@@ -53,6 +58,8 @@
    ,rec_(new rec)
    ,logit_(false)
    ,fps_(25)
    ,file_finished_(false)
    ,min_duration_(0)
    {
        makeTheWorld();
    }
@@ -62,13 +69,20 @@
    ,audio_(false)
    ,gb_(0)
    ,cpu_(0)
    ,devid_(-1)
    ,run_dec_(false)
    ,run_stream_(true)
    ,run_rec_(false)
    ,work_start(false)
    ,thread_(nullptr)
    ,stop_stream_(false)
    ,stream_(nullptr)
    ,decoder_(nullptr)
    ,rec_(new rec)
    ,logit_(true)
    ,fps_(25)
    ,file_finished_(false)
    ,min_duration_(0)
    {
        makeTheWorld();
        logif::CreateLogger(logfile, true);
@@ -91,6 +105,8 @@
        }
        if (logit_)
            logif::DestroyLogger();

        printf("wrapper release\n");
    }

    std::unique_ptr<ffwrapper::FormatIn> Wrapper::init_reader(const char* input){
@@ -98,27 +114,26 @@
        VideoProp prop;
        prop.url_ = input;
        prop.rtsp_tcp_ = true;
        prop.gpu_acc_ = !cpu_;
        prop.gpu_acc_ = false;
        prop.gpu_index_ = devid_;

       std::unique_ptr<FormatIn> in(new FormatIn(prop.gpuAccl()));
       AVDictionary *avdic = prop.optsFormat();
       std::unique_ptr<FormatIn> in(nullptr);
       int flag = -1;
        AVDictionary* avdic = NULL;
        if (gb_){
            flag = in->openGb28181(input, NULL);
            in.reset(new FormatInGB(prop));
        }else{
            in.reset(new FormatIn(prop, prop.gpuAccl()));
           avdic = prop.optsFormat();
        }

        if(avdic){
            flag = in->open(input, &avdic);
            av_dict_free(&avdic);
        }else{
            flag = in->open(input, NULL);
        }
       if(avdic){
          av_dict_free(&avdic);
       }
        if(flag == 0){
            if(!in->findStreamInfo(NULL)){
                logIt("can't find video stream\n");
                return nullptr;
            }
            
            return in;
        }
        if(flag == 0) return in;

        return nullptr;
    }
@@ -150,7 +165,7 @@

        stream_ = new stream(in, 3 * in->getFPS());
        // stream_->AudioSwitch(audio_);

        
        decoder_ = new decoder(in);

        rec_->Load(in);
@@ -163,12 +178,12 @@
    int Wrapper::run_worker(ffwrapper::FormatIn *in, const CPacket &pkt){
        if (gb_){
            AVPacket &p = pkt.data->getAVPacket();
            p.pts = p.dts = AV_NOPTS_VALUE;
            // p.pts = p.dts = AV_NOPTS_VALUE;
        }
        int flag = 0;
        if (stream_) stream_->SetPacket(pkt);
        if (decoder_ && run_dec_) flag = decoder_->SetFrame(pkt);
        if (rec_->Loaded()) rec_->SetPacket(pkt);
        if (run_stream_ && stream_) stream_->SetPacket(pkt);
        if (run_dec_ && decoder_) flag = decoder_->SetFrame(pkt);
        if (run_rec_ && rec_->Loaded()) rec_->SetPacket(pkt);

        return flag;
    }
@@ -181,32 +196,72 @@

    void Wrapper::run_stream_thread(){
        
        int64_t file_rebootime = 0;
        int64_t file_frame = 0;

        using namespace std;
        // const string gb_suffix[] = {"/StreamType=2", "/StreamType=3", ""};
        // const string gb_suffix[] = {"/StreamType=2", ""};
        const string gb_suffix[] = {""};
        const size_t gb_size = sizeof(gb_suffix) / sizeof(string);
        int gs_idx = 0;
        string url;
        url.reserve(input_url_.size()*2);
        url = input_url_;
        work_start = false;
        while(!stop_stream_.load()){
            auto in = init_reader(input_url_.c_str());
            if (gb_){
                if (input_url_.find("/StreamType=") == string::npos)
                    url = input_url_ + gb_suffix[gs_idx];
                logIt("======>>input real url %s\n", url.c_str());
                gs_idx = (gs_idx + 1) % gb_size;
            }
            auto in = init_reader(url.c_str());
            
            if (!in) {
                logIt("ERROR: init_reader! url: %s\n", input_url_.c_str());
                sleep(2);
                work_start = false;
                logIt("ERROR: init_reader! url: %s\n", url.c_str());
                usleep(126000);
                // for(int i = 0; i < 10; i++){
                //     if (stop_stream_.load()) break;
                    if(gb_) usleep(2617000);
                // }
                continue;
            }

            fps_ = in->getFPS();
            
            int wTime = 1000000.0 / in->getFPS() ;
            if (fps_ < 1 || fps_ > 200){
                fps_ = 25;
            }

            int wTime = 1000000.0 / fps_ ;
            wTime >>= 1;
            logIt("WAIT TIME PER FRAME: %d", wTime);

            init_worker(in.get());
            work_start = true;

            int64_t id = gb_ ? 0 : -1;
            int64_t v_id = id;
            int64_t a_id = id;

            bool exist = access(input_url_.c_str(), 0) == 0 ? true : false;
            bool exist = access(input_url_.c_str(), 0) == 0;
            if (exist){
                wTime += wTime/2;
                file_rebootime++;
            }

            logIt("WAIT TIME PER FRAME: %d", wTime);

            while(!stop_stream_.load()){
                auto data(std::make_shared<CodedData>());
                if (in->readPacket(&data->getAVPacket()) != 0){
                auto ret = in->readPacket(&data->getAVPacket());
                if (ret > 0){
                    sleep(2);
                    continue;
                }

                if (ret < 0){
                    logIt("read packet error, id: %lld", id);
                    break;
                }
@@ -214,6 +269,7 @@
                if (in->notVideoAudio(&data->getAVPacket())){
                    continue;
                }

                // 非国标跳过第一帧,测试第一帧有问题
                if (!gb_ && id < 0){
                    id++; v_id++; a_id++;
@@ -234,21 +290,42 @@
                id++;

                //本地文件太快sleep一下
                if (exist){
                if (exist && in->isVideoPkt(&data->getAVPacket())){
                    // 记录解码的文件有多少帧
                    file_frame++;
                    usleep(wTime);
                }

            }

            deinit_worker();
            if (exist) break;
            if (exist) {
                // 三次一帧都没解出来，退出
                if (file_frame == 0 && file_rebootime < 3){
                    logIt("libcffmpeg.so-> run %lld time, current frames %lld", file_rebootime, file_frame);
                    continue;
                }
                // 最小需要解出多少帧
                if (file_frame < min_duration_ * fps_){
                    logIt("libcffmpeg.so-> run %lld time, current frames %lld, mind %d, fps: %d",
                     file_rebootime, file_frame, min_duration_, fps_);
                    continue;
                }
                logIt("libcffmpeg.so-> local file %s run %lld time, all frames %lld, mind %d, fps: %d", 
                    input_url_.c_str(), file_rebootime, file_frame, min_duration_, fps_);
                file_finished_ = true;
                break;
            }
        }
    }

    void Wrapper::SetRecMinCacheTime(const int mind){
        rec_->SetRecMinCacheTime(mind);
    void Wrapper::SetRecMinCacheTime(const int mind, const int maxd){
        min_duration_ = mind;
    }

    void Wrapper::OpenRecorder(){
        run_rec_ = true;
    }
    
    void Wrapper::BuildRecorder(const char* id, const char *output, const int64_t &fid, const int mindur, const int maxdur, const bool audio){
        bool a = audio;
        if (gb_) a = false;
@@ -261,33 +338,47 @@
            [=]{rec_->NewRec(rid.c_str(), dir.c_str(), fid, mindur, maxdur, a);};
        }
    }

    int Wrapper::FireRecorder(const char* sid,const int64_t &id){
        if (rec_->Loaded()){
            rec_->FireRecSignal(sid, id);
        }
        return 0;
    }

    void Wrapper::GetInfoRecorder(std::string &recID, int &index, std::string &path){
        if (rec_){
    int Wrapper::GetInfoRecorder(std::string &recID, int &index, std::string &path){
        if (work_start && rec_){
            rec_->GetRecInfo(recID, index, path);
        }
        return 0;
    }
    ////////decoder
    void Wrapper::BuildDecoder(){
    void Wrapper::OpenDecoder(){
        run_dec_ = true;
    }

    void Wrapper::GetPicDecoder(unsigned char **data, int *w, int *h, int *format, int *length, int64_t *id){
    int Wrapper::GetPicDecoder(unsigned char **data, int *w, int *h, int *format, int *length, int64_t *id){
        if (file_finished_){
            return -1;
        }
        if (decoder_){
            decoder_->GetFrame(data, w, h, format, length, id);
        }else {
            if (work_start){
                for(int i = 0; i < 6; i++)this_thread::sleep_for(chrono::seconds{1});
            }
        }
        return 0;
    }
    
    void Wrapper::GetPacket(unsigned char **pktData, int *size, int *key){
        if (stream_){
    void Wrapper::CloseStream(){
        run_stream_ = false;
    }

    int Wrapper::GetPacket(unsigned char **pktData, int *size, int *key){
        if (work_start && stream_){
            stream_->GetPacket(pktData, size, key);
        }
        return 0;
    }

} // end class wrapper
@@ -392,5 +483,50 @@

        return flag;
    }

#ifdef GB28181
    int GetGb28181Pic(const char *rtspUrl, char *retData, int *retDataLen, const int tt){
        int ret = 0;
        std::atomic_bool add_camera{false};

        std::thread t([&]{
            auto handle_gb28181 = new GB28181API;
            std::string ru(rtspUrl);
            if(handle_gb28181->addCamera(ru) == -1){
                delete(handle_gb28181);
                logIt("do addCamera Error\n");
                ret = -2;
                return;
            }
            add_camera.store(true);
            std::this_thread::sleep_for(std::chrono::seconds(1));
            int retLen = handle_gb28181->capturePic(handle_gb28181, retData, retDataLen, tt);
            if(retLen == 0){
                logIt("do capturePic failed:%d");
                ret = -1;
            }

            handle_gb28181->deleteCamera();
            delete handle_gb28181;
        });

        std::this_thread::sleep_for(std::chrono::seconds(1));

        int ttt = tt;
        if (ttt < 6) ttt = 6;

        int i = -1;
        while (true) {
            std::this_thread::sleep_for(std::chrono::seconds(1));
            if (add_camera.load()) {
                t.join();
                return ret;
            }
            if (i++ > ttt) break;
        }
        t.detach();
        return -1;
    }
#endif
}