音视频合流，ffmpeg音频问题

0回复啊                 

[quote][url=forum.php?mod=redirect&goto=findpost&pid=46367&ptid=14482]zjx94 发表于 2017-3-10 09:58[/url]
0回复啊[/quote]

从AI/AENC代码来看， 楼主的音频编完码是48kHz采样/16bits单声道的PCM的raw data

而从后面mux的代码来看，是采样率为48kHz，码率为64kHz的不知道什么编码格式的立体声

有点对不起来的感觉

[quote][url=forum.php?mod=redirect&goto=findpost&pid=46371&ptid=14482]zhuangweiye 发表于 2017-3-10 10:33[/url]
从AI/AENC代码来看， 楼主的音频编完码是48kHz采样/16bits单声道的PCM的raw data

而从后面mux的代码来 ...[/quote]

码率为64kHz，这个要改吗？？还有就是后面的编码格式是AV_SAMPLE_FMT_FLTP的，改成其他的会报错。
而且48KHZ出来直接fwrite出来的声音也是不对的。
我在网上看到一段：pcm数据转为aac ，pcm数据的sample fmt 为S16  aac又只支持FLTP，就要用到swr_convert 重采样，但是我程序里直接就pkt.data=pstFrm->pStream;  pkt.size=pstFrm->u32Len;数据并没有进入swr_convert 中转变，也不懂是不是这个问题。


  frame = get_audio_frame(ost);       
    if (frame) {
           dst_nb_samples = av_rescale_rnd(swr_get_delay(ost->swr_ctx, c->sample_rate) + frame->nb_samples, c->sample_rate, c->sample_rate, AV_ROUND_UP);
            av_assert0(dst_nb_samples == frame->nb_samples);
            /* convert to destination format */
            ret = swr_convert(ost->swr_ctx,
                              ost->frame->data, dst_nb_samples,
                              (const uint8_t **)frame->data, frame->nb_samples);
            if (ret < 0) {
                printf( "Error while converting\n");
                return -1;
            }
            frame = ost->frame;

        frame->pts = av_rescale_q(ost->samples_count, (AVRational){1, c->sample_rate}, c->time_base);
        ost->samples_count += dst_nb_samples;
    }
                        printf("success  write_audio_frame!!!-=-=-=len=%#x\n",data_size);

    ret = avcodec_encode_audio2(c, &pkt, frame, &got_packet);
    if (ret < 0) {
        printf( "Error encoding audio frame: %s\n", av_err2str(ret));
        return -1;
    }
    if (got_packet) {                 
                        pkt.data=pstFrm->pStream;
                        pkt.size=pstFrm->u32Len;
                        //pkt.pts= av_rescale_q(c->coded_frame->pts, c->time_base, ost->st->time_base);
                        pkt.flags |= AV_PKT_FLAG_KEY;               
                        pkt.pts=pkt.dts=frame->pts;
        ret = write_frame(oc, &c->time_base, ost->st, &pkt);

[quote][url=forum.php?mod=redirect&goto=findpost&pid=46378&ptid=14482]zjx94 发表于 2017-3-10 11:43[/url]
码率为64kHz，这个要改吗？？还有就是后面的编码格式是AV_SAMPLE_FMT_FLTP的，改成其他的会报错。
而且4 ...[/quote]

调音频，还是一步一步来，先Ai-〉Ao通，然后 Ai-〉Aenc-〉Adec-〉Ao通

然后Ai-〉Aenc-〉file-〉Adec-〉Ao通，然后再上网络等等

如果哪一步没通就先调，不然都混在一起，神仙也没招

[quote][url=forum.php?mod=redirect&goto=findpost&pid=46382&ptid=14482]zhuangweiye 发表于 2017-3-10 11:51[/url]
调音频，还是一步一步来，先Ai-〉Ao通，然后 Ai-〉Aenc-〉Adec-〉Ao通

然后Ai-〉Aenc-〉file-〉Adec ...[/quote]

是的。我用的都是例子audio中的，就是从Aenc出来的写成文件。  stAioAttr.enSamplerate = AUDIO_SAMPLE_RATE_8000；输出的文件是没问题的，但是改成  stAioAttr.enSamplerate = AUDIO_SAMPLE_RATE_48000；就声音不对了。
拿数据应该从AENC拿应该没错的，可能就是ffmpeg有问题吧。

[quote][url=forum.php?mod=redirect&goto=findpost&pid=46395&ptid=14482]zjx94 发表于 2017-3-10 14:29[/url]
是的。我用的都是例子audio中的，就是从Aenc出来的写成文件。  stAioAttr.enSamplerate = AUDIO_SAMPLE_R ...[/quote]

48kHz采样声音不对，是那一步不对？是Ai-〉Aenc-〉Adec-〉Ao就不对了吗？一旦出问题了就回退一步看看

另外很好奇 楼主只改Ai的配置，没有改前端audio codec的配置吗？

楼主解决了么，我们现在也在用这个muxing来做海思的音视频合成？也遇到了相关的问题。时间戳怎么添加。

[quote][url=forum.php?mod=redirect&goto=findpost&pid=158592&ptid=14482]qn1531980567 发表于 2020-5-19 14:20[/url]
楼主解决了么，我们现在也在用这个muxing来做海思的音视频合成？也遇到了相关的问题。时间戳怎么添加。[/quote]

时间戳用海思编码里面自带的pts就可以

[quote][url=forum.php?mod=redirect&goto=findpost&pid=158686&ptid=14482]qn1513131564 发表于 2020-5-20 09:43[/url]
时间戳用海思编码里面自带的pts就可以[/quote]

typedef struct hiVENC_PACK_S
{
HI_U64 u64PhyAddr;
HI_U8 ATTRIBUTE* pu8Addr;
HI_U32 ATTRIBUTE u32Len;
HI_U64 u64PTS;
HI_BOOL bFrameEnd;
VENC_DATA_TYPE_U DataType;
HI_U32 u32Offset;
HI_U32 u32DataNum;
VENC_PACK_INFO_S stPackInfo[8];
} VENC_PACK_S;

你指的是这个u64PTS么，这个参数怎么用到ffmpeg中，试过直接把它当成pts，结果生成的视频文件没有时间戳呢。

[quote][url=forum.php?mod=redirect&goto=findpost&pid=158686&ptid=14482]qn1513131564 发表于 2020-5-20 09:43[/url]
时间戳用海思编码里面自带的pts就可以[/quote]

/******************************************************************************
* funciton : save stream
******************************************************************************/
HI_S32 SAMPLE_COMM_VENC_SaveStream(FILE* pFd, VENC_STREAM_S* pstStream)
{
    HI_S32 i;

    for (i = 0; i < pstStream->u32PackCount; i++)
    {
                /*
               
        fwrite(pstStream->pstPack.pu8Addr + pstStream->pstPack.u32Offset,
               pstStream->pstPack.u32Len - pstStream->pstPack.u32Offset, 1, pFd);

        fflush(pFd);
                */
               
                pkt.data=pstStream->pstPack.pu8Addr + pstStream->pstPack.u32Offset;
                pkt.size=pstStream->pstPack.u32Len - pstStream->pstPack.u32Offset;
                pkt.pts=pstStream->pstPack.u64PTS;
                pkt.dts=pkt.pts;
    }

    return HI_SUCCESS;
}