让我们首先看一个简单的阅读RTSP的示例程序

import cv2
cap=cv2.VideoCapture("rtsp://admin:admin_123@172.0.0.0")

ret,frame = cap.read()
while ret:
    ret,frame = cap.read()
    cv2.imshow("frame",frame)
    if cv2.waitKey(1) & 0xFF == ord('q'):
        break
cv2.destroyAllWindows()
cap.release()

frame值是每一帧的图像，但是如果你在while代码块中为每一帧添加识别操作，比如添加Tensorflow来识别其中的小动物，就会报告这样的错误，while循环也会因为这个异常而中断。

[h264 @ 0x55abeda05080] left block unavailable for requested intra mode
[h264 @ 0x55abeda05080] error while decoding MB 0 14, bytestream 104435

事实证明FFMPEG Lib不支持rtsp协议中的H264视频，因此解决方案是编写两个不同的线程来分别处理每帧的图像，然后编写另一个线程来处理每帧的图像。
其思路如下：使用队列，采用先进先出策略，一个线程开始接收数据，另一个线程逐帧处理数据，

解决方案代码显示如下：

import cv2
import queue
import time
import threading
q=queue.Queue()

def Receive():
    print("start Reveive")
    cap = cv2.VideoCapture("rtsp://admin:admin_123@172.0.0.0")
    ret, frame = cap.read()
    q.put(frame)
    while ret:
        ret, frame = cap.read()
        q.put(frame)

def Display():
     print("Start Displaying")
     while True:
         if q.empty() !=True:
            frame=q.get()
            cv2.imshow("frame1", frame)
         if cv2.waitKey(1) & 0xFF == ord('q'):
                break
            
if __name__=='__main__':
    p1=threading.Thread(target=Receive)
    p2 = threading.Thread(target=Display)
    p1.start()
    p2.start()

Receive用作接收数据的线程，Display显示为简单进程。

我使用的是海康威视ip poe相机，在ubuntu16.04的系统上使用opencv3.4和python3。相机是h264格式的流媒体。
使用RTSP，我从相机流使用opencv的视频捕获，有时我有同样的问题“[h264@0x8f915e0]错误，而解码MB 43 20，字节流-4”
当您在进一步处理中使用捕获的帧，并且在rtsp仍在流式传输时在管道中产生延迟时，就会产生此问题。
解决方案是将捕获放在不同的线程上，而将您使用的帧放在另一个线程上。
在同一个进程中，您将看到类似于使用python的多线程的内容：

#thread1 

global frame 
frame = None
cap = cv2.VideoCapture("rtsp://bla:bla@192.168.x.x")

while True:
    ret,frame = cap.read()

#thread2

cv2.imshow("Current frame", frame)
cv2.waitKey(0)
# you can pass now the frame to your application for further processing

这仅适用于视频流：

如果返回值为False，您只需再次初始化cv2.VideoCapture。：）
对我有用。

vs = cv2.VideoCapture("rtsp://bla:bla@192.168.x.x")
while True:
    ret,frame = vs.read()
    if not(ret):
        st = time.time()
        vs = cv2.VideoCapture("rtsp://bla:bla@192.168.x.x")
        print("tot time lost due to reinitialization : ",time.time()-st)
        continue

    cv2.imshow("Current frame", frame)
    cv2.waitKey(0)

我一直面临着这个问题，现在我刚刚解决了它。
(Note：我正在使用python3）
我怀疑这与时间有关，因为在连续的capture.read()之间进行昂贵的操作时会出现这种错误。
此外，问题出现时，我流从我的网络摄像头（其中使用H264编码）和没有问题时，使用我的笔记本电脑摄像头。
因此，对我来说有效的解决方案是使用多线程，使用python的“线程”模块，一个线程流和其他进程，同时正确管理线程锁，这样就不会发生读/写冲突。

我有同样的问题后，4天的研究，最后我解决了这个问题很容易的代码：就试一次

for(;;) {
        if(!vcap.read(image)) {
            std::cout << "No frame" << std::endl;
            cv::waitKey();
        }
        cv::imshow("Output Window", image);
        if(cv::waitKey(1) >= 0) break;
    }