(멀티 쓰레드 통신) Conditional Variable의 wait 함수의 대기상태에서 다시 활성화되지 않는 문제

멀티 쓰레드 통신 프로그램에서 Conditional Variable의 wait 함수를 실행해서 대기 상태인 쓰레드가
해당 조건이 만족되었는데도 불구하고, 다시 활성화되지 않는 문제가 발생합니다.
이러한 문제가 항상 발생하는 것은 아니고 가끔씩 발생되어, 프로그램이 대기 상태로 더 이상 진행되지 않습니다.
고수분들의 많은 조언 부탁드립니다.

본 프로그램은 2개의 노드가 연산된 데이터를 송수신하면서 실행하는 프로그램입니다.
각 노드는에서는 5개의 쓰레드가 실행되며 그 역할은 다음과 같습니다.
1. 메인 쓰레드
2. 송신 쓰레드 : 데이터 송신을 담당하는 쓰레드
3. 수신 쓰레드 : 데이터 수신을 담당하는 쓰레드
4. 연산 쓰레드(2개) : 데이터의 연산을 담당하고 연산 효율성을 위해서 멀티 쓰레드로 작동함.

문제가 발생하는 데이터 수신 부분의 자세한 설명은 다음과 같습니다.

Step A) 데이터를 수신하려는 연산 쓰레드는 Received Queue에 연산쓰레드의 ID(2 바이트)에 해당하는 데이터 들어올때까지 대기합니다.

ulRecv.lock();
RecvCV->wait(ulRecv, [&] {		
    RecvPtr = RecvQueue->front();
    return !RecvQueue->empty() && RecvPtr[0]==(idx&0xff) && RecvPtr[1]==(idx>>8);
    });

Step B) 수신 쓰레드에서 데이터를 수신하면, (Mutex의 lock실행) Received Queue에 데이터를 Push하고 (Mutex의 unlock실행) notify를 실행합니다.

try {
    SRecvSocket->recv(RecvBuf, Len);
}
catch ( SocketException& ) {}
 
RecvMtx->lock();
RecvQueue->push(RecvBuf);
RecvMtx->unlock();
 
RecvCV->notify_all();

RecvPtr = RecvQueue->front();
RecvQueue->pop();
ulRecv.unlock();

문제는 (항상은 아니고 가끔씩) step B에서 step C과정으로 넘어가지 않는다는 것입니다.
데이터 로그를 통해서 step A와 step B의 과정이 모두 실행되었음을 확인하였는데,
대기 상태인 연산 쓰레드가 가끔씩 다시 활성화가 되지 않습니다.
그런데, 연산 쓰레드를 하나의 쓰레드(전체 4개의 쓰레드)로 실행할 경우에는 이러한 문제가 발생하지 않습니다.

어떻게 해결해야 할지 감이 안잡히네요.
고수 분들의 조언 부탁드립니다.
감사합니다.