ipc 선택의 문제

한 프로세스가
struct {
char name[20];
int age;
} 와 같은 간단한 구조체 데이터를 IPC형태(fifo,msg Q,shared memory...)에 써줍니다.

또 한 프로세스는 그것을 꺼내읽어서 비즈로직을 처리하면됩니다.

대략 저와같은 간단한 구조체데이터가 순간적으로 100만건 정도 발생하는데요.
이와 같을때 적당한 ipc는? ( 데이터는 간헐적으로 생성되고요, 발생되는 건수는 가변적임 . 평상시 발생할때마다 100건미만일수있으나 새벽에 최고 100만건이 발생함.)

제생각에는 message que로 하면 딱일것같은데 용량문제가 걸리네요.
max 100만건정도의 수용할수 있는게 뭐가좋을까요?

그리고 맥스 100만건이 중복된 데이터일경우 구조체를 생성해주는 프로세스가
중복되지 않게 기존데이터를 검색할수 있는 ipc가 있을까요? (-> 이것은 필수조건은 아니고, 가능하면 좋음)