AR(증강현실) 전문으로 하시는 분 계신가요??

AR(증강현실)과 관련하여 전문적으로 종사하고 계시는 분 있으세요?

제가 하려는게 있는데, 맨땅에 헤딩하려니 좀 많이 아플 것 같아서 라이브러리나 툴을 알아보고 있는데 쉽지가 않네요.

제가 하려는 것은,

1. HD 카메라로부터 비디오 입력을 받고 (1920x1080 29.97fps 비압축... 초당 120MBytes 정도 되죠.)
2. 카메라의 X, Y, Z, ZOOM 값을 입력 받은 후,
3. 미리 작성한 3D 모델을 2번의 카메라 포지션에 맞게 1번의 비디오와 합성 하는 것입니다.

이렇게 말하니 간단한데, 실제 문제가 되는 부분이

1. 3D 모델을 미리 퍼펙트하게 작성할 수 있는 게 아니라서,
3D 모델 제작 툴과 저의 프로그램이 매번 SAVE / LOAD 하는 식으로 하면 안되고,

2. 3D 모델을 X, Y, Z, ZOOM 값에 맞추는 것만으로 끝나는게 아니라,
실제 카메라의 왜곡(엄청납니다) 때문에 3D 모델에 실시간으로 왜곡을 보상해줘야 합니다.

이 2가지 때문에 골머리를 썩고 있습니다.

OpenCV 에서 렌즈 왜곡 보정에 대한 해결책은 찾을 듯 하고,
Director 같은 툴로 3D 저작을 하고,
OpenGL 로 그림을 만들어 내면 될 것도 같은데...
이것들을 합치려고 하면 머리가 터지려고 하네요....

우리나라엔 AR을 전문으로 하는 소프트웨어 업체는 없는 것 같은데,
혹시 대학원 같은데서 전공하신 분 계시면,
코멘트 좀 부탁드립니다.