accept(2) 실패시 처리 문제..

안녕하세요..

스티븐스 책에 있는 poll() 서버 구조로 간단한 테스트 서버를 작성하고 있습니다.

if( client[0].revents & POLLIN )
{
    connfd = accept(listenfd, ... , ...);

    // 여기서 connfd가 -1이 리턴됩니다. errno는 9이구요..
    // System error:   9 = Bad file descriptor


    ...

}

이렇게 accept를 실패했을경우, 이후 처리를 어떻게 해주어야 하나요..? 아무 처리 없이 바로 return 했더니 위와같은 에러가 무한 반복되네요..
그리고 어떤 상황일때 accept()가 -1, errno 9를 반환하는지도 좀 부탁드립니다..