게시판 등록기(보드 스파이더 등) 내부 알고리즘 아시는분?

게시판 자동 글 등록기 예를 들어 보드 스파이더 와 같은 프로그램이
어떤 원리에 의해서 게시판에 글을 등록하고, 또한
프로그램에서 게시판 db 수집하는 기법이 어떻게 해서
구현하시는지 아시는분?
아래는 게시판 글 등록기의 특징을 적어 놓은 것입니다.
어떻게 프로그램에서 HTML 코드를 모두 분석하죠?
한번에 수십만개의 게시판에 포스팅 한다는것도
내부 프로그램이 어떻게 돌아가면서 포스팅 한다는건지요?
등록여부 확인도 .. 수십만개의 게시판을 어떻게 확인한다는건지?
이와 관련 참고할 만한 도서가 있는지요?
너무 궁금해서요.

1) 수동으로 특정 게시판 추가 가능
게시판의 쓰기페이지만 지정하면 프로그램에서 자동분석하여 각 필드를 자동으로 구분, 테스트후 저장

2) 한번에 수십만 개의 게시판에 포스팅 가능
쉬운 게시판 선택 기능에 의해서 선택된 게시판에 한번에 동일한 광고글을 다량으로 포스팅 가능

3) 포스팅 후 글의 등록여부 확인 가능
게시판 저장시 게시판 쓰기 주소만을 저장하지 않고 목록 주소도 함께 저장되기 때문에 게시판 목록
페이지에서 자신이 글올린 게시판에 글이 등록되었는지 확인 가능

4) 그룹별, 저장된 날짜별, 마지막 글 올린 일별로 선택적 포스팅 가능
보기 원하는 정렬방법으로 나의 컴퓨터에 저장된 게시판 리스트를 직관적으로 볼 수 있음

5) 일별/월별 글올리기 결과 통계 기능
일별, 월별 글올린 내용과 결과를 달력형식으로 한눈에 볼 수 있음

6) 시스템 사양에 맞게 설정옵션을 변경하여 최적의 포스팅 가능
게시판 포스팅시 게시판이 업로딩에 대기하는 최대 시간값을 지정하여 자신의 컴퓨터 시스템 사용과
인터넷 환경에 맞게 조절 가능