C++을 이용해서 대용량 csv파일을 정렬하고자 합니다.
(cpu 12개, 메모리 약 100기가)
예를 들어서 2001년~ 2012년에 해당하는 데이터를 정렬하려고
각 core에 1년치 데이터를 할당해서 sort 작업을 진행하려고 합니다.
1년에 해당하는 데이터는 (100,000~10,000,000 x 15) 로 이루어져있고
숫자와 문자 모두 포함하고 있습니다.
ex)
12351256, 29839182, GB00DJM120, 1, 3, ... , OG0189290
12353456, 29835631, GB00DJ2153, 2, 4, ... , OG018HJJD
...
...
12345731, 29832131, GB00GL1023, 4, 1, ... , OG01AFDG1