Grid Computing?

여기에도 그리드 얘기가 나오고 있군요. 오고 간 글을 주욱 살펴보니 그리드 환경에서의 보안의 단점과 여러가지 비효율성들에 관한 논의가 많은데요. 뭐 다 아시는 얘기가 될런지도 모르겠습니다만 저희 연구실에서는 globus라는 그리드 관리환경을 사용해서 클러스터 3조를 그리드로 사용하고 있습니다. 이 이외에도 다른 관리환경이 있는데요... 이러한 환경에서 어느 정도 authentification문제 등이 해결되고 있습니다. 그리고 어차피 그리드라는 것이 연구소를 중심으로 형성되는 것이지 일반 가정의 피씨까지 모두 묶어서 쓴다는 것은 현실적으로 어렵다는 것을 다들 아실 겁니다. 요즘 국가 그리드 프로젝트다 뭐다 해서 관심이 많은데요. 뭐 사실 좀 허황된 것이 사실입니다. 그러나 연구소 내에서의 그리드 환경 구축은 실제 저희 연구실에서 문제 없이 사용하고 있습니다. 연구원들의 피씨(피씨라기보다는 웍스테이션)를 묶어서 각자의 작업과 병렬계산을 무리없이 동시에 처리하고 있습니다. 뭐 궁금하신게 있으시면 메일보내주시면 아는데 까지 성실하게 대답해 드리겠습니다. 주절주절~ 암튼 정리하면 그리드는 연구소를 벗어나기 힘들지 않을까 싶습니다.
ps 어린이나 노약자는 절대 따라하시면 안됩니다.

겁쟁이로...글을 쓰겠습니다. 열을 받는다면... 좀 험한 소리를 쓰게 될 것 같기 때문에...

그리드 컴퓨팅이 일반화 된다면...

어쩌면 굉장히 무서운 일...쯤이 가능하게 됩니다.
저기 아래 어디쯤에 슈퍼컴퓨터..이야기를 어느분이 해 놓았지요?
그리드 컴퓨팅의 개념을 처음 시험 하던 무대가 슈퍼컴퓨터들을 초고속 네트워크 장비들...(한국통신 초고속...이 아니고)을 사용해서 연동하여서 마치 하나의 슈퍼컴퓨터인것 처럼 사용하자...가 그 처음 이었습니다.

그런데, 그 개념이 발전하여 네트워크로 연동 될 수 있는 가능한 모든것을 포용하게 됩니다.

중요한 것은, 그리드라는 것이 어떤 모습으로 처음 deploy될 것이며, 누가 가장 active한 사용자가 될 것인가 하는 점입니다.

그리드=== 무한한 컴퓨팅 파워..사실 무한은 아닙니다. 슈퍼컴퓨팅파워는 그나라의 국력과 동일하다고 합니다. top500.org에 들어가 보십시요.

미국은 항상 우리나라에 비해서 200배~400배이상의 슈퍼컴퓨팅파워를 보유해 왔습니다.
지금은 더 무서운 시대가 되어 가고 있지요.

무서운...무서운 단어를 썼는데 그 뜻을 설명하겠습니다.

주로 슈퍼컴퓨터를 사용하는 사람들은 전산분야..IT분야의 사람들 보다는 응용분야의 사람들이 많습니다. 그런데, 그런 응용분야의 사람들이 어떤 분야의 사람들일까요? 그리고, 그리드..라는 환경을 정말 극적으로 활용할 문제들은 어떤 문제들일까요?

슈퍼컴퓨터를 사용하는 사람들은 현재 정부에서 주장하는 6T분야를 망라합니다.
이미 신문지상등을 통해서 많이 보셨겠지만
그런 응용분야의 문제들은 사실 많이 황당합니다. 실제 실험을 통해서 사실적인 답을 얻기도 하지만 이를 위해서 대개 너무나 많은 물리적인 실험을 수행해야 합니다. 그런데, 슈퍼컴퓨터를 사용해서 그런 응용분야 문제를 푸는 사람들이 있습니다. 계산과학..분야라고 합니다.
이 사람들이 하는 일은 컴퓨터 계산을 통해서
실제 물리적인 현상을 모델링하고 그 결과를 가지고 실제를 예측하는 것입니다. 이것을 통해서
실제 수행하여야 하는 물리 실험의 양을 줄이거나
많이 발전한 분야의 경우, 그 계산만으로 상품을 만들기도 합니다. 핵폭탄 까지도 말입니다.

현대 과학의 발전은 조금 과장되긴 하였지만
그 대상연구 물질/장비/결과들이 이미 물리 실험만을 통해 다루어 질 수 있는 단계를 많이 넘어 가고 있습니다. 이런 물리 실험은 그 비용이 너무 들어간다든지, 불가능하다든지..시간이 너무 소요된다든지.. 복합적인 이유로 불가능한 문제들이 다 되어 가고 있습니다.
그 단적인 예가 NT(NanoTechnology)문제들을 들 수 있겠습니다. 너무 작은 물질을 다루므로 물리실험이.. 쉽지 않다고 합니다. 따라서 많은 계산이 전제 되어 집니다.
생명공학... 미국의 celera사가 슈퍼컴퓨터들을 어마어마하게 사용하고 있지요?
너무나 많은 분야에 대해 동일한 설명이 가능합니다.

그럼 무섭다는 이야기를 풀겠습니다.

기상문제.... 정확한 입력자료와 엄청난 계산능력만 주어진다면 상딩히 정확한 계산이 가능하다는 주장들을 들을 수 있는 분야입니다.....혹시 계산을 해서 내년 가을까지 날씨를 정확하게 계산할 수 있다면 어떤 결과가 나올지 상상이 가능하신가요?
아마, 내년에 전세계 곡물 산출양 추정이 가능하지 않겠습니까? 밀이며..쌀이며... 거대 자본..같으면 매점매석도 가능하고...
날씨까지 가기도 전에..해양기후..문제이야기를 할 수 있습니다... 언제 어디서..고등어 때가 몰리고..도 가능하고, 적조가 일어날까..같은것도 가능하고... 이것은 앞으로 한 30년쯤 걸릴거랍니다... 그런데 그리드..가 그 시기를 앞당기겠지요.

NT문제를 통해 재미있는 것이 가능하지요..
반지전쟁에서 나오는 미스릴을 사용한 갑옷...이야기 있지 않습니까? NT문제..가 잘 적용이 된다면 그런것도 가능하다고 합니다.

많은 기술들이 복합적으로 사용되어지는
초소형 비행체...이야기를 해외 토픽에서 들으셨을 겁니다. NT, CFD, IT...등등.이 통합적용됩니다. 레이더 망에 안걸리고...목표가 150Km~300Km정도 비행하고...요인암살..어쩌고 ...그러는데, 그것보다.. 구제역..이나 조류독감 같은거 묻혀서 날려 보낸다고 생각하면 어떨까요?

로보캅...이 실제 등장 가능하여 집니다.
아는 어느 똑똑한 박사님...연구 주제가...
신경세포를 실리콘 칩에 붙여서 그 신호 입출력을 슈퍼컴퓨터로 해석합니다. 지금 출력신호는 해석이 어느정도 가능하답니다. 현재는 보조 세포를 같이 사용할 경우 신경세포를 1년쯤 살게 할 기술정도가 된다고 하네요. 그러니까,... 몇년 ~10년쯤 흐르면
로보캅..이나 스타워즈에서 팔 잘리고 나서 로보트 팔을 만들어 붙이는 시대가 실제 가능하다는 것이지요. 이러한 군인..이 등장하면, 핵폭탄이 별로 필요없을 겁니다. 산업적인 활용은 당연히 어마어마한 결과를 낳을 것입니다.

미국의 www.keyhole.com이라는 사이트에 가시면 위성에서 촬영한 영상을 가지고 3d지도를 만들어서 어떤 지역을 몇km상공에서 항공 탐색하는 듯한 효과를 보여 주는 서비스를 합니다.
현재는 사람의 작업도 많이 필요하고 계산도 필요합니다. 그런데, 미국 sdsc에서 수행하는 연구 프로젝트로...그리드환경 응용 프로젝트입니다.... 이것을 자동화하는 프로젝트를 수행중입니다. 이것이 군사적으로 활용된다면 어떤 시나리오가 가능할까요?
요즘 말이 많은 F15전투기는 사람 조작없이도 자동으로 미국공항에서 이륙해서 우리나라 인천공항에 300미터 오차로 자동 착륙이 가능하다는데.. 아마 내일 폭격하고 싶은데..한번 가상으로 폭격해보고, 내일은 실제 무인전폭기로 폭격한번하고..

그리드 컴퓨팅은 슈퍼컴퓨팅의 다른말이라고 해도 과언이 아닙니다.

그리드 컴퓨팅이 일반화 된다면 상상가능한 일들입니다.

주요 시나리오는 그리드 컴퓨팅 환경을 통해 만들어진 자원을 소수의 천재 과학자들에게 몰아주자...입니다. 그러면, 그 과학자들이 연구하는 주제는 그 결과가 빨리 나올 가능성이 더 많아지고, 미국에 몰려있는 수많은 천재들이 다루고 있는 수많은 터무니 없는 연구 주제들중 몇가지만 결과를 낳더라도... 사실..미국의 목적도 그것이지요... 신의 영역에 해당하던 사항들이 인간의 손에 주어질 것입니다.

신의 힘...수준이라면 그 하나하나의 파급효과는 세계지배..쯤도 가능할 것으로 생각됩니다.

이것이 그리드 컴퓨팅의 잘 보여지지 않는 이야기 입니다.

우리나라 이야기를 하자고요..?

어떻게 돌아가는지 조금 들어서 알고 있지만
말하면 가슴만 답답해 지니까 그만두겠습니다.

Grid 망에 분산 컴퓨팅 기술을 어느정도 사용하는건 사실이지만, 분산 컴퓨팅의 일종으로 보기에는 좀 많이 허접해보이지요. 차라리 그룹웨어의 일종으로 보면 이해하기가 편합니다.
그런데 그룹웨어도 학문적으로는 분산 컴퓨팅에 끼어 있습니다. 분산 컴퓨팅의 주류는 아니나 요즘들을 주류로서의 성격으로 부상하고 있는듯합니다.

현재 KISTI(한국과학기술연구원, 카이스트내에 있음)를 주축으로해서 올해부터 본격적으로 국가 그리드망을 구축하고 있습니다. 대한민국에 있는 6대의 수퍼 컴퓨터에 있는 자원들을 공유하는 것이 목적입니다. 달리말하면 분산된 수퍼컴퓨터의 자료들에 대해 전체적으로 단 하나의 View를 제공하는 것이겠죠. 이렇게 Single View를 제공하는 건 아주적 어려운 일입니다. Transaction과 동기화 문제 해결, Fault-Tolerance등의 이론들을 십분 활용해야 합니다.

그리고 KISTI에서는 Cluster에 관해서도 연구중입니다. 왠만한 굵직한 것은 다하는듯한데,
막상 홈페이지에 들어가면 이 사람들 노나 싶을 정도의 기초적인 정보 뿐입니다. 진짜 정보는 Beowulf 관련 사이트에 가면 무궁무진하게 있습니다.

암튼 kisti.re.kr에 가면 어느정도의 정보를 얻을 수 있을겁니다.
너무 기대하지는 말기 바람. 그래도 대한민국에서 똑똑한 사람들 많이 모아서 연구하는 곳이라 잘 되기를 기대함.

일반적으로
그리드 또는 클러스터기술이 과학커뮤니티(물리학,화학,의학등)의 고성능컴퓨팅 환경이 필요로하는 분야에
슈퍼컴퓨터의 자원을 공유한다는 차원에서 등장한
플랫폼으로 여겨집니다.

따라서 차세대 인터넷 플렛폼으로 자리잡을지는
미지수(?)로 여겨지며 다만 분산환경에서의
자원공유의 발전된 기술은 차세대 인터넷 플랫폼에
적용될런지는 모르겠네요.

고성능 컴퓨팅 환경에서 작업이 필요한 불특정
다수의 사용자의 요구가 있다면
고성능 컴퓨팅환경을 제공하는 사업자 또는 기관이
있어야 할 터인데...