게시 및 게시 날짜 : 2003/11/25

전 세계의 스토리지를 통합하는 기본 바카라 필승법 소프트웨어 인 GFARM의 무료 릴리스

- 국제 컨퍼런스 SC2003 대역폭 챌린지 컨테스트에서 분산 인프라 상을 수상했습니다

포인트

  • 대규모 데이터 처리를 실현하기 위해 전 세계적으로 배포 된 클러스터에 스토리지를 통합하는 바카라 필승법 기본 소프트웨어gfarm"오늘부터무료 릴리스 ON
  • "gfarm"단일 바카라 필승법 인증 기술을 사용하여 여러 PC 클러스터간에 안전하고 간단한 리소스 공유를 달성하는 반면, 복제 관리 기술은 높은 안정성과 높은 데이터 처리 성능을 달성합니다
  • SC2003 장소를 포함하여 6 개의 일본 및 미국 위치를 연결하는 바카라 필승법 환경에서 236 개의 컴퓨터를 사용하여 70 개의 테라 바이트의 대용량 고속 공유 파일 시스템을 달성합니다
  • 국제 컨퍼런스의 대역폭 챌린지 컨테스트 에서이 회사는 고성능 및 높은 신뢰성으로 "Distributed Infrastructure Technology Award"를 수상했습니다

요약

바카라 필승법 연구 센터 [Yoshikawa Hiroyuki의 회장] (이하 "AIST"라고 불리는)바카라 필승법기술 방법입니다바카라 필승법 데이터 팜를 개발하기 위해 다른 연구소와 협력하고 있습니다 이번에는 국제 회의SC2003, 기본 바카라 필승법 소프트웨어 "gfarm|"에 대한 데모 실험을 성공적으로 수행했습니다

또한 오늘의 "Gfarm Ver10"공식적으로 공개되었습니다부품에서 무료 릴리스가 시작되었습니다

 gfarm전 세계에 많은 네트워크가 있습니다스토리지를 허용하는 소프트웨어입니다 단일 스토리지로 사용됩니다 총 단일 파일 시스템을 실현하려면 사용자는 실제로 데이터를 저장합니다자원위치에 있습니다 관리 조직과는 다른 리소스도 있습니다바카라 필승법 단일 인증 기술를 사용하여 하나의 인증만으로 안전하게 공유 할 수 있습니다

 gfarm, 전 세계의 대규모 데이터 처리를 분산시킴으로써 데이터 액세스 지역을 활용하여 고 처리 성능을 인식합니다 동일한 데이터가 여러 위치에서 복제되며 근처의 데이터는 사용자에게 알리지 않고 자동으로 사용됩니다 이는 프로세서 수에 따라 성능을 향상시킵니다 일부 장치가 실패하거나 네트워크가 실패하면 다른 사본을 참조하여 높은 신뢰성을 얻으십시오

이 실험에서, 미국 피닉스에서 개최 된 국제 회의 SC2003 (기간 : 2003/11/15-2003/11/21), 총 236 개의 컴퓨터로 구성된 PC는 일본과 미국의 6 개 지역에 배포되었습니다클러스터하나의 고속 대규모 대용량 공유 파일 시스템 (스토리지 용량 : 70TB, Terabytes : 1TB는 1조차 문자, 70TB는 15,000 DVD)gfarm에 의해 실현되었습니다 우리는이 고속의 대용량 공유 파일 시스템에서 18TB의 대규모 데이터를 분석하기위한 데모 실험을 수행했으며 안정적이고 고성능을 확인했습니다 이 분산 환경에서 높은 신뢰성과 성능을 인정하여 국제 회의에서 대역폭 챌린지 콘테스트에서 "분산 인프라 기술 상"을 수상했습니다 이 결과는 6 개의 일본과 미국 기관 (AIST, 고 에너지 가속기 연구소, 도쿄 기술 연구소, Tsukuba 대학교, Apan Tokyo XP 및 미국 인디애나 대학교에 의해 협력했습니다Tsukuba Wan,apan,Supersinet,Maffin의 네트워크 지원으로 구축 된 바카라 필승법 환경에서 실현되었습니다



실험 컨텐츠 및 바카라 필승법 환경

10595_10819gb(기가 바이트)가 생성되었고 여러 PC 클러스터를 사용하여 총 18TB의 초대형 데이터 처리에 대한 데모 실험이 수행되었습니다

이 데이터 바카라 필승법 실험에서 Tsukuba Wan과 Supersinet은 일본 내 고속 넓은 지역 네트워크에 포함되어 있으며 APAN/ transpacandSupersinet, 주로 미국 내Abilene기타 고속 넓은 지역 네트워크 및 장소에서Scinet를 사용했습니다 [그림 1] 은이 실험에 안정적으로 사용 된 각 네트워크의 데이터 전송 성능 및 컴퓨터 성능뿐만 아니라 사용 된 네트워크와 컴퓨터 간의 연결을 보여줍니다

실제 응용 프로그램에서 높은 전송 성능을 달성하기 위해서는 단순히 고성능 네트워크를 사용하는 것만으로는 충분하지 않으며 필요한 데이터를 제공하기 위해 고속 파일 액세스 성능을 달성해야합니다gfarm네트워크를 통해 배포 된 데이터에 대한 처리를 해당 데이터를 보유하는 원격 시스템으로 배포하여 데이터 액세스의 로컬을 최대한 활용합니다 이 실험 환경에서 고속 파일 액세스 총 13GB/s (036 초 안에 단일 DVD를 읽고 쓰기)로서 높은 네트워크 전송 성능을 가능하게합니다

이 실험에서 AIST는 바카라 필승법 데이터 농장을위한 소프트웨어를 개발하고 데모 실험 환경을 조정했으며, Tsukuba University는 고 에너지 물리학을위한 시뮬레이션 데이터를 만들었습니다 또한 각 참여 조직은 데모 실험, 컴퓨팅 리소스, 네트워크 리소스 및 디스크 리소스를 제공하고 환경을 구성하는 것에 관한 토론을 반복했습니다

이 실험에서 구성된 바카라 필승법 환경의 그림
그림 1 :이 실험에서 구성된 바카라 필승법 환경

미래 계획

바카라 필승법 데이터 농장의 AIST의 연구 및 개발은 국제 표준을 주도하고 있습니다 AIST는 다른 관련 연구 기관 및 회사와 협력하여 바카라 필승법 기술 포럼 표준화글로벌 바카라 필승법 포럼(GGF)까지 바카라 필승법 파일 시스템 WG를 제안했습니다 국제 표준화는 글로벌 스토리지 공유 및 통합을 촉진합니다gfarm로 실현 된 대규모 데이터 공유 및 대규모 데이터 분석은 실현하기가 더 쉬워 질 것입니다

바카라 필승법 데이터 농장은 (1) 연간 번호PB입자 물리학과 같은 대규모 데이터 분석 외에도 (Petabytes)의 실험 데이터 분석, (2) 천문학에서의 모든 다중 파장의 관찰 데이터 분석, (3) 생물 정보학에서의 유전자 분석, (4) E-Goverce 및 E-Gommerce와 같은 비즈니스 분야에서 고도로 신뢰할 수있는 데이터 처리 및 (4) 및 (4) E-Goverce 및 e-Gommerce 및 e-Gommerce 및 e-Gommerce 및 (5) 센터, 지리적으로 먼 사이트 간의 고속 데이터 복제로 중복성 및 하중 밸런싱을 보장 할 수 있습니다 대규모 데이터를 안전하고 신뢰할 수있는 기본 기술로 매우 효과적이며 고속 처리를 달성하는 데있어 광범위한 산업 응용 분야에서 사용할 수 있습니다



터미널 설명

◆ 바카라 필승법
차세대 인터넷 기술로서, 여러 조직간에 컴퓨팅 리소스, 데이터베이스, 실험 장비 등을 안전하고 동적으로 공유하고 문제를 해결하는 기본 기술입니다 바카라 필승법는 원래 전력망에서 비롯되며 전력망이 경제적이고 안정적인 전원 공급 장치를 허용하는 것처럼 전기라는 서비스를 제공하는 것처럼 컴퓨팅 리소스, 디스크 리소스 등에 경제적이고 안정적인 액세스를 가능하게하여 컴퓨팅 서비스, 데이터베이스 서비스 등을 안전하게 얻을 수있는 기본 기술입니다[참조로 돌아 가기]
◆ 바카라 필승법 데이터 팜
바카라 필승법 표준 기술을 기반으로 대규모 데이터 처리를 달성하기 위해 전 세계 통합 스토리지를위한 기초 아키텍처 많은 양의 데이터, 빠른 액세스 및 고속 데이터 처리를 높은 신뢰성으로 안전하게 공유 할 수 있습니다gfarm이 아키텍처를 실현하기 위해 AIST가 주로 개발 한 기본 소프트웨어의 이름입니다[참조로 돌아 가기]
◆ SC2003
고성능 네트워킹 및 컴퓨팅(올해는 16 위) 매년 미국에서 개최됩니다 세계에서 가장 진보 된 고품질 연구 논문이 발표되며 대규모 기업 및 연구 전시회가 약 6,000 명의 참가자와 함께 개최됩니다[참조로 돌아 가기]
◆ 스토리지
컴퓨터 내에 데이터 및 프로그램을 저장하는 장치 대용량 및 고속 처리가 필요합니다[참조로 돌아 가기]
◆ 자원
컴퓨터의 디스크, 메모리 및 컴퓨팅 전원과 같은 리소스[참조로 돌아 가기]
◆ 바카라 필승법 단일 인증 기술
비밀번호 등을 사용하여 사용자를 인증함으로써 관리 조직을 넘어서는 컴퓨터와 같은 다른 모든 사용자 인증을 가능하게하는 기술 이 경우 비밀번호와 같은 비밀 정보는 전송되지 않습니다글로벌 바카라 필승법 포럼에 의해 수행되고 있습니다[참조로 돌아 가기]
◆ 클러스터
일반 목적 네트워크를 통해 많은 범용 PC를 연결하는 병렬 컴퓨터[참조로 돌아 가기]
◆ GB, TB, PB
GB는 10 억 문자, 결핵은 GB (200 DVD)의 1000 배, PB는 TB (200,000 DVD)의 1000 배입니다[참조로 돌아 가기]
◆ Tsukuba wan
이 네트워크는 초고속 (10GBPS) 액세스 링을 사용하여 Tsukuba Research City 내의 연구 기관을 연결하며 슈퍼 컴퓨터, 대규모 데이터베이스 및 Tsukuba Research City 전역에서 공동 연구를 수행하는 고급 시뮬레이션 소프트웨어를 개척하기위한 것입니다[참조로 돌아 가기]
◆ apan
아시아 태평양 고급 네트워크에 대한 약어 아시아 지역의 최첨단 네트워크 연구와 고성능 광대역 응용 프로그램의 개발을 촉진하여 아시아 지역의 중요한 백본 네트워크 중 하나입니다 도쿄 XP는 네트워크 운영 센터입니다[참조로 돌아 가기]
Supersinet
이 고속 네트워크는 10GBPS 광학 커뮤니케이션 기술을 사용하여 학술 연구 재단으로 제공되며 2002 년 1 월 4 일부터 교육, 문화, 스포츠, 과학 및 기술부 정보 연구소에서 운영하고 있습니다[참조로 돌아 가기]
◆ Maffin
산림 및 어업 연구 네트워크 농무부(농무부 임업 및 어업 연구 네트워크)[참조로 돌아 가기]
transpac
일본과 미국을 연결하는 APAN과 미국 고속 넓은 지역 네트워크 간의 연구 네트워크 프로젝트 이것은 NSF (National Science Foundation)와 교육 문화, 스포츠, 과학 및 기술부에 의해 촉진되고 있습니다[참조로 돌아 가기]
Abilene
인터넷2 (비즈니스 및 미국 정부를 포함한 대학 주도 컨소시엄, 차세대 인터넷 건설을 목표로 함)[참조로 돌아 가기]
Scinet
국제 회의 SC2003 동안 설치된 고속 실험 네트워크 미국의 주요 광범위한 지역 네트워크와 빠르게 연결되어 있습니다[참조로 돌아 가기]
글로벌 바카라 필승법 포럼
주로 1999 년 미국에서 시작되었습니다바카라 필승법 포럼바카라 필승법 기술을위한 세계적 수준의 표준화 조직은 2000 년 11 월 유럽과 아시아 국가의 활동에 참여하여 조직되었습니다[참조로 돌아 가기]

관련 기사


연락

연락처 양식