새로운 검색

If you are not happy with the results below please do another search

133 검색 결과: 빅데이터

1

중국과학원 지구빅데이터공유플랫폼, 5PB의 데이터 공유 가능

최근 중국과학원은 “지구 빅데이터 과학프로젝트”의 2018년도 주요 성과인 지구 빅데이터 공유 서비스플랫폼을 발표하였다. 지구 빅데이터 공유 서비스플랫폼은 다분야 대량 데이터를 통합시킨 서비스데이터 구동형 과학발견 및 의사결정 지원 과학플랫폼이다. 해당 플랫폼은 공유의 방식으로 전세계 사용자에게 전역 고유식별자(GUID) 정규화 지구 빅데이터를 체계적, 다원화, 동적, 연속적으로 제공한다. 또한 데이터, 컴퓨팅, 서비스를 통합시킨 데이터 공유 시스템 구축을 통해 지구과학 데이터 공유의 신모델 형성을 촉진한다.
현재 동 플랫폼에 탑재된 공유 데이터 총량은 약 5PB에 이르는데 그중 지구관측 데이터가 1.8PB, 생물생태 데이터가 2.6PB, 대기해양 데이터가 0.4PB, 기초지리 데이터 및 지상관측 데이터가 0.2PB를 차지한다. 한편으로 층서학 및 고생물 데이터베이스에 기록된 49만 개 데이터, 중국 생물종 목록의 360만 개, 미생물자원 데이터베이스의 42만 개, 오믹스학 관련 10억 개 데이터를 공유하였다.
이번에 발표한 지구 빅데이터 공유 서비스플랫폼은 2개 핵심시스템 즉, 데이터 공유 서비스시스템과 CASEarth Databank 시스템 그리고 1개 지역시스템 즉, 디지털 실크로드 지구빅데이터시스템이다.
2개 핵심시스템 중 하나인 데이터 공유 서비스시스템은 지구 빅데이터 특별프로젝트의 데이터자원을 공개·공유하는 관문(gateway)이다. 현재 동 서비스시스템은 5PB 데이터에 대한 온라인 검색, 조회, 다운로드 등 공유서비스를 제공하고 있다.
다른 하나의 핵심시스템인 CASEarth Databank 시스템은 긴 시계열의 다원 지구관측데이터 즉석활용 제품군을 제공한다. 예를 들면 1986년 중국 측지위성 지상국 설립 이후 20만 개 장면 총 240만 개 제품, 가오펀(高分)위성 1/2 및 즈위안(資源)3호 위성 등에 기반한 2m 해상도의 중국지도, 국내외 위성 데이터로 작성한 30m 해상도의 세계지도, 중점지역 서브미터급 즉석활용 제품군 등을 제공한다.
이외, 디지털 실크로드 지구빅데이터시스템은 “일대일로” 지역의 자원, 환경, 기후, 재해, 유적 등 테마 데이터세트 94개, 자체 지식재산권 데이터 제품 57종, 120TB(테라바이트)를 초과하는 공유 데이터를 보유하고 있다. 현재 동 시스템은 페타바이트(Petabyte)급 하드웨어/소프트웨어 환경을 갖추었고 중국어, 영어, 프랑스어 등 다중 언어 버전으로 국제 관련 기관에 공유하고 있다.
현재 하드웨어 조건의 지속적인 개선으로 지구 빅데이터 공유 서비스플랫폼의 데이터는 지속적으로 온라인화 될 전망이고 해마다 3PB에 달하는 데이터를 업데이트할 예정이다.

2

중국의 빅데이터 지원 정책과 동향

데이터가 국력이 되는 빅데이터 시대에 들어 중국은 “빅데이터 개발·활용 강화를 통한 데이터 강국 매진” 목표를 천명하였다. 국가차원에서 “빅데이터 발전 촉진 행동 강요” 등을 비롯한 정책뿐만 아니라, 빅데이터 전문 연구개발프로그램을 마련하여 빅데이터 관련 핵심기술 개발을 추진하고 있다. 또한 BAT를 비롯한 선도업체들이 대규모적 데이터를 토대로 빅데이터 발굴·활용 관련 기술 및 서비스를 개발하고 있다.

본문은 중국 빅데이터의 주요 진흥 정책, R&D 활동과 주요 동향을 정리하여 한국과의 협력 방향과 시사점을 도출하고자 한다.

목차

I. 빅데이터 강국 목표의 제기

II. 주요 빅데이터 지원 정책

III. 빅데이터 R&D활동 및 주요 동향

IV. 시사점 및 전망

3

구이저우, 빅데이터로 혁신적 발전 선도

2018년 5월 말, 중국국제빅데이터산업박람회를 개최할 구이양(貴陽)이 세인의 주목을 받고 있다. 구이저우(貴州)는 불과 몇 년 사이의 유치·육성을 통하여 빅테이터 산업에서 세계가 놀랄 정도를 성과를 얻었다. 최근에 발표된 1/4분기 경제지표에 따르면 구이저우의 GDP 성장률은10.1%를 기록하여 중국 앞자리를 차지하였다. 과학기술자원에서 인프라시설까지 모든 기반이 빈약하던 서부지역 성(省)으로부터 다년간 고속 GDP 성장세를 유지할 수 있었던 것은 구이저우가 동부지역과 구별화된 색다른 혁신 발전을 이끌 수 있는 빅데이터 길을 개척하였기 때문이다.

구이저우의 빅데이터 산업 유치는 초기에 성장성을 인정받지 못했다. 하지만 끈질긴 노력 끝에 “사흘 맑은 날 없고 삼척 넓은 땅 없는” 지리적 약점을 극복하고 빅데이터 산업의 옥토로 변모시켰다. 구이저우는 날씨가 서늘하여 에너지소비를 줄일 수 있고 산으로 둘러싸여 지반이 안정적이며 또한 풍부한 전력자원은 빅데이터 산업의 쾌속발전을 이룰 수 있는 기반을 마련하였다. 구이저우는 정층설계를 앞세워 빅데이터 성장의 결정적 시기를 잡고 선행동·선시행, 혁신 격려, 실패 용납의 분위기를 형성하였다.

4

中, 빅데이터 검색 속도가 빠르고 성능 가격 비율이 높은 서버 개발

2018년 3월 13일 중국 고성능 컴퓨터 선도 기업 – 중국과학원 수광(曙光)정보산업주식유한회사(중커수광으로 약칭) 소식에 의하면, 중커수광에서 자체로 개발한 이중랙 케이스 I620-G30 서버 클러스터의 성능 및 성능 가격 비율은 모두 세계기록을 갱신하였다. 1개월 동안 세밀한 심사를 거쳐 TPCxT-BB는 TPC 공식사이트에 이와 같이 공개하였다. 해당 서버클러스터는 30TB의 데이터 규모에서 1분에 3,383.95차의 빅데이터 검색을 완성할 수 있으며 매차 검색 원가는 307.86달러(한화 약 32.77만)로써 세계에서 빅데이터 검색 속도가 가장 빠르고 성능 가격 비율이 가장 높은 서버이다.

TPCxT-BB(TPCBenchmark Express-BigBench)는 국제표준화조직에서 TPC 기반의 빅데이터 기술 추세에 대비해 개발한 전문성 빅데이터 시스템 성능을 평가하는 산업용 테스트 도구로서 현재 세계범용표준으로 사용되고 있다. 해당 표준은 국제 서버 생산업체, 빅데이터 서비스 제공업체 및 터미널 서비스 사용자가 모두 인정하며 해당 발표는 빅데이터 관련 업체에 대하여 광범위한 영향력을 갖고 있다.

이번 테스트는 매니지먼트 노드(Management node)를 포함하여 모두 수광 I620-G30 서버를 사용하였다. 해당 서버는 인텔의 확장 가능한 프로세서 플랫폼을 기반으로 새로 개발한 다양한 용도의 이중 서버로서 랙케이스 구조에 대한 업그레이드, 플랫폼 최적화 및 기술 혁신을 통하여 빅데이터의 응용에 아주 적합하게 개선되었다. I620-G30 클러스터의 빅데이터 검색 테스트에 의하면 성능 측면에서 30TB 데이터 규모에서 1분당 빅데이터 검색 횟수는 지난번 세계기록 성능에 비하여 1배 이상 높으며 원가 측면에서 1분당 평균 1차 검색 원가는 지난번 세계기록에 비하여 약 절반으로 감소되었다.

TPC 테스트의 세계기록 확보는 수광 서버가 제품 성숙도, 서버 국제표준화 과정에서 이정표적 의미를 지닌 한걸음을 내디디었음을 의미한다.

5

빅데이터를 잘 활용하기 위해 먼저 알아야 할 것

인류 사회가 정보화 발전의 새로운 단계에 들어섬에 따라, 빅데이터가 경제발전, 사회질서, 거버넌스, 국민생활 등에 큰 영향을 미쳤음. 빅데이터 발전시대의 기회를 잡아, 새로운 국면의 발전 시작이기도 하면서, 국가차원에서 반드시 해결해야 할 시대적 과제이기도 한다.

그렇다면, 빅데이터 업계의 발전 현황은 도대체 어떤 모습인가? 빅데이터 발전의 “구동력”은 어디서 오는 걸까?

상세내용은 첨부파일을 참조.

6

2017년 중국 빅데이터 10대 발전추세

국가발전개혁위원회, 공업정보화부, 국가인터넷정보판공실과 구이저우성 인민정부가 공동 주최한 중국 국제빅데이터박람회(www.bigdata-expo.org)가 2017년 5월 25일~28일간 구이양시에서 개최되었다. “디지털경제로 신성장을 선도하자”를 주제로 개최된 이번 포럼은 회의 참가자 규모가 약 5.1만명에 달하였다. “ 국가빅데이터 시범구, 디지털경제, 블록체인 인터넷시대. 데이터오픈과 공유, 인공지능, 디지털안전과 위험제어, 지능제조” 등 7개 세션으로 나누어 총 77개의 분과 토론회의를 가졌다. 이번 포럼은 고위급 국제회의로 정계, 학계 유명 인사와 기업대표만 2천명이상 참석한 것으로 밝혀졌다.
알리바바 마윈 회장이 빅데이터포럼에 참석하여 “로봇지능(MI)- 인공지능(AI)을 초월하는 새로운 시대”를 주제로 다채로운 기조연설을 하였다. 마윈이 남긴 10가지 금언을 연설문에서 발췌하여 정리하였다.
이번 포럼에서는 또 블록체인, 로봇지능, 인공지능, 스마트제조, 빅데이터 표준화 등 다양한 주제의 발전방향이 거론되어 주목받았다. 포럼기간에는 또 빅데이터전시회 외에도, 빅데이터응용기술 국가공정실험실 현판식(중국 첫 빅데이터 공정실험실), <귀주 빅데이터 발전보고 백서> 발행식, <2017 중국 지방정부 데이터개방플랫폼 보고서> 발표회의 등 부대행사가 개최되었다.
2016년에 발표된 주요 빅데이터 정책과 2017년 중국 빅데이터 10대 발전추세 그리고 마윈이 빅데이터포럼 연설에 남긴 10가지 금언을 첨부파일로 정리하였다.(첨부파일 참조)

7

허난성 빅데이터 산업규모 1,000억 위안 돌파 예정

2016년 10월, 허난성 국가 빅데이터 종합실험지역이 최종적으로 확정되었다.

최근에 허난성 정부가 발표한 「허난성 국가 빅데이터 종합실험지역 건설구축 실시방안」(이하 「방안」)에 의하면, 2020년까지 허난성 빅데이터 핵심 산업규모가 1,000억 위안을 돌파할 것이다. 허난성 빅데이터 종합실험지역의 목표는 3~5년을 통해 빅데이터 혁신응용과 산업발전수준이 중국의 선두자리에 설 것이며 2018년까지 빅데이터 발전에 유리한 지역규정체제를 초보적으로 구축시키고 빅데이터 플랫폼건설, 자원통합과 정무 데이터 개방공유 등 성과를 이루고 빅데이터가 중점 영역응용에서 뚜렷한 성과를 거두고, 산업집합발전 트렌드를 초보적으로 형성시킨다.

2020년까지 빅데이터 발전에 유리한 체제·메커니즘을 구축시키고 각 업계의 응용을 전면적으로 전개시키며 빅데이터 핵심 산업규모가 1,000억 위안을 돌파하며 관련 산업규모가 5,000억 위안을 초과한다.

8

복잡 및 이질성을 갖는 거대용량 빅데이터 분석의 핵심기술

최근, 둥베이(東北)대학교 왕궈런(王國仁) 연구팀은 “거대용량 이질 데이터 통합 관리·분석 기술 및 응용” 프로젝트를 개발하여 빅데이터 통합품질, 관리효율 및 분석확장성 등 핵심 기술을 파악하였고 이질 빅데이터의 통합, 관리, 분석을 구현함으로써 향후 “디지털 물자원”, “디지털 의료” 및 “디지털 국토자원” 등 분야의 거대용량 이질 데이터 통합관리 및 분석에 중요한 역할을 할 전망이다.

빅데이터 처리 과정에서 거대용량 데이터는 인간이 데이터를 파악하고 이해할 수 있는 능력을 훨씬 초월하였다. 특히 이질 데이터는 일관적인 격식 및 규범의 부족으로 다양한 분야 및 다양한 소프트웨어 시스템에서의 전송 및 공유가 아주 어렵다. 이러한 문제점에 대비해 연구팀은 모드 매칭, 데이터 클리닝(data cleaning), 데이터 관리 및 데이터 분석 등 핵심 기술을 토대로 인간-컴퓨터 상호작용 기반 데이터통합시스템을 개발하였다. 해당 시스템은 현재 세계에서 가장 선진적인 데이터 클리닝 시스템에 비하여 데이터 통합 품질이 10 %이상 향상되었고 통합방법의 가용성(Availability)은 세계 선진 수준에 도달하였으며 범용적으로 사용하고 있는 시스템에 비하여 데이터 관리 효율이 50% 이상 향상되었다. 또한 세계에서 가장 먼저 빅데이터 기반 분산식 한계 러닝 머신(extreme learning machine, ELM) 데이터 분석 기술을 제안하였다. 해당 시스템의 플랫폼 확장성, 데이터 확장성, 은닉 노드 확장성, 데이터 마커 확장성은 약 20배 향상되었다.

9

13.5계획, 중국 빅데이터산업 발전계획

데이터는 국가의 기초적인 전략적 자원이자, 21세기 ‘다이아몬드 광산(diamond mine)’이기도 하다. 중앙정부와 국무원은 빅데이터의 경제사회 발전에서 일으키는 역할을 고도로 중요시하고, 18기 5차전국회의에서 ‘국가 빅데이터전략 실시’를 제시하였으며, 국무원은 「빅데이터 발전 촉진 행동요강」을 발표하여 빅데이터의 발전을 본격화하고, 데이터 강국 건설을 가속화하였다. 13.5 기간은 중국의 전면적 소강사회 건설에서 마지막 승패를 결정짓는 단계이자 기존의 동력과 새로운 동력이 지속적으로 전환하는 핵심단계로서 글로벌 차세대 IT산업은 급속히 변화하는 단계에 처했고, 빅데이터기술과 응용은 혁신돌파단계에 처했으며, 중국 내 시장수요는 폭발적으로 증가하는 단계에 처하여 중국의 빅데이터산업은 중요한 발전기회에 직면하게 된다. 따라서 기회를 선점하여 빅데이터산업의 발전을 촉진하는 것은 정부의 거버넌스능력 제고, 민생 공공서비스의 최적화, 경제 구조조정과 혁신발전 촉진에 대해 중대한 의미를 지닌다. 중국 빅데이터산업의 지속적이고 건전한 발전을 촉진하기 위해 18기 5차전국회의 정신을 고양하고, 국가 빅데이터전략을 실시하며, 국무원의 「빅데이터 발전 촉진 행동요강」을 구체화하기 위해 「국민경제와 사회발전의 13차 5개년 계획 요강」의 총체적인 배치에 따라 동 계획을 작성한다.

상세내용은 첨부파일을 참조.

10

13.5계획, 빅데이터 산업발전계획(2016~2020년) 발표

중국 빅데이터 산업의 지속적이고 건전한 발전을 추진하고 국가 빅데이터전략과 국무원에서 발표한 「빅데이터 발전추진 행동요강」을 실행하기 위하여 「중화인민공화국 국민경제·사회발전 13차 5개년 계획요강」에 근거하여 공업·정보화부는 최근에 「빅데이터 산업발전계획(2016~2020년)」(이하 “계획”으로 약칭)을 발표하였다.

계획은 빅데이터 산업 혁신발전능력 강화를 핵심으로 빅데이터 기술제품의 연구개발 강화, 공업 빅데이터 혁신 응용 심화, 업계 빅데이터 응용발전 추진, 빅데이터 산업 주체 육성 가속화, 빅데이터 표준시스템 구축 추진, 빅데이터 산업 기반시스템 완비, 빅데이터 안전보장능력 향상 등 7가지 임무를 명확히 하였다. 그리고 빅데이터 핵심기술·제품의 연구개발과 산업화 공정, 빅데이터 서비스능력의 향상공정 등 8가지 중점 공정을 제기하였고 체제·메커니즘 혁신 추진제도 제정, 관련 정책법규·제도의 완비, 정책적 지원 강화, 멀티 인재팀의 구축, 글로벌화 발전 추진 등 5가지 보장대책을 연구·제정하였다. 계획에서는 13차 5개년 기간 빅데이터 산업의 발전방향, 원칙·목표 등을 지적하였고 이로써 빅데이터 산업의 지속적이고 건전한 발전을 인도하고 제조강국·네트워크강국으로 발전하는 과정에서의 든든한 기반을 마련할 것이다.