도시 건설의 데이터 단위에는 다음이 포함됩니다.

이 유닛의 발전 속도는 1024(2의 10승)입니다.

위키피디아 정의

연구기관의 정의

맥킨지 글로벌 연구소 정의

하둡은 2005년에 탄생했다.

2008년 말, 미국의 일부 유명 컴퓨터 과학 연구자들에 의해 빅데이터가 인정되었습니다.

2009년 인도 정부는 신원 관리를 위한 생체인식 데이터베이스를 구축했으며 UN Earth Pulse 프로젝트는 휴대폰과 소셜 네트워킹 사이트의 데이터를 사용하여 트레포네마병 발병을 분석하고 예측하는 방법을 연구했습니다.

2010년 2월, 케네스 쿠키어(Kenneth Cukier)는 The Economist에 14페이지 분량의 빅데이터 특별 보고서 "Data, Ubiquitous Data"를 게재했습니다.

2012년 3월 오바마 행정부는 백악관 홈페이지에 '빅데이터 연구개발 이니셔티브'를 발표했다.

2014년 4월, 세계경제포럼(World Economic Forum)은 '빅데이터의 수익과 위험'이라는 주제로 글로벌 정보기술 보고서를 발표했습니다.

2017년 글로벌 데이터 총량은 21.6GB로, 현재 글로벌 데이터의 연간 성장률은 약 40%에 달한다.

큰 사이즈

고속

다각화

낮은 가치 밀도.

(1) 과학적 연구는 빅데이터를 생산한다.

(2) 사물인터넷 기술은 빅데이터를 생성한다.

(3) 네트워킹은 빅데이터를 생성한다.

사물 인터넷, 모바일 인터넷, 소셜 네트워크 및 전자 상거래는 차세대 정보 기술의 응용 형태입니다. 이러한 애플리케이션은 작동 중에 점진적으로 빅데이터를 형성하고 생성합니다.

빅데이터 및 관련 기술이 지속적으로 발전함에 따라 빅데이터 시장을 위한 새로운 제품, 신기술, 새로운 비즈니스 형식 및 새로운 서비스가 점차 등장하고 빠르게 발전하고 있습니다.

정보 기술의 발전으로 점점 더 많은 산업이 변화와 발전의 궤도에 진입했으며, 기업의 의사 결정은 점차 비즈니스 중심에서 데이터 중심으로 전환되어 기업이 보다 효과적이고 표준적인 마케팅을 시작할 수 있도록 지원합니다. 계획. 소비자 요구에 더욱 부응하는 기업을 위한 맞춤형 서비스 측정을 개발할 수 있습니다.

빅데이터 및 관련 기술이 과학 연구에 미치는 영향이 점점 더 뚜렷해지고 있습니다.

2018년 글로벌 디지털 보고서(Global Digital Report)에 따르면, 2018년 전 세계 소셜 미디어 사용자는 31억 9600만 명에 달했습니다. 전년 대비 13% 증가했습니다.

소위 컴퓨터는 실제로 작동하는 창입니다

모니터링 프로그램의 경우 이 창은 하드웨어를 직접 처리하지 않으며 모든 리소스는 모니터링 프로그램에 의해 예약되어야 합니다. 할당이므로 이 Windows 머신은 가상 머신, 즉 vm이라고 합니다. 모니터링 프로그램을 통해 하드웨어 머신을 운영체제로부터 분리하는 과정이 가상화입니다.

자원 풀

보조 가상

사용자 자체 관리.

네트워크에 연결하세요.

프라이빗 클라우드

퍼블릭 클라우드

하이브리드 클라우드

인프라 및 서비스

플랫폼 및 서비스

소프트웨어 및 서비스

다른 사람

클라우드 컴퓨팅은 구성 가능한 컴퓨팅 리소스 풀에 대한 편리한 주문형 네트워크 액세스를 제공하는 종량제 모델입니다. 이러한 리소스는 최소한의 관리 노력이나 서비스 공급자와의 상호 작용을 통해 신속하게 프로비저닝할 수 있습니다.

바이두 클라우드

알리 클라우드

아마존 AWS 클라우드 서비스.

마이크로소프트 애저 클라우드 컴퓨팅.

클라우드 컴퓨팅 아키텍처는 물리적 자원 계층, 자원 풀 계층, 관리 중간 계층 및

지각층

전송 계층

데이터 레이어

애플리케이션 레이어

터미널 레이어

분포

투명도

단일성

동종

GFS

HDFS

세프

광택

분산 애플리케이션 및 서비스

분산된 정적 리소스

분산 데이터 및 스토리지

분산 컴퓨팅

배포란 서로 다른 여러 서버에 서로 다른 서비스 모듈을 배포하고 운명 호출을 통해 함께 작동하며 외부 세계에 서비스를 제공하는 것을 의미합니다.

클러스터링은 동일한 애플리케이션이나 서비스 모듈을 여러 개의 서로 다른 서버에 배포하는 것을 의미하며 클러스터가 함께 사용됩니다. 균형 잡힌 장비는 외부 세계에 서비스를 제공합니다.

프로젝트 창시자인 Dong Cunting은 Hadoop이라는 이름이 어떻게 붙여졌는지 설명합니다. "이 이름은 내 아이들이 잘 먹은 갈색 코끼리에게 붙여준 이름입니다."

초기 버전(현재 IDFS I MapRediuce라고 함)은 2004년 Dorug Cutting fu Mike Catiarcla에 의해 구현되었습니다.

2005년 12월 1일 - Nutch가 새로운 프레임워크에 이식되었으며 Hadoop은 20개 노드에서 안정적으로 실행되었습니다.

2006년 2월, MapRcduce와 HDFS의 독립적인 개발을 지원하기 위해 Apache Hadoop 프로젝트가 공식적으로 시작되었습니다.

2006년 2월 Yahoo의 그리드 컴퓨팅 팀은 Hadoop을 채택했습니다.

2006년 4월 표준 정렬(노드당 10GB)은 188개 노드에서 47.9시간 만에 실행되었습니다.

2007년 7월에 연구 클러스터는 900개 노드에 도달했습니다.

2008년 4월, 연구 클러스터는 매일 10TB의 데이터를 로드했습니다.

2009년 4월 - 분당 정렬 성공, 59초 안에 500GB 정렬(1400개 노드) 및 173포인트

Hdfshadop 플랫폼의 분산 파일 관리 시스템은 AP의 가장 중요한 부분입니다. 구성 요소 중 하나

Natanode는 특정 작업을 실행하는 것입니다.

Danodenamenoe 간의 상호 작용

Maprduce는 adop의 핵심 컴퓨팅 구성요소로, 대용량 데이터의 병렬 컴퓨팅에 사용됩니다. Mapreduce 프레임워크의 핵심 단계는 크게 Map과 Reduce의 두 부분으로 나뉩니다.

빅데이터는 대기업뿐만 아니라 다양한 규모의 기업에도 적합합니다.

빅 데이터 Hadop을 위한 외부 데이터에 대한 난해한 기업 및 중요한 내부 지식을 위한 기반을 제공합니다.

Hadop은 구조화되지 않은 데이터에 대해 선호되는 빅 데이터 분석 솔루션으로 빠르게 성장했습니다.

구글과 하둡은 뗄래야 뗄 수 없는 관계다.

IBM은 AP의 클러스터로서 새로운 스토리지 아키텍처 생성을 발표했습니다. DB2 또는 ACL 데이터베이스를 실행하여 애플리케이션이 고성능 분석, 데이터 웨어하우스 애플리케이션 및 운영 컴퓨팅을 지원할 수 있도록 합니다.

인터넷 검색 대기업 바이두도 AP 활용을 고려하고 있다.

분산 인프라로서 Ap를 사용하면 사용자는 배포의 기본 세부 사항을 이해하지 않고도 분산 프로그램을 개발할 수 있습니다.

축소 전략을 조정합니다.

HD FS 효율성과 기능을 향상시킵니다.

말하기 실행 전략을 수정합니다.

리소스 사용량을 제어합니다.

플랫폼 설계 도면

모바일 단말기에 축적된 대용량 로그데이터를 최대한 활용해보세요.

사용자 이용 현황 및 광고 사업에 대한 빅데이터 분석을 실시합니다.

Alibaba Cloud의 빅데이터 기술을 활용하여 운영팀과 광고팀이 로그 데이터 분석을 기반으로 기존 비즈니스를 최적화할 수 있도록 지원합니다.

성숙한 빅데이터 기술과 빅데이터 인재자원을 바탕으로 기상감시 분야를 지속적으로 발전시켜 나가겠습니다.

Moji는 앞으로도 기상 모니터링 서비스의 폭을 더욱 확대해 나갈 것입니다.

초기 단계에서는 시장에 큰 영향을 미칩니다.

모바일 인터넷을 통해 다중 상호작용이 크게 향상되었습니다.

상업용 기상 서비스는 중국에서 엄청난 기업 기회가 될 것입니다.

사물 인터넷은 물리적 세계의 개체에 특정 감지 기능, 컴퓨팅 기능 및 실행 기능을 갖춘 다양한 장치를 배포하는 것을 의미합니다. 정보센싱장비는 네트워크 시설을 통해 정보의 전송, 협업, 처리를 구현함으로써 사람과 사람 사이의 광역 또는 대규모 통신을 구현한다. 사물과 사물 사이의 정보 교환 요구의 상호 연결.

데이터 수집

데이터 저장고

통계 분석

NB-LoT 기술

RFID 기술

센서 기술

네트워크 통신 기술

임베디드 시스템 기술

클라우드 컴퓨팅