3월 29일 (금) 오전 5:14

logo

  • home
  • head
  • itnews
  • product
  • mobile
  • game
  • benchmark
  • analysis
  • blog

개봉 2023.11.22. / 등급: 12세 관람가 / 장르: 드라마 / 국가: 대한민국 감독 : 김성수 출연 : 황정민, 정우...
노량: 죽음의 바다 / 개봉 2023.12. / 장르: 액션, 드라마 / 국가: 대한민국 감독 : 김한민 출연 : 김윤석, ...

미국 아마존의 연례 행사 AWS re:Invent 2016이 미국 라스베이거스에서 진행됐다. 아마존은 글로벌 클라우드 시장을 선도하고 있는 업계 리더로서 보고서의 주요 내용을 정리하여 소개한다.


re.jpg


AWS re:Invent 2016 기조 강연에 AWS CTO(Chief Technology Officer) 워너 보겔스가 등단하여 "Transformations"라는 테마에 대해 발표했다. 최근 IT 업계의 발표에서는 디지털 트랜스포메이션이라는 테마가 자주 언급되고 있는데 워너 보겔스는 이에 대해 개발 - 데이터 - 컴퓨트라는 3가지 영역이 핵심이라 설명한다. 


사물인터넷(IoT)이나 인공지능(AI) 등 최신 트렌드는 모두 데이터 분석과 연결되고 있다. 디지털 트랜스포메이션을 위해서는 수집한 데이터를 어떠한 방법으로 새로운 가치로 전환할 것인가, 또 이것을 어떻게 비즈니스로 확대하여 오퍼레이션의 효율화를 시행하고 비용 절감으로 연결할 것인가를 고려해야 한다. 


이에 대해 보겔스가 제안한 것이 "모던 데이터 아키텍처(The Modern Data Architecture)"라는 개념이다. 데이터 수집, 축적, 보존, 분석까지 일관된 사이클로 실현하는 이 아키텍처를 실현하기 위해 AWS가 어떻게 서비스를 제공하고 있는지, 어떻게 제공할 것인지에 대한 설명을 진행했다.


우선 데이터의 수집 부분이다. AWS에는 Amazon S3라는 데이터의 큰 양동이가 있기 때문에 모은 데이터를 일단 거기에 둔다. 실시간 스트리밍 데이터를 취급하는 서비스로는 Kinesis와 DynamoDB Streams 등이 있고 기존 데이터베이스의 이행을 실현하기 위해 Database Migration Service도 준비되어 있다. 대용량 데이터를 물리적인 어플라이언스, 컨테이너에서 이식하는 Snowball도 하나의 데이터 수집 도구라고 할 수 있다.



온라인 스토리지 웹 서비스인 Amazon S3는 지금도 꾸준히 진화하고 있다. S3 행사를 계기로 Lambda를 호출하거나 CDN인 CloudFront를 이용하여 업로드의 산출량을 향상시키는 기능(Transfer Accerelation)등은 최근 몇 년간 추가된 것이다. 최근에는 객체의 태그 추가, 로그 관리 CloudTrail에서 이벤트 관리, CloudWatch에 대한 매트릭스의 지출 등도 관리 기능으로 강화되고 있다.


또 수집한 데이터를 안전하게 보존하고자 AWS는 S3 외 블록 스토리지 EBS, 파일 서비스 EFS, NoSQL DB의 DynamoDB, 콜드 스토리지 Glacier 등 용도에 따른 데이터 서비스를 준비하고 있다. RDS 시리즈는 RDB를 서비스로 제공하며 Oracle과 SQL Server 같은 상용 제품, PostgreSQL과 MySQL, MariaDB 등의 OSS, 그리고 Aurora 같은 자사 서비스 등을 폭넓게 갖추고 있다.


aurora_pick_pg_2.png


이 중 높은 성능과 가용성을 자랑하는 MySQL 호환 Amazon Aurora는 성장율도 높고 많은 엔터프라이즈에서 도입되고 있다. 또한 스키마의 변환과 제로 다운 타임으로 리플리케이션을 실현하는 Database Migration Service도 착실하게 실적을 쌓아 이미 1만 4000 데이터베이스를 마이그레이션하고 있다. 그리고 이번에 PostgreSQL For Aurora가 발표되면서 MySQL과 PostgreSQL 같은 OSS DB에서 Auraora로의 이행이 점차 촉진될 것으로 예상되고 있다.


한편, AWS는 빅 데이터와 데이터 분석 서비스도 충실한 라인업을 자랑한다. Hadoop 환경을 제공하는 Amazon EMR(Elastic MapReduce) 외 검색 서비스인 Amazon Elasticsearch, 스트리밍 분석을 가능하게 하는 Amazon Kinesis, DWH 서비스 Amazon Redshift 등이 빅 데이터 기반을 지지한다. 또 지난해 4월에는 머신러닝을 제공하는 Amazon Machine Learning, 10월 re:Invent 에서는 BI 서비스인 Amazon QuickSight가 발표되고 있으며 데이터의 가시화까지 커버하고 있다. 이번에는 모바일 앱에 푸시 통지를 보내는 Amazon Pinpoint도 발표됐다. 


다만 이들 빅 데이터 서비스는 대용량 데이터를 고속으로 분석하는데는 제격이지만 심플한 분석을 빨리 마무리하는 것은 적합하지 않다. 아마존에 의하면 S3에 있는 Web 로그, 이벤트 데이터 등을 직접 분석하고 싶다는 사용자 피드백이 있기 때문에 이것에 맞추어 Redshift와 EMR을 보완하는 서비스로서 태어난 것이 새롭게 발표된 Amazon Atehna라고 밝혔다.


athena_elb_table_def_2.png


OSS의 Presto를 채용하는 Amazon Athena는 Amazon S3에 저장된 CSV, JSON, ORC, Parquet등의 데이터에 대해 표준 SQL로 쿼리를 걸 수 있다. 또 QuickSight가 모두 통합되고 있기에 분석 결과를 그래프화할 수 있다. 이것은 데이터를 이동하거나 로드하지 않아도 S3에서 쿼리 할 수 있기 때문에 인프라를 별도로 준비하지 않아도 되고 응답시간도 매우 짧다고 어필했지만 Amazon Athena가 Redshift나 EMR를 대체하는 존재는 아니라는 것을 강조했다.


glue.png


보겔스는 이와 같이 풍부한 서비스를 갖추고 있다고 밝히면서 앞서 말한 The Modern Data Architecture라는 관점에서는 아직 부족한 피스가 있다고 밝혔다. 그리고 그것을 위한 AWS Glue를 소개했다. AWS Glue는 데이터 카탈로그와 ETL을 제공하는 서비스로 S3와 RDS, Redshift, JDBC 대응 DB 등 다양한 소스에서 데이터를 추출하여 데이터 목록을 작성하고 사용자에 대한 데이터에 접속을 관리할 수 있다. 그리고 ETL(Extract, Transform, Load) 기능에 의해 분석하기 쉬운 포맷으로 데이터를 변환한다. 당연히 소스 데이터의 갱신에 대해 일련의 처리를 스케줄링하는 것도 가능하다. 보겔스는 AWS Glue 투입에 의해 모든 것이 커버되고 포괄적인 데이터 아키텍처를 AWS 상에서 실현할 수 있다고 어필한다.


그리고 데이터 처리에 대해 마지막으로 밝힌 것이 멀티 스케일에서 일괄 관리를 시행할 수 있는 AWS Batch. 이는 HPC와 거래 분석, 부정 감시, DNA 시퀀스·미디어 렌더링 등 Large Scale Processing 이라 불리는 영역에서 사용되는 패치 처리를 대상으로 한 것으로 멀티 스케일이 큰 장점이다.


rk_jb_cb_faces_1.jpg


또한 이러한 데이터 분석의 연장선으로 있는 것이 이른바 인공지능(AI) 분야다. 빅 데이터를 분석하고 데이터를 가치로 바꾸기 위해서는 AI의 존재가 필수로서 이에 대해 AWS는 GPGPU를 이용할 수 있는 P2 인스턴스나 딥 러닝용 AMI(Amazon Machine Image), Amazon Machine Learning을 제공함과 동시에 머신 러닝용 프레임워크를 제공하는 MXNet에 대한 투자를 집행하고 있다.


이러한 AWS의 머신 러닝 이용 실적은 다양한 업계에 스며들어 이미지 검색, 부정 이용 방지, 자동 운전, 스포츠 사전 예측 등의 용도로 실적을 올리고 있으며 Amazon 자체도 상품 검색, 출하와 물류 효율화, 기존 제품의 머신 러닝 기능 추가 등을 추진하면서 동시에 Alexa의 음성 인식 기술을 기반으로 한 Amazon Echo 같은 제품을 다루고 있다.


하지만 클라우드에서 AI의 서비스화는 경쟁중인 Google과 Microsoft Azure, IBM이 앞서고 있는 분야이기도 하다. 이에 대해 이번에 "Amazon AI"로 불리는 머신 러닝 서비스의 제품 군을 발표하면서 단번에 반전을 도모하겠다고 밝혔다.


이번에 발표된 Amazon AI는 Amazon Rekognition - Amazon Polly - Amazon LEX 3가지가 준비된다. 이 중 Amazon LEX는 Amazon Echo에 탑재되고 있는 Alexa 기술을 이용한 것으로 인간의 대화에서 자동적으로 의도를 간파하고 적절한 응답을 돌려주며 Lambda를 서비스로 구동할 수 있기 때문에 각종 엔터프라이즈 서비스와 연계할 수 있다.


lex_main_page_2.png






List of Articles
제목 조회 수
[AWS re:Invent 2019] 일반 개발자에게 머신러닝의 힘을 2 12819
애플 실적발표, "다각화 된 비지니스 포트폴리오의 견고함" 2 3094
MS, 애저 센티넬(Azure Sentinel)로 제로 트러스트형 보안 추진 4103
클라우드 게임 서비스 시대로, 소니가 주목한 MS 게임 플랫폼 2964
SAP HANA 클라우드 서비스 발표, HANA를 모든 데이터의 게이트웨이로 1 10332
포티넷(Fortinet), FortiOS 6.2에 대거 기능 강화 및 확충 2071
Dell EMC, 인공지능 간소화 패키지 Ready Solutions for AI 전개 3095
엔비디아 실적 발표 - 매출 21% / 순익 48% 증가 (Nvidia earnings) 2 4758
OOW 2018, 오라클이 설명하는 2세대 클라우드 비전 (Generation 2 Cloud) 3970
Dell EMC, 키네틱 인프라스트럭처 신제품 PowerEdge MX 발매 2018
3분기 인텔 실적 발표, "CPU 초 호황" 공급 부족 공식 확인 2 4627
Google Cloud Next '18) Kubernetes Engine, BigQuery ML, Edge TPU 2436
2018년 2분기 엔비디아 실적 발표, 순익 89% 증가 '인텔 나와' 4 2323
미래는 해저 데이터 센터? Project Natick 실증 실험 1931
2018년 2분기 애플 실적, '모든 시장 환경을 무시한다' 5 2785
MS 클라우드 애저 기능 확장, 스피어/디도스 보호/보안 센터 등 10043
마이크로소프트, 애저 PaaS 기반 서비스 패브릭(Service Fabric) 오픈 소스화 3834
레드햇(Red Hat), CoreOS를 2억 5000만 달러에 인수 3141
인텔 실적 발표, 어닝 서프라이즈 및 최고 주가 경신 4 3219
시스코, 기업 iOS 디바이스를 보호하는 Security Connector 발표 2393
엔비디아 실적 발표, 인텔과 "패권" 전쟁 돌입 3 8002
애플 실적 발표, 다가올 사상 최대 실적의 서막 3 3795
아마존 AWS CloudTrail, Glue, EFS 등 서비스 개선 및 추가 5427
AMD 젠 아키텍처 분석 (프론트엔드, OP캐시, CCX, 인피니티 패브릭) 6 58504
인공지능(AI) 및 클라우드, 5G를 위한 Xeon Scalable 출시 4226
전세계 게이머들의 CPU, GPU, S/W 등 사용 동향 3 12011
뉴 패러다임 메모리 기반 컴퓨팅 - HPE The Machine 4595
엔비디아 실적발표 - 글로벌 4차 산업혁명의 중심 기업 3 4657
5월 - 9월 인터내셔널 커스텀 [ 추천PC / 조립PC ] 6 15886
애저 네트워크 컨테이너와 광통신 기술의 오픈 소스화 2159
프로젝트 올림푸스(Open Compute Project), 데이터 센터 기술 동향 3937
2월 - 4월 인터내셔널 커스텀 [ 추천PC / 조립PC ] 8 11919
자율 주행 자동차와 엔비디아 (DRIVE PX2, DGX-1) 2 24481
소프트웨어 정의 시대, SD-WAN 네트워크 기술 동향 (ISP) 3 121337
AWS re:Invent 2016) 모던 데이터 아키텍처 3 3320
소프트웨어 정의 스토리지 - 레노버 Storage DX8200C 3493
HPE Vertica 8, 어디에서나 데이터 전개와 분석이 가능하다 1668
엔씨소프트 실적 발표, 매출-영업이익-순익 증가 3 2891
2017년 보안 위협 예측 - Kaspersky (APT, IoC 등) 1997
AMD Zen 프로세서가 다가온다, 관련 정보 (서밋릿지) 3 3902
VMware Virtual SAN 6.5 발표, HCI와 가상화 시대로 2 2089
구글 딥마인드의 차세대 인공지능 기술 DNC 발표 1968
10월 - 1월 인터내셔널 커스텀 [ 추천PC / 조립PC ] 7 14541
델 테크놀로지스 탄생, 세계 최대 비상장 통합 IT 기업 4 4239
구글 Cloud SQL 2세대 정식 공개, MySQL 호환 (Google Cloud Platform) 3868
시스코 테트레이션 애널리틱스, 데이터 센터를 가시화 (Tetration analytics) 3768
네트워크 가상화를 위한 VMware NSX의 최신 동향 4081
Cisco VNI - 인터넷,동영상,모바일 등 IP 트래픽 분석 2 4653
MS는 세계 최대 멀웨어 대처 기업 4 5221
7월 - 9월 인터내셔널 커스텀 [ 추천PC / 조립PC ] 13 11879
델 소닉월 캡처 제공 시작 (Dell SonicWALL UTM Capture) 2088
HPE 프로라이언트 Gen9 서버부터 NVDIMM 본격 지원 1962
애플 실적 발표 - 한계에 도달한 모바일 사업 3 86452
서버/PC/모바일, 인텔 CPU-메인보드-SSD 종류 및 스펙 4387
RAPTER Ver. PC 배경화면 배포 (1920x1080 전용) 3 9261
기업 스토리지의 41%는 방치 데이터 - 베리타스 (Veritas) 2 3546
차원이 다른 올 플래시 스토리지, EMC DSSD D5 출격 3 15119
3월 - 5월 인터내셔널 커스텀 [ PC 구매 가이드 ] 6 14110
인간vs기계, 구글 인공지능 알파고와 이세돌의 경기에 집중 4 2843
후지쯔, 사물인터넷 기기의 고속 암호 통신 인증 기술 개발 (TLS) 2 2948
세계 사물인터넷 기업 순위는? 인텔-IBM-MS가 IoT 리더 2 14501
2016년 1월 12일 인터넷 익스플로러 구 버전 지원 종료 2383
디도스(DDos) 공격 동향 보고서 - 아카마이 테크놀로지 3 5353
12월 - 2월 인터내셔널 커스텀 [ 표준PC 가이드 ] 3 9381
FireEye HX 3.0 발표 - 엔드포인트 방어 솔루션 1 2189
빅데이터 플래시 시스템, 샌디스크 인피니플래시 발표(InfiniFlash) 1 4523
애플실적 발표 - 사상 최대 실적의 어닝 서프라이즈 4 3798
웨스턴디지털의 샌디스크 인수 - 백그라운드는 중국 3 4284
델 EMC 인수 - 엔터프라이즈 시장 경쟁력 강화 5 9715
세계 웹브라우저 점유율 및 OS 시장 점유율 1 4168
오라클, 솔라리스(Solaris)에 Docker 통합 계획 발표 2166
애플 실적 발표 - 아이폰 판매량 35% 증가 7935
9월 - 11월 인터내셔널 커스텀 [ 표준PC 가이드 ] 9 13075
만물 인터넷(IoE) 대응, 시스코 인터클라우드 강화(Cisco Live US 2015) 2 13938
4소켓 하이엔드 X86서버, 델 파워에지 R930 시장 투입 1922
차세대 윈도우10은 7가지 에디션 - 모든 플랫폼을 통합 15727
5월 - 7월 인터내셔널 커스텀 [ INTERNATIONAL CUSTOM ] 4 12243
EMC, EVO:RAIL 베이스 통합 어플라이언스 VSPEX BLUE 발매 2039
아마존 웹 서비스, 보다 대용량 및 고속 SSD 기반 EBS 볼륨 제공 4267
3D마크 v1.5 공개 - 다이렉트X 11,12/맨틀API 오버 헤드 비교 지원 4939
오라클 엑사데이터X5(Exadata) 제공 시작, 올 플래시 구성 대응 3176
Cisco 2015 Annual Security Report - 자바, 실버라이트, 오픈SSL 등 3250
인텔 실적 발표 - 2014년 브라이언 크르자니크의 경영 성과는? 2 3195
2월 - 4월 인터내셔널 커스텀 [ INTERNATIONAL CUSTOM ] 11585
반도체 아키텍처 분석) x86, HSA, HBM, TSV, 3D V-NAND 3 72131
차원이 다른 x86 서버, HP Integrity Superdome X 발매 4747
글로벌 OS 점유율 및 웹 브라우저 점유율 현황 (PC/모바일) 9205
애플 실적 발표 - 아이폰 및 맥PC 판매 호조, 아이패드 판매 감소 지속 4331
아마존, 음성 인식 비서 아마존 에코 발표 (Amazon Echo) 12106
중국 텐허2가 슈퍼컴퓨터 1위 / 제온파이 라인업 추가 100206
11월 - 1월 인터내셔널 커스텀 [ INTERNATIONAL CUSTOM ] 7 9296
오라클 올 플래시 스토리지 신제품 Oracle FS1 발표 - 하이브리드 지원 3431
리눅스 파운데이션, 드론(무인항공기) SW를 위한 드론코드 프로젝트(Dronecode Project) 발족 16059
MS의 차세대 OS 정식 명칭은 윈도우10, 다양한 플랫폼을 포괄한다 6579
구글이 양자 컴퓨터의 독자적 하드웨어(CPU) 개발 시작 - 큐비트 6188
IBM, 뇌에서 영감을 얻은 비 노이만 아키텍처 시냅스칩(SyNAPSE) 발표 5822
삼성전자 2분기 실적 발표 - 모바일 사업 급락, 반도체/소비자 가전 선방 2 12347
8월 - 10월 인터내셔널 커스텀 [ INTERNATIONAL CUSTOM ] 1 11680
HP, 암호화에 의한 데이터 보호 솔루션 Atalla 및 키 관리 ESKM 발표 3327
글로벌 IT 화두 사물인터넷, 2020년 관련 개발자 수요는 450만명 (비전 모바일) 32577
Board Pagination Prev 1 2 Next
/ 2