AWS re:Invent 2018를 통해 본 개발자들이 원하는 4가지 클라우드 동향 :: 윤석찬

AWS re:Invent 2018를 통해 본 개발자들이 원하는 4가지 클라우드 동향 :: 윤석찬 - AWS Community Day 2019

AWS re:Invent 2018를 통해 본 개발자들이 원하는 4가지 클라우드 동향 :: 윤석찬 - AWS Community Day 2019 from AWS Korea UserGroup (AWS한국사용자모임)

AWS re:Invent 2018를 통해 본 개발자들이 원하는 4가지 클라우드 동향 :: 윤석찬 - AWS Community Day 2019

4. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. STORAGE CLASSES (6) Amazon S3 One Zone-IA Amazon S3 Standard Amazon S3 Intelligent-Tiering Amazon S3 Glacier Amazon S3 Standard-IA Amazon S3 Glacier Deep Archive THE MOST CLOUD NATIVE SYSTEMS (5) Amazon EFS Amazon FSx for Windows File Server Amazon FSx for Lustre Amazon EFS Standard Amazon EFS IA STORAGE CLASSES (3) NEW NEW NEW NEW NEW NEW AWS Direct Connect AWS Snowball AWS Snowball Edge AWS Snowmobile AWS Storage Gateway Amazon Kinesis Firehose Amazon Kinesis Data Streams Amazon Kinesis Video Streams Amazon S3 Transfer Acceleration AWS DataSync AWS Transfer for SFTP NEW “I want it all, and I want it now.” Provisioned IOPS SSD General Purpose SSD Throughput- Optimized HDD Cold HDD Amazon Data Lifecycle Manager Elastic Volumes THE MOST VOLUME OPTIONS (4) DATA TRANSFER OPTIONS (8)

6. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. On-Premises Cloud Less Cloud More Serverless Compute Linux EC2 Elastic Beanstalk AWS LambdaFargate Databases MySQL MySQL on EC2 RDS MySQL RDS Aurora Aurora Serverless DynamoDB Storage HDD S3 Messaging ESBs Amazon MQ Kinesis SQS / SNS Analytics Hadoop Hadoop on EC2 EMR Elasticsearch Service Athena EBS Volumes FSx File Server Elastic File Systems RabbitMQ on EC2 Elastic Container Service Redshift Glue Managed

9. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. 버스팅용 T 3 빅데이터 H 1 메모리 R 5 고속 I/O I 3 컴퓨팅 C 5 그래픽 G 3 범용 GPU P 3 대용량 메모리 X 1 X 1 e 범용 M 5 가 상 사 설 서 버 베어메탈 I 3 m 스토리지 D 2 F 1 FPGA A m a z o n L i g h t s a i l HPC전용 Z 1 R 5 d C 5 dZ 1 d 호스트 서버에 물리적으로 연결된 NVMe 기반 SSD 블록 레벨 인스턴스 스토리지로 더 빠른 읽기/쓰기 기능 제공 P 3 d nC 5 n 네트웍 대역폭을 25GB에서 최대 100GB까지 높여서 대용량 데이터 처리 및 분석 가능 NEW NEW

11. N E W ! Amazon Linux, Ubuntu, Red Hat 및 ECS Optimized AMI 지원 웹 서버 및 컨테이너형 마이크로 서비스 등에 최적화 Annapurna Labs에서 직접 설계 및 개발 진행

13. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. / • 6 424 9 GB 37 • ) . 1 2 D G 9 CGD 1D G • 30d 37 V T • Id 37 b M N r e n ( B A B A B A g 13 2 0 - - ( ) 만약… 인터넷에서 구매하시면?3 G pal ) 30 37 V T , 8 5 o V T ( R pa T Uc 37 e n V T 30 P Uc o V T NEW

14. N E W ! 고성능 처리량 낮은 대기시간 수백 TOPS 지원 다양한 데이터 타입 다양한 ML 프레임워크 INT8, FP16, mixed precision TensorFlow, MXNet, PyTorch, Caffe2, ONNX EC2 인스턴스 지원 Amazon SageMaker 지원 Amazon Elastic Inference 지원 고성능 기계 학습 추론을 위한 AWS에서 설계 한 맞춤형 칩셋 AWS Inferentia

15. N E W ! EC2 Instance EC2 Instance EC2 Instance GPU 빠르고 저렴한 추론을 위해 EC2 인스턴스에 직접 GPU 가속 기능 추가 추론 비용 최대 75 % 절감 가능 Amazon Elastic Inference P 3 . 8 X L P 3 P 3 P 3 P 3 36 TOPS GPU M5.large Amazon Elastic Inference Before After

16. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. A m a z o n E K SAW S Fa r g a t e f o r E C S AW S Fa r g a t e f o r E K S A m a z o n E C S C O M I N G S O O N 클러스터 관리 불필요 서버리스 기반 콘테이너 배포에만 집중 Kubernetes 기반 정식 서비스 가능한 기업형 플랫폼 제공 높은 확장성 및 고성능 콘테이너 관리 플랫폼 제공 서버리스 기반 K8s 서비스 지원 예정 애플리케이션 성장에 대한 수용 | 민첩한 개발 및 테스트 가능 | 분 단위 배포 가능

18. N E W ! Microservice A Microservice B Microservice C Microservice A Microservice B Microservice C Microservice C Microservice C Before After 안주은

20. N E W ! G E N E R A L L Y A V A I L A B L E A W S C l o u d 9 AWS Toolkit for PyCharm AWS Toolkit for IntelliJ AWS Toolkit for VS Code G ENERALLY AVAILABLE IN D EVELOPER PREVIEW IN D EVELOPER PREVIEW 다양한 오픈 소스 통합 개발 환경 도구 선택 가능 AWS Toolkits for IDEs + IDE

21. N E W ! 지원 언어 Ruby언어 지원 + Linux 호환 언어 런타임 활용 가능 맞춤형 런타임 지원 + 정창훈

22. N E W ! Lambda Layers BUSINESS LOGIC LIB A LIB B BUSINESS LOGIC LIB A LIB B BUSINESS LOGIC LIB A LIB B BUSINESS LOGIC LIB A LIB B 프로그래밍 모델 Before BUSINESS LOGIC BUSINESS LOGIC BUSINESS LOGIC BUSINESS LOGIC LIB A LIB BAfter 이경우

23. N E W ! 프로그래밍 모델 서버리스 애플리케이션 저장, 공유 및 배포, 판매 가능 Serverless Application Repository + 람다 함수를 기존 웹 애플리케이션에 통합 가능 ALB Support for Lambda AWS Lambda Applicatio n Load Balancer AWS Fargate Amazon EC2 재사용 가능한 빌딩 블록으로 애플리케이션 아키텍처 작성 Nested Applications +

24. N E W ! 모바일 앱 채팅 앱 대시보드 IoT 서비스 Amazon API Gateway WebSockets API 람다 함수 EC2 엔드포인트 AMAZON KINESIS 기타 AWS 서비스 Stateful 연결 모든 공개 AP I 엔드포인트 지원 Stateful 연결 Web Socket support for API Gateway 프로그래밍 모델 Websocket API를 통해 Lambda 함수와 API Gateway 통합으로 실시간 양방향 통신 응 용 프로그램을 구축 가능 권정빈

25. N E W ! 워크플로 Step Functions 사진 업로드 이미지 리사이즈 메타데이터 추출 얼굴 인식 데이터베이스 저장 Start E n d 코드 작성 없이 AWS 서비스 바로 연동 가능 Step Functions API Connectors Amazon ECS AWS Fargate Amazon DynamoDB Amazon SNS AWS Batch Amazon SQS AWS Glue Amazon SageMaker +

26. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. AWS Cloud9 AWS Toolkit for PyCharm AWS Toolkit for IntelliJ AWS Toolkit for VS Code AWS Lambda layers AWS Nested apps Websocket support for API Gateway ALB support for Lambda Step Functions API Connectors Amazon Managed Streaming for Kafka 빠르게 서버리스 애플리케이션 개발 가능 IDE 지원 언어 워크플로프로그래밍 모델

28. N E W ! 높은 보안성의 VM 기능 https://firecracker-microvm.github.io/ 류한진

29. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. • Firecracker 마이크로 VM은 KVM과 동일한 보안 기능 제공 • 불필요한 기능을 줄이고 빠른 시작 시간을 위해 설계 • 컨테이너 및 람다 함수 최적화로 125ms 이내 • 초당 150개 부터 수 천개까지 동시에 VM 생성 가능

31. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved. 확장의 어려움 엔터프라이즈 급 가용성 및 안정성을 위한 수동 작업 필요 제한된 데이터 수명주기 관리 기능 시계열 데이터 처리에 부자연 스러움 빠르게 바뀌는 시계열 데이터 스키마 유연상 부족 시계열(Time-series) 데이터에 대한 처리의 어려움 근사치 보정 및 계산과 같은 시계열 데이터 처리 기능이 부족함 1 2 3 클릭 스트림 IoT 센서 데이터 데브옵스 로그 데이터

32. N E W ! 관계형 데이터베이스 보다 1,000 배 더 빠르고 비용은 1/10 매일 수조개의 데이터를 저장 및 처리 가능 서버리스와 인프라 관리 필요 없음 시계열 분석 기능 내장 (interpolation, smoothing, approximation) 쿼리 성능의 여러 단계별 개선 빠르게 확장 가능한 매니지드 시계열 데이터베이스 서비스 Amazon Timestream 변규현

34. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved. 분산화된 트랜잭션 처리2 DMV 차량 제목 기록 추적 제조사 반품된 제품의 유통 경로 추적 HR & 급여 개인 정보 변경 사항 추적 헬스 케어 병원 장비 재고 확인 및 추적 관계형 데이터 베이스 기존 Blockchain 프레임웍 프라이빗 블록 체인을 위한 원장 데이터 관리 1

35. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved. 모기지 업체 신디케이트 대출 처리 소상공인 공급 업체 및 유통 업체와의 거래 판매업 고객 보상 업무 효율화 금융 기관 P2p 지불 서비스 Blockchain 프레임웍의 문제 확장성 이슈초기 설정 어려움 관리상의 어려움 높은 관리 비용 분산화된 트랜잭션 처리2프라이빗 블록 체인을 위한 원장 데이터 관리 1

37. N E W ! 암호 기반 입증 모든 변경 사항은 암호화 방식으로 연결도어 검증 가능 투명성 제공 전체 데이터 계보에 대한 완전한 가시성 변경 불가- Immutable 추가만 가능, 변경 불가능한 저널은 모든 변경 사항 기록 및 추적 높은 가용성 제공 자동 스케일 업/다운 제공 손쉬운 사용 방법 친숙한 SQL 질의문 사용 가능 빠른 속도 제공 2-3 배 더 많은 트랜잭션 실행 신뢰할 수 있는 중앙에서 운영하는 투명한 암호로 입증 가능한 불변 트랜잭션 로그를 제공하는 매니지드 원장 데이터베이스 Amazon Quantum Ledger Database 김예본

38. N E W ! 확장 가능한 블록 체인 네트워크 생성 및 관리 서비스 Amazon Managed Blockchain Hyperledger Fabric 또는 Ethereum 중에서 선택 가능 몇 번의 클릭만으로 블록 체인 네트워크 생성 및 간단한 API 호출로 관리 수백만 건의 트랜잭션을 실행하는 수천 개의 애플리케이션 지원 가능 추가 분석을 위해 데이터를 QLDB로 이동 가능

44. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon SageMaker 손쉬운 기계 학습 모델 생성, 훈련 및 서비스 배포 완전 관리 서비스 완전 관리 및 자동 스케일링 원클릭 배포 Jupyter Notebook 기반 서비스 고성능 알고리즘 미리 제공 원클릭 데이터 훈련 Hyper- parameter 최적화

46. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. STATIONARY CAR STATIONARY CAR MOVING CARPEDESTRIAN STOP SIGN DIRECTION SIGN STOP SIGN TRAFFIC SIGNALS TRAFFIC SIGNALS STATIONARY VEGETATION STATIONARY ROAD STATIONARY BUILDING MOVING CAR PAVEMENT“좋은 학습 모델은 고품질의 훈련 데이터가 필요합니다” Jupyter Notebook 기반 서비스 훈련 데이터 수집 및 저장

47. N E W ! 사람에 의한 라벨링 작업 S3 데이터 저장소 자동 라벨링 훈련 데이터 생성 워크 플로 구성 Mechanical Turk 자체 직원 활용 서드 파티 벤더 학습 모델 실행 >80% 신뢰도 <80% 신뢰도 기계 학습 기법을 응용하여 정확한 훈련 데이터 세트 구축 가능 데이터 라벨링 비용을 최대 70 %까지 절감 Amazon SageMaker Ground Truth 소성운

48. N E W ! Natural Language Processing Computer Vision Speech Recognition Text Clustering Text Generation Text Classification Grammar and Parsing Named Entity Recognition Text to Speech Handwriting Recognition Object Detection in Images 3D Images Text OCR Video Classification Speaker Identification RankingRegression Anomaly Detection AWS Marketplace 검색 가능 원 클릭으로 사용 신청 SageMake에서 바로 사용 가능 Amazon SageMaker에 직접 활용 할 수 있는 수백 가지 알고리즘 및 모델 제공 AWS Marketplace for Machine Learning 2. AWS Marketplace에 등록 3. SageMaker에서 자동 테스트1. 알고리즘, 모델 및 설정 패키징 4. AWS Marketplace에 등재 A W S M a r k e t p l a c e 에 서 알 고 리 즘 및 모 델 판 매 하 기

49. N E W ! Amazon SageMaker Neo 딥러닝 오픈 소스 컴파일러 및 런타임 기존 프레임워크 크기의 1/10 사이즈로 2배 이상 성능 제공

50. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. 기계 학습 모델의 정교함 좋 은 성 능 을 위 해 요 구 되 는 데 이 터 량 강화 학습 Reinforcement Learning (RL) e.g. 보상을 통한 학습 - 게임 실행, 자율 주행 등 최근 기계 학습의 발전 – 강화 학습의 대두

52. N E W ! 다양한 강화 학습 알고리즘 지원 TensorFlow, MXNet, Intel Coach, Ray RL 지원 OpenGym을 통한 2D 및 3D 시뮬레이션 환경 Sumerian 및 RoboMaker로 시뮬레이션 연동 예제 노트북 및 튜토리얼 제공 SageMaker 기반 강화 학습 구축, 교육 및 배포 매니지드 서비스 Amazon SageMaker RL 남궁선

53. 어떻게 강화 학습을 테스트 해볼 수 있을까요?

54. N E W ! HD Video 카메라 위치 제어를 위한 자이로스코프 센서 속도 측정을 위한 가속 센서 자동차 주행을 위한 대용량 배터리 듀얼 코어 Intel Atom® 프로세서 다 각도로 제어 가능한 바퀴 도로 주행 영상 캠쳐 강화 학습을 통해 자율 주행이 가능한 1/18 크기의 모형 자동차 AMAZON.COM에서 선 주문 가능 AWS DeepRacer 유정열

55. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. AWS DeepRacer: 동작 원리 가상 차량 및 트랙에서 3D 시뮬레이션 강화 학습을 통한 보상 제공 모델 생성 가상 및 현실 트랙에서 테스트 및 개선 AWS DeepRacer League 누구나 참여할 수 있는 세계 최초의 가상 자율 레이싱 리그 AWS Summit에서 리그전 개최 지역 예선 우승자는 re:Invent 2019에서 결승

60. N E W ! 앱에서 데이터 스트리밍 페이지뷰, 클릭 데이터 등 인벤토리 문서, 제품, 영상, 리뷰 등 개인 정보 (선택 사항) 데이터 로딩 (EMR Cluster) 데이터 조사 데이터 특성 파악 알고리즘 선택 하이퍼파라미터 설정 모델 학습 모델 최적화 모델 호스팅 특성 업데이트 실시간 캐싱 맞춤형 개인화 및 추천 API 제공 A m a z o n P e r s o n a l i z e 에 의 한 매 니 지 드 서 비 스 운 영 Amazon Personalize 나이, 사는 곳 등 Amazon.com에서 사용 된 것과 동일한 기술을 기반으로하는 실시간 개인화 및 추천 서비스 Amazon Personalize 심호진

62. N E W ! Amazon Forecast 모든 과거의 시계열 데이터 활용 가능 SAP 및 Oracle Supply Chain과 통합 가능 3번의 클릭으로 맟춤형API 제공 50% 이상의 정확도 제공 직접 구축시 보다 1/10 비용 Amazon Timestream 통합 가능 구매 예측 여행 수요 측정 AWS 사용량 매출 예측 웹 사이트 트래픽 광고 수요 주요 활용 사례: Amazon.com에서 사용 된 것과 동일한 기술을 기반으로 하는 높은 정확성의 시계열 예측 서비스 심호진

63. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. 과거 데이터 셋 상품, 공급망 정보, 매출 등 맞춤형 예측 API 제공 데이터 조사 특성 파악 8개 알고리즘 중 선택 하이퍼파라미터 선택 모델 호스팅 데이터 로딩 모델 학습 모델 최적화 관련 데이터 셋 날씨, 특가, 상품 정보 등 Amazon Forecast Amazon Forecast: 기계 학습 기반 시계열 예측 API 서비스 예 – 상품 판매 예측이 필요한 경우 A m a z o n F o r e c a s t 에 의 한 매 니 지 드 서 비 스 운 영

65. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. 문서 내 텍스트 정보 추출 필요성 증가 수동 데이터 입력 규칙 및 템플릿 기반 추출 광학 문자 인식 (OCR) 어떤 문서 형식이든 식별 가능 필요 해당 문서에서 정확하게 텍스트를 추출 필요 문서 형식이 가변적이 되면 정확한 추출 불확실

66. N E W ! 문서에서 텍스트와 데이터를 의미적으로 쉽게 추출 할 수 있는 OCR ++서비스 Amazon Textract

67. F R A M E W O R K S ML 프레임워크 + 인프라 ML 서비스 AI 서비스 I N T E R F A C E S I N F R A S T R U C T U R E A m a z o n S a g e M a k e r Amazon Lex C H A T B O T S Amazon Rekognitio n Image Amazon Rekognitio n Video V I S I O N Amazon Transcribe Amazon Polly S P E E C H Amazon Comprehend Amazon Translate L A N G U A G E S P3 P3dn C5 C5n Elastic inference Inferentia AWS Greengrass NEWNEW Ground Truth Notebooks Algorithms + Marketplace RL Training Optimization Deployment Hosting N E W N E W N E W N E W Amazon Personalize Amazon Forecast V E R T I C A L N E W N E W Amazon Textract N E W

69. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. 스토리지 설정 1 데이터 이동 2 데이터 클린징 및 준비 3 보안 및 규정 준수용 정책 구성 및 시행 4 빅 데이터 분석을 위해 데이터 액세스 제어 5 인공 지능 및 분석을 위한 데이터 레이크(Data Lake) 구성 및 관리?

70. N E W ! 여러 서비스에 걸쳐 보안 정책 적용 데이터 인사이트 수집 및 관리 신속하게 데이터 이동, 저장, 카탈로그 정리 며칠 내에 안전한 데이터 레이크를 구축할 수 있는 서비스 Amazon Lake Formation 이재성

71. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. - 지능형 로봇 기능 개발을 위한 기계 학습 전문 기술 필요 지속적인 프로토타입 개발 및 변경 필요 로봇 기계 조립 및 작업 설정이 하루 이상 시간 소요 현실에 가까운 시뮬레이션 환경 구축에 한달 이상 걸림 애플리케이션 관리 시스템과 통합 하는데 시간 소요

72. N E W ! 지능형 로봇 어플리케이션 손쉽게 개발, 테스트 및 배포 서비스 AWS RoboMaker 프로그램 개발 환경 지원 시뮬레이션 환경 지원 오픈 소스 로봇 운영체제 (ROS) 지원 로봇 장치 관리 및 업데이트

73. © 2019, Amazon Web Services, Inc. or its affiliates. All rights reserved. But • 위성 지상국 건설 혹은 장기 임대 계약 체결. 데이터 전송 대역폭 구매 등 구축 및 유지에 고비용 • 확장을 위해서는 물리적 설비 투자 증설 네트워크 대역폭 및 스케줄링에 어려움 • 스타트업의 경우, 불투명한 비용 구조 우주 산업에 도전하는 기업 및 연구자의 증가 수 천개의 소형 위성이 운용 중이거나 발사 예정

74. N E W ! 인공 위성 제어 및 데이터 송수신을 위한 완전 관리 서비스로서 우주 스타트업 창업 비용 획기적 절감 가능 AWS Ground Station 위성 안테나를 통해 저궤도 (LEO) 및 중궤도(MEO) 소형 인공 위성 제어가능 위성 연결 채널 예약을 통해 동시에 S-band, X-band and UHF 다운링크 지원 전송 받은 위성 데이터를 안전한 VPC 내에서 다양한 AWS 분석 서비스 활용 가능

77. & ! AWS Cloud Clinic

저작자표시 비영리 변경금지

'정보공유' 카테고리의 다른 글

아들에게 서운한 강호동... (0)	2019.03.27
[창업자&예비창업자] 2019년 스타트업 마케팅 (0)	2019.03.05
SageMaker로 강화학습(RL) 마스터링 :: 남궁선 - AWS Community Day 2019 (0)	2019.03.05
우리의 안영미님 레전드 결혼식... (0)	2019.02.28
아내의 유머에 대응하는 남편........ (0)	2019.02.27
스핑크스 너... 담배안돼 (0)	2019.02.27

AWS re:Invent 2018를 통해 본 개발자들이 원하는 4가지 클라우드 동향 :: 윤석찬 - AWS Community Day 2019

'정보공유' 카테고리의 다른 글

관련글

티스토리툴바