AWS Service - analysis

date
Jan 28, 2023
slug
aws-service-analysis
author
status
Public
tags
AWS Service
Cloud computing
Overview
summary
AWS Service - Analysis
type
Post
thumbnail
AWS_logo.png
updatedAt
Jan 28, 2023 10:45 AM
๊ฐ•์˜ ๋ฒˆํ˜ธ
AWS Whitepaper
๋ณต์Šต
๋ณต์Šต

Amazon Athena

  • S3์— ์ €์žฅ๋œ ๋ฐ์ดํ„ฐ๋ฅผ ๊ฐ„ํŽธํ•˜๊ฒŒ ๋ถ„์„ํ•  ์ˆ˜ ์žˆ๋Š” ๋Œ€ํ™”์‹ ์ฟผ๋ฆฌ ์„œ๋น„์Šค
  • ์„œ๋ฒ„๋ฆฌ์Šค ์„œ๋น„์Šค์ด๋ฏ€๋กœ ๊ด€๋ฆฌํ•  ์ธํ”„๋ผ๊ฐ€ ์—†์œผ๋ฉฐ ์‹คํ–‰ํ•œ ์ฟผ๋ฆฌ์— ๋Œ€ํ•ด์„œ๋งŒ ๋น„์šฉ์„ ์ง€๋ถˆ
ย 

Amazon EMR

  • ๋™์  ํ™•์žฅ ๊ฐ€๋Šฅ EC2 ์ธ์Šคํ„ด์Šค ์ „๋ฐ˜์— ๊ฑธ์ณ ๋Œ€๋Ÿ‰์˜ ๋ฐ์ดํ„ฐ๋ฅผ ์‰ฝ๊ณ  ๋น ๋ฅด๊ณ  ๋น„์šฉ ํšจ์œจ์ ์œผ๋กœ ์ฒ˜๋ฆฌํ•  ์ˆ˜ ์žˆ๋„๋ก ์ง€์›ํ•˜๋Š” ๊ด€๋ฆฌํ˜• ํ•˜๋‘ก ํ”„๋ ˆ์ž„์›Œํฌ๋ฅผ ์ œ๊ณต
  • ๋กœ๊ทธ๋ถ„์„, ์›น ์ธ๋ฑ์‹ฑ, ๋ฐ์ดํ„ฐ๋ณ€ํ™˜, ๊ธฐ๊ณ„ํ•™์Šต, ๊ธˆ์œต๋ถ„์„, ๊ณผํ•™์  ์‹œ๋ฎฌ๋ ˆ์ด์…˜, ์ƒ๋ฌผ ์ •๋ณดํ•™์„ ๋น„๋กฏํ•œ ๊ด‘๋ฒ”์œ„ํ•œ ๋น…๋ฐ์ดํ„ฐ ์‚ฌ์šฉ ์‚ฌ๋ก€๋ฅผ ์•ˆ์ „ํ•˜๊ณ  ์•ˆ์ •์ ์œผ๋กœ ์ฒ˜๋ฆฌํ•จ
ย 

Amazon CloudSearch

  • AWS ํด๋ผ์šฐ๋“œ ๊ด€๋ฆฌํ˜• ์„œ๋น„์Šค
  • ์›น์‚ฌ์ดํŠธ ๋˜๋Š” ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜์„ ์œ„ํ•œ ๊ฒ€์ƒ‰ ์†”๋ฃจ์…˜์„ ํšจ์œจ์ ์ธ ๋น„์šฉ์œผ๋กœ ๊ฐ„๋‹จํ•˜๊ฒŒ ์„ค์ •, ๊ด€๋ฆฌ ๋ฐ ์กฐ์ •ํ•  ์ˆ˜ ์žˆ์Œ
  • ๊ฐ•์กฐํ‘œ์‹œ, ์ž๋™์™„์„ฑ, ์ง€ํ˜•์ •๋ณด ๊ฒ€์ƒ‰ ๋“ฑ ์ธ๊ธฐ๊ฒ€์ƒ‰๊ธฐ๋Šฅ๊ณผ 34๊ฐœ ์–ธ์–ด๋ฅผ ์ง€์›ํ•จ
ย 

Amazon Elasticsearch Service

  • Elasticsearch๋ฅผ ๋ฐฐํฌ, ์šด์˜ ๋ฐ ํ™•์žฅํ•˜์—ฌ ๋กœ๊ทธ ๋ถ„์„, ์ „์ฒด ํ…์ŠคํŠธ ๊ฒ€์ƒ‰, ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜ ๋ชจ๋‹ˆํ„ฐ๋ง ๋“ฑ์„ ์ˆ˜ํ–‰ํ•  ์ˆ˜ ์žˆ์Œ
  • ์™„์ „ ๊ด€๋ฆฌํ˜• ์„œ๋น„์Šค
  • Kibana, Logstash ๋ฐ Amazon Kinesis Firehose, AWS Lambda, Amazon Cloudwatch ๋“ฑ๊ณผ ํ†ตํ•ฉ์„ ๊ธฐ๋ณธ์œผ๋กœ ์ œ๊ณตํ•จ
ย 

Amazon Kinesis

  • AWS ์ŠคํŠธ๋ฆฌ๋ฐ ๋ฐ์ดํ„ฐ๋ฅผ ์œ„ํ•œ ํ”Œ๋žซํผ
  • ํŠน์ • ์š”๊ตฌ์— ๋งž๊ฒŒ ์‚ฌ์šฉ์ž ์ง€์ • ์ŠคํŠธ๋ฆฌ๋ฐ ๋ฐ์ดํ„ฐ ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜์„ ๊ตฌ์ถ•ํ•  ์ˆ˜ ์žˆ๋Š” ๊ธฐ๋Šฅ์„ ์ œ๊ณต
  • Kinesis ์„œ๋น„์Šค
      1. Amazon Kinesis Firehose โ†’ ์ŠคํŠธ๋ฆฌ๋ฐ ๋ฐ์ดํ„ฐ๋ฅผ ์บก์ฒ˜ ๋ฐ ๋ณ€ํ˜•ํ•˜์—ฌ ์‹ค์‹œ๊ฐ„์— ๊ฐ€๊นŒ์šด ๋ถ„์„์ด ๊ฐ€๋Šฅํ•˜๋„๋ก ํ•จ โ†’ ์™„์ „ ๊ด€๋ฆฌํ˜• ์„œ๋น„์Šค โ†’ ์ŠคํŠธ๋ฆฌ๋ฐ ๋ฐ์ดํ„ฐ๋ฅผ AWS์— ๋กœ๋“œํ•˜๋Š” ๊ฐ€์žฅ ๊ฐ„ํŽธํ•œ ๋ฐฉ๋ฒ•
      1. Amazon Kinesis Analytics โ†’ ํ‘œ์ค€ SQL์„ ํ†ตํ•ด ์‹ค์‹œ๊ฐ„์œผ๋กœ ์ŠคํŠธ๋ฆฌ๋ฐ ๋ฐ์ดํ„ฐ๋ฅผ ์ฒ˜๋ฆฌํ•  ์ˆ˜ ์žˆ์Œ โ†’ ์ฟผ๋ฆฌ๋ฅผ ์ง€์†์ ์œผ๋กœ ์‹คํ–‰ํ•˜๋Š”๋ฐ ํ•„์š”ํ•œ ๋ชจ๋“  ์ž‘์—…์„ ์ฒ˜๋ฆฌํ•˜๋ฉฐ ์ˆ˜์‹  ๋ฐ์ดํ„ฐ์˜ ๋ณผ๋ฅจ๊ณผ ์ฒ˜๋ฆฌ๋Ÿ‰ ์†๋„์— ๋งž์ถฐ ์ž๋™์œผ๋กœ ํ™•์žฅ
      1. Amazon Kinesis Streams โ†’ ํŠน์ˆ˜ ์š”๊ตฌ์— ๋งž๊ฒŒ ์ŠคํŠธ๋ฆฌ๋ฐ ๋ฐ์ดํ„ฐ๋ฅผ ์ฒ˜๋ฆฌ ๋˜๋Š” ๋ถ„์„ํ•˜๋Š” ์ปค์Šคํ…€ ์• ํ”Œ๋ฆฌ์ผ€์ด์…˜์„ ๊ตฌ์ถ•
ย 

Amazon Redshift

  • ์†๋„๊ฐ€ ๋น ๋ฅธ ํŽ˜ํƒ€๋ฐ”์ดํŠธ ๊ทœ๋ชจ์˜ ์™„์ „ ๊ด€๋ฆฌํ˜• ๋ฐ์ดํ„ฐ ์›จ์–ดํ•˜์šฐ์Šค
  • ๋Œ€๋Ÿ‰ ๋ณ‘๋ ฌ์ฒ˜๋ฆฌ ๋ฐ์ดํ„ฐ ์›จ์–ดํ•˜์šฐ์Šค ์•„ํ‚คํ…์ฒ˜๋ฅผ ์‚ฌ์šฉ โ†’ SQL ์ž‘์—…์„ ๋ณ‘๋ ฌ ์ฒ˜๋ฆฌํ•˜๊ณ  ๋ถ„์‚ฐํ•˜์—ฌ ์‚ฌ์šฉ ๊ฐ€๋Šฅํ•œ ๋ฆฌ์†Œ์Šค๋ฅผ ๋ชจ๋‘ ํ™œ์šฉํ•  ์ˆ˜ ์žˆ์Œ
ย 

Amazon QuickSight

  • ํด๋ผ์šฐ๋“œ ๊ธฐ๋ฐ˜์˜ ๋น ๋ฅธ ๋น„์ฆˆ๋‹ˆ์Šค ๋ถ„์„ ์„œ๋น„์Šค
  • ๋›ฐ์–ด๋‚œ ์‹œ๊ฐํ™” ๋ฐ ํ’๋ถ€ํ•œ ๋Œ€์‹œ๋ณด๋“œ
ย 

Amazon Data Pipeline

  • ์—ฌ๋Ÿฌ ์ปดํ“จํŒ… ๋ฐ ์Šคํ† ๋ฆฌ์ง€ ์„œ๋น„์Šค๋ฟ ์•„๋‹ˆ๋ผ ์˜จํ”„๋ ˆ๋ฏธ์Šค ๋ฐ์ดํ„ฐ ์†Œ์Šค ๊ฐ„ ์ง€์ •๋œ ๊ฐ„๊ฒฉ์œผ๋กœ ๋ฐ์ดํ„ฐ๋ฅผ ์•ˆ์ •์ €๊ธ๋กœ ์ฒ˜๋ฆฌํ•˜๊ณ  ์ด๋™ํ•  ์ˆ˜ ์žˆ๋„๋ก ์ง€์›ํ•˜๋Š” ์›น ์„œ๋น„์Šค
  • ๋‚ด๊ฒฐํ•จ์„ฑ, ๋ฐ˜๋ณต๊ฐ€๋Šฅ, ๊ณ ๊ฐ€์šฉ์„ฑ, ๋ณต์žกํ•œ ์ฒ˜๋ฆฌ์›Œํฌ๋กœ๋“œ๋ฅผ ์†์‰ฝ๊ฒŒ ์ƒ์„ฑ ๊ฐ€๋Šฅ
ย 

AWS Glue

  • ๋ฐ์ดํ„ฐ ์Šคํ† ์–ด ์‚ฌ์ด์— ๋ฐ์ดํ„ฐ๋ฅผ ์‰ฝ๊ฒŒ ์ด๋™์‹œํ‚ฌ ์ˆ˜ ์žˆ๋Š” ์™„์ „๊ด€๋ฆฌํ˜• ETL ์„œ๋น„์Šค
  • S3, RDS, Redshift์™€ ํ†ตํ•ฉ๋˜์–ด ์žˆ์–ด JDBC์™€ ํ˜ธํ™˜๋˜๋Š” ๋ชจ๋“  ๋ฐ์ดํ„ฐ์Šคํ† ์–ด์— ์—ฐ๊ฒฐํ•  ์ˆ˜ ์žˆ์Œ