본문 바로가기
비즈니스 어쩌구/일을 잘하는 방법

[스크랩] 데이터 인프라 구축을 위한 엔지니어링(IaaS, paaS, saaS)

by annmunju 2021. 6. 14.

데이터 인프라 구축 프로그래밍

 

하둡 https://terms.naver.com/entry.naver?docId=3577519&cid=59088&categoryId=59096 

 

하둡

하둡 로고 ‘빅데이터’ 시대를 연 공신은 여럿이다. 스마트폰 보급과 SNS 데이터의 폭발적인 증가, 새롭게 주목받고 있는 사물네트워크(M2M) 센서 데이터와 사물인터넷(IoT) 데이터의 확산 등이

terms.naver.com

 

아파치 스파크 https://www.itworld.co.kr/news/147556

 

"하둡을 제압한 빅데이터 플랫폼" 아파치 스파크란 무엇인가 - ITWorld Korea

아파치 스파크(Apache Spark)는 매우 큰 데이터 집합을 대상으로 빠르게 처리 작업을 수행하는 한편, 단독으로 또는 다른 분산 컴퓨팅 툴과 조율해 여러 컴퓨터로 데이터 처리 작업을 분산할 수 있

www.itworld.co.kr

 


데이터 인프라 구축 서비스

 

아마존의 EMR https://aws.amazon.com/ko/emr/?whats-new-cards.sort-by=item.additionalFields.postDateTime&whats-new-cards.sort-order=desc

 

Amazon EMR - 빅 데이터 플랫폼 - Amazon Web Services

EMR Notebooks는 오픈 소스 Jupyter 기반의 관리형 분석 환경으로, 데이터 과학자, 분석가 및 개발자가 데이터를 준비하고 시각화하며, 동료와 협업하고, 애플리케이션을 구축하며, 인터랙티브 분석을

aws.amazon.com

구글의 GCP https://cloud.google.com/

 

클라우드 컴퓨팅 서비스  |  Google Cloud

데이터 관리, 하이브리드 및 멀티 클라우드, AI와 머신러닝 등 Google의 클라우드 컴퓨팅 서비스로 비즈니스 당면 과제를 해결하세요.

cloud.google.com

마이크로소프트의 Azure https://azure.microsoft.com/ko-kr/

 

클라우드 컴퓨팅 서비스 | Microsoft Azure

Microsoft Azure의 유연한 개방형 클라우드 컴퓨팅 플랫폼을 통해 목적에 따라 투자하고 비용을 절감하며 조직을 더 효율적으로 만드세요.

azure.microsoft.com


클라우드 데이터 웨어하우스

 

아마존의 레드시프트 https://aws.amazon.com/ko/redshift/?whats-new-cards.sort-by=item.additionalFields.postDateTime&whats-new-cards.sort-order=desc 

 

데이터 웨어하우스 | Redshift | Amazon Web Services

어떠한 데이터 웨어하우스로도 이렇게 손쉽게 모든 데이터에 대한 새로운 인사이트를 얻을 수 없습니다. Redshift를 사용하면 표준 SQL을 통해 데이터 웨어하우스, 운영 데이터베이스 및 데이터 레

aws.amazon.com

구글 빅쿼리 https://cloud.google.com/bigquery?hl=ko 

 

BigQuery: 클라우드 데이터 웨어하우스  |  Google Cloud

BigQuery는 비용 효율성을 갖춘 서버리스 멀티 클라우드 데이터 웨어하우스로, 빅데이터에서 가치 있고 유용한 비즈니스 정보를 얻을 수 있도록 설계되었습니다. 무료로 시작해 보세요.

cloud.google.com


데이터 가공 및 전처리 Tool

 

StutchData https://www.stitchdata.com/

 

Stitch: Simple, extensible ETL built for data teams

Stitch rapidly moves data from 130+ sources into a data warehouse so you can get to answers faster, no coding required. Analysis-ready data at your fingertips.

www.stitchdata.com

Funnel https://funnel.io/

 

Automated Data Collection & Marketing Reports | Funnel

Supports data collection from any marketing or advertising data source and transforms marketing data into automated marketing reports.

funnel.io

Fivetran https://fivetran.com/

 

Fivetran | Data to Snowflake, Redshift, BigQuery, Azure

Stream data into your warehouse for advanced analytics. Fivetran was built to enable analysts to access their business data. Sign up today for a free trial.

fivetran.com

Supermetrics https://supermetrics.com/

 

Supermetrics: the easiest way to move your marketing data

Move your marketing data into Google Sheets, Google Data Studio, Microsoft Excel, Google BigQuery, Snowflake, and more with Supermetrics.

supermetrics.com


BI 서비스 및 대시보드 작성

 

태블로 https://www.tableau.com/ko-kr/trial/tableau-software?utm_campaign_id=2017049&utm_campaign=Prospecting-CORE-ALL-ALL-ALL-ALL&utm_medium=Paid+Search&utm_source=Naver&utm_language=KR&utm_country=SoKOR&kw=%ED%83%9C%EB%B8%94%EB%A1%9C&adgroup=brandsearchad&adused=%7bcreative%7d&matchtype=%7bmatchtype%7d&placement=%7bplacement%7d&gclid=COHh4I38lfECFRAHvAod3-8LuA&gclsrc=ds 

 

질문이 떠오르는 즉시 답해 보십시오

질문이 떠오르는 즉시 답해 보십시오 Tableau 무료 평가판 사용해 보기 풀-버전 평가판 신용 카드가 필요하지 않습니다.

www.tableau.com

 

구글 데이터 스튜디오 https://marketingplatform.google.com/intl/ko/about/data-studio/

 

대시보드 및 데이터 시각화 도구: Google 데이터 스튜디오

데이터 스튜디오에서는 읽기 및 공유가 쉽고 정보가 풍부한 맞춤형 보고서 및 대시보드를 통해 데이터를 확인할 수 있습니다.

marketingplatform.google.com

 

redash https://redash.io/

 

Redash helps you make sense of your data

Use Redash to connect to any data source (PostgreSQL, MySQL, Redshift, BigQuery, MongoDB and many others), query, visualize and share your data to make your company data driven.

redash.io

 

superset https://superset.apache.org/

 

Welcome

Community website for Apache Superset, a data visualization and data exploration platform

superset.apache.org

 

728x90