저는 Medium.com에 'Google Cloud Platform의 무료 계층에서 최신 데이터 플랫폼을 구축하는 방법'이라는 7개의 무료 공개 기사 시리즈를 발표했습니다. 주요 기사는 https://medium.com/@markwkiehl/building-a-data-platform-on-gcp-0427500f62e8
에서 확인할 수 있습니다.1부 'GCP에서 데이터 플랫폼 구축'에서는 기능 요구사항을 정의하고 필요한 소프트웨어를 설치하는 방법을 자세히 설명했습니다.
2부 'GCP 인프라 및 인증'에서는 Google 애플리케이션 기본 자격 증명(ADC)을 사용하여 사용자 관리 서비스 계정을 인증하는 방법을 설명했습니다.
3부 'Google Cloud Pub/Sub 메시징'에서는 Python 스크립트를 사용하여 Google Pub/Sub 메시징 서비스를 생성하고 구독하는 방법을 보여주었습니다.
4부 'Docker를 사용한 컨테이너화'에서는 Python 스크립트용 로컬 Docker 이미지를 빌드하고 로컬에서 실행한 다음 Google Artifact Registry(저장소)에 푸시하는 방법을 다뤘습니다.
5부 'Google Cloud Run 작업 및 스케줄러'에서는 Google CLI를 사용하여 Google Cloud Run 작업 및 Cloud Scheduler 작업을 구성하여 모든 Google 리전에서 지정된 간격으로 Google Artifact Registry에 저장된 Python 스크립트를 실행하는 방법을 보여주었습니다.
6부 'Google BigQuery 클라우드 데이터베이스'에서는 Google CLI를 사용하여 Google BigQuery 데이터 세트와 테이블을 설정한 다음 Python 스크립트를 사용하여 SQL로 데이터를 작성하고 쿼리했습니다.
7부 'Google Cloud Analytics'에서는 Google BigQuery 테이블에서 데이터를 추출하고, 이를 Pandas DataFrame에 로드하고, 분석과 시각화를 손쉽게 수행하는 방법을 모두 Python 스크립트에서 살펴보았습니다.
부인 성명: 제공된 모든 리소스는 부분적으로 인터넷에서 가져온 것입니다. 귀하의 저작권이나 기타 권리 및 이익이 침해된 경우 자세한 이유를 설명하고 저작권 또는 권리 및 이익에 대한 증거를 제공한 후 이메일([email protected])로 보내주십시오. 최대한 빨리 처리해 드리겠습니다.
Copyright© 2022 湘ICP备2022001581号-3