❄️ Snowflake summit 2023에서 들은 HOL 세션 중, Getting Started with Snowpipe Streaming and Amazon MSK을 진행하면서 작업한 내용을 정리하고자 합니다. Agenda Hands-On Lab: Getting Started with Snowpipe Streaming and Amazon MSK Tue, 6/27, 11:30 AM - 1:30 PM PT James Sun, Partner Sales Engineer, Snowflake Bosco Albuquerque, Partner Solutions Architect, AWS HOL 과정 1. Deploy a managed Kafka Cluster in VPC 2. Use Kafka producer a..

Snowflake❄️의 Data Warehousing Workshop을 진행하면서 작업한 내용을 정리하고자 합니다. Badge 1: 데이터 웨어하우징 워크샵 - KR 이번 내용은 Lesson 9: Nested Semi-Structured Data 과정을 진행하면서 작성한 내용입니다. 🥋 Load and Query Nested Author & Book JSON Data 🥋 Create a Table & File Format for Nested JSON Data CREATE OR REPLACE TABLE LIBRARY_CARD_CATALOG.PUBLIC.NESTED_INGEST_JSON ( "RAW_NESTED_BOOK" VARIANT ); A JSON file with Authors Nested into ..

Snowflake❄️의 Data Warehousing Workshop을 진행하면서 작업한 내용을 정리하고자 합니다. Badge 1: 데이터 웨어하우징 워크샵 - KR 이번 내용은 Lesson 7: Data Storage Structures 과정을 진행하면서 작성한 내용입니다. 🥋 XML Lab - With Header Row 🥋 View XML File XML File 🥋 Create a Table for the XML Data // Create an Ingestion Table for XML Data CREATE TABLE LIBRARY_CARD_CATALOG.PUBLIC.AUTHOR_INGEST_XML ( "RAW_AUTHOR" VARIANT ); 🥋 Create an File Format for t..

Snowflake❄️의 Data Warehousing Workshop을 진행하면서 작업한 내용을 정리하고자 합니다. Badge 1: 데이터 웨어하우징 워크샵 - KR 이번 내용은 Lesson 7: Data Storage Structures 과정을 진행하면서 작성한 내용입니다. 🥋 Create the Library Card Catalog DB, Author Table & a Sequence 🥋 Create a New Database and Table use role sysadmin; // Create a new database and set the context to use the new database CREATE DATABASE LIBRARY_CARD_CATALOG COMMENT = 'DWW Lesso..

Snowflake❄️의 Data Warehousing Workshop을 진행하면서 작업한 내용을 정리하고자 합니다. Badge 1: 데이터 웨어하우징 워크샵 - KR 이번 내용은 Lesson 6: Staging Data 과정을 진행하면서 작성한 내용입니다. 🎭 Intro to Stages Snowflake의 warehouses는 임시 저장 창고를 의미합니다. 이 워크샵에는 US-West-2 지역의 AWS에 S3 버킷을 설정했습니다. "uni-lab-files"로 지정했습니다. https://uni-lab-files.s3.us-west-2.amazonaws.com/ 파일 중 하나를 살펴보면 다음과 같습니다. https://uni-lab-files.s3.us-west-2.amazonaws.com/json_b..

Snowflake❄️의 Data Warehousing Workshop을 진행하면서 작업한 내용을 정리하고자 합니다. Badge 1: 데이터 웨어하우징 워크샵 - KR 이번 내용은 Lesson 5: File Formats & the Load Wizard 과정을 진행하면서 작성한 내용입니다. 📓 Preparing Data for Loading 📓 Vegetable Details Table Data ROOT_DEPTH 열을 다음과 같이 바꾸고, CSV 파일로 출력하기로 합니다. 하지만 CSV를 로드할 수 없는데요, 이유가 무엇일까요? 🥋 Create a Vegetable Details Table 워크시트 컨텍스트를 GARDEN_PLANTS.VEGGIES로 설정해야합니다. create table vegetabl..

Snowflake❄️의 Data Warehousing Workshop을 진행하면서 작업한 내용을 정리하고자 합니다. Badge 1: 데이터 웨어하우징 워크샵 - KR 이번 내용은 Lesson 4: Worksheets & Warehouses 과정을 진행하면서 작성한 내용입니다. 🎭 About Worksheets & Warehouses 📓 Two Sets of Drop Menus, and a Key Difference Between Them ROLE and WAREHOUSE Drop Menu Values are REQUIRED 컴퓨팅 성능을 제공하는 WAREHOUSE 없이는 select 문을 실행할 수 없습니다. 해당 데이터를 액세스 할 수 있는지 여부를 정의하는 ROLE 없이는 select 문을 실행할 수..

Snowflake❄️의 Data Warehousing Workshop을 진행하면서 작업한 내용을 정리하고자 합니다. Badge 1: 데이터 웨어하우징 워크샵 - KR 이번 내용은 Lesson 3: Tables, Data Types, and Loading Data 과정을 진행하면서 작성한 내용입니다. 🥋 Create the ROOT_DEPTH Table 📓 Based on the Data, What Should Our Table Look Like? To read more about data types like TEXT To read more about data types like NUMBER 🥋 Create Your ROOT_DEPTH Table Create Root Depth worksheet 생성 us..