IT161 데이터 엔지니어링 on Google Cloud (0/4) 구글 클라우드 데이터 관리 체계 및 데이터 엔지니어링데이터 관리 개념, 시스템 아키텍처, 서비스 아키텍처 및 구글 클라우드 서비스 활용 가이드목차소개데이터 관리 개념시스템 아키텍처서비스 아키텍처구글 클라우드 서비스Google Cloud Storage (GCS)BigQueryCloud ComposerDataprocDataflowData Fusion데이터 파이프라인 구축활용 사례모범 사례결론1. 소개현대 비즈니스에서 데이터는 가장 중요한 자산 중 하나입니다. 대규모 데이터를 효율적으로 저장, 처리, 분석하는 능력은 비즈니스 성공의 핵심 요소가 되었습니다. 구글 클라우드 플랫폼(Google Cloud Platform, GCP)은 기업이 데이터를 최대한 활용할 수 있도록 다양한 데이터 관리 서비스를 제공합니다... 2025. 4. 11. n8n 환경변수 확인 방법 MCP설정하다보면 N8N_COMMUNITY_PACKAGES_ALLOW_TOOL_USAGE의 값을 셋팅하라고 하는데 잘되었는지 확인해 보는 방법이다.아래 내용을 복사해서 워크플로우에 넣고 확인하고 싶은 변수값으로 수정후 Test를 누르면 된다. { "nodes": [ { "parameters": { "command": "=echo $N8N_COMMUNITY_PACKAGES_ALLOW_TOOL_USAGE" }, "name": "Execute Command", "type": "n8n-nodes-base.executeCommand", "typeVersion": 1, "position": [ -300, -120 .. 2025. 4. 8. PlantUML in VS Code 우선 VS Code에서 PlantUML을 사용하기 위해 해당 확장 기능을 설치합니다.https://marketplace.visualstudio.com/items?itemName=jebbs.plantuml PlantUML - Visual Studio MarketplaceExtension for Visual Studio Code - Rich PlantUML support for Visual Studio Code.marketplace.visualstudio.com 그리고 plantuml로 작성된 파일을 diagram으로 변환해 주기 위한 프로그램을 설치합니다.Quick Install for Macbrew install --cask temurinbrew install graphvizQuick Install fo.. 2025. 4. 7. 데이터 엔지니어링 on Google Cloud (3/4) 제 3장. Google Cloud 기반의 복원력 있는 스트리밍 분석 시스템 구축본 문서는 스트리밍 데이터 처리의 주요 개념, 과제, Google Cloud 서비스의 역할 및 활용 방안, 그리고 성능 최적화를 위한 고려 사항을 종합적으로 정리합니다.1. 스트리밍 데이터 처리 소개 (M3_1_Introduction_KO.pdf)스트리밍 데이터의 정의 및 과제: 스트리밍 데이터는 무한하고 지속적으로 생성되는 데이터 세트이며, 대용량(Volume), 빠른 속도(Velocity), 다양한 형태(Variety), 그리고 데이터의 불확실성(Veracity)이라는 4가지 주요 과제를 안고 있습니다."스트리밍은 제한 없는 데이터를 대상으로 하는 데이터 처리 방법입니다.""스트리밍 애플리케이션과 관련된 과제는 4V, 즉 .. 2025. 4. 7. 이전 1 2 3 4 ··· 41 다음
