데이터 커뮤니티 서밋을 통과하십시오

CI/CD 파이프 라인은 새로운 버전의 소프트웨어를 제공하기 위해 따라야하는 일련의 절차입니다. 연속 통합/연속 전달 (CI/CD) 파이프 라인은 DevOps 또는 a 사이트 안정성 엔지니어링 (SRE) 접근하다. CI/CD 파이프 라인에는 모니터링 및 자동화가 통합되어 특히 응용 프로그램 개발 프로세스를 개선합니다 완성 그리고 테스트 도중뿐만 아니라 단계 배달 그리고 전개. CI/CD 파이프 라인의 각 단계는 수동으로 수행 할 수 있지만 CI/CD 파이프 라인의 실제 값은 자동화를 통해 실현됩니다.

약어 CI 및 CD는 현대 개발 관행 및 DevOps에서 자주 사용됩니다. 연속 통합 (CI) 개발자가 자동화 된 빌드 및 테스트가 실행되는 중앙 저장소로 코드 변경을 자주 병합하는 기본 DevOps 모범 사례를 나타냅니다. 반면에, 연속 전달 (CD) .

목차

이 기사의 완전한 연습으로, 당신은 그것이 제공하는 주요 기능과 함께 눈송이에 대한 괜찮은 이해를 얻게 될 것입니다. 이 기사는 또한 구축 방법에 대한 단계별 안내서를 제공합니다 눈송이 CI CD 원활한 방식으로 파이프 라인. Snowflake CI CD 파이프 라인에 대해 자세히 알아 보려면 함께 읽으십시오.

목차

  • 전제 조건
  • 눈송이 란 무엇입니까??
    • 눈송이의 주요 특징
    • 1 단계 : 데모 프로젝트 생성
    • 2 단계 : 생산 환경 설정
    • 3 단계 : 라이브러리 변수 그룹을 만듭니다
    • 4 단계 : 눈송이 CI CD 배포 파이프 라인 생성 및 실행

    전제 조건

    • git에 대한 실습 경험.
    • 활성 눈송이 계정.
    • 활성 Azure DevOps 서비스 계정.

    눈송이 란 무엇입니까??

    눈송이는 가장 인기있는 것 중 하나입니다 클라우드 데이터웨어 하우스 단순성을 손상시키지 않고 수많은 기능을 제공합니다. 최고를 제공하기 위해 자동으로 상하로 스케일링합니다 성능 대비 비율. 눈송이의 특징은 분리된다는 것입니다 컴퓨팅 ~에서 저장. 이것은 Amazon Redshift를 포함한 거의 모든 다른 데이터웨어 하우스 가이 두 가지를 결합하여 크기를 고려해야합니다 가장 높은 워크로드 중에서 관련된 비용이 발생합니다.

    눈송이는 하드웨어 나 소프트웨어가 필요하지 않습니다 선택, 설치, 구성 또는 관리, 자원을 설정, 유지 보수 및 지원 사내 서버. 모든 데이터를 중앙 집중식 위치에 저장하고 컴퓨팅 크기를 독립적으로 저장할 수 있습니다. 예를 들어, 필요한 경우 실시간 데이터로드 복잡한 변환이지만보고에 복잡한 쿼리 만 있으면 데이터로드를 위해 대규모 눈송이 창고를 스크립트 한 다음 이후에 다시 축소 할 수 있습니다’s 완료 – 모두 실시간. 솔루션 목표를 위태롭게하지 않고 상당한 돈을 절약 할 수 있습니다.

    눈송이의 주요 특징

    눈송이의 주요 특징 중 일부는 다음과 같습니다

    • 확장 성 : 그만큼 계산 그리고 저장 자원은 눈송이에서 분리되어 있습니다’ 멀티 클러스터 공유 데이터 아키텍처. 이 전략은 사용자에게 많은 양의 데이터를 신속하게로드해야 할 때 자원을 확장 할 수있는 기능을 제공하고 모든 종류의 운영을 방해하지 않고 프로세스가 완료되면 다시 스케일로 축소해야합니다.
    • 필요 없음 : 데이터베이스 관리자 또는 IT 팀의 광범위한 참여없이 비즈니스가 솔루션을 설정하고 관리 할 수 ​​있습니다. 소프트웨어 설치 또는 하드웨어 시운전이 필요하지 않습니다.
    • 보안: 눈송이는 사용자가 눈송이에 액세스하는 방법부터 데이터 저장 방법에 이르기까지 광범위한 보안 기능을 수용합니다. 계정에 대한 액세스를 제한하려면 IP 주소 화이트리스트를 통해 네트워크 정책을 관리 할 수 ​​있습니다. Snowflake는 다음을 포함한 다양한 인증 방법을 지원합니다 2 단계 인증 그리고 SSO ~을 통해 연합 인증.
    • 반 구조화 된 데이터 지원 : 눈송이’S 아키텍처는 저장을 가능하게합니다 구조 그리고 반 구조 동일한 위치에있는 데이터를 사용하여 데이터 변종 스키마 읽다 데이터 형식. 변종 구조화 된 데이터 및 반 구조화 된 데이터를 모두 저장할 수 있습니다. 데이터가로드되면 Snowflake는 자동으로 구문 분석하고 속성을 추출하여 원주 형식으로 저장합니다.

    CI/CD 파이프 라인이란 무엇입니까??

    CI/CD 파이프 라인은 새로운 버전의 소프트웨어를 제공하기 위해 따라야하는 일련의 절차입니다. 연속 통합/연속 전달 (CI/CD) 파이프 라인은 DevOps 또는 a 사이트 안정성 엔지니어링 (SRE) 접근하다. CI/CD 파이프 라인에는 모니터링 및 자동화가 통합되어 특히 응용 프로그램 개발 프로세스를 개선합니다 완성 그리고 테스트 도중뿐만 아니라 단계 배달 그리고 전개. CI/CD 파이프 라인의 각 단계는 수동으로 수행 할 수 있지만 CI/CD 파이프 라인의 실제 값은 자동화를 통해 실현됩니다.

    1. CI/CD 파이프 라인의 목적은 무엇입니까?

    CI/CD 파이프 라인의 목적은 정의 된 절차 세트를 따라 새 버전의 소프트웨어를 제공하는 것입니다. 응용 프로그램 개발 프로세스의 통합, 테스트, 전달 및 배포 단계에서 자동화 및 모니터링 사용을 통해 소프트웨어 전달을 개선하는 것을 목표로합니다.

    2. CI (Continuous Integration)는 CI/CD 파이프 라인에 어떻게 적합합니까??

    CI (Continuous Integration). 코드 변경이 원활하게 통합되고 충돌 또는 문제가 개발 프로세스 초기에 식별되도록합니다.

    삼. CI/CD 파이프 라인의 연속 전달 (CD)이란??

    CD (Continuous Delivery). 소프트웨어의 업데이트 또는 개선이 사용자에게 효율적이고 일관되게 제공되도록합니다.

    4. CI/CD 파이프 라인의 각 단계를 수동으로 수행 할 수 있습니까??

    예, CI/CD 파이프 라인의 각 단계는 수동으로 수행 할 수 있습니다. 그러나 CI/CD 파이프 라인의 실제 값은 자동화를 통해 실현됩니다. 파이프 라인 단계의 수동 실행은 시간이 많이 걸리고 인간 오류가 발생하기 쉬운 반면 자동화는 효율성을 향상시키고 일관된 결과를 보장합니다.

    5. CI/CD 파이프 라인 자동화의 주요 이점은 무엇입니까??

    CI/CD 파이프 라인 자동화의 주요 이점은 소프트웨어 제공의 효율성과 일관성을 향상시키는 것입니다. 자동화는 수동 노력을 줄이고 개발자가 반복적 인 작업을 수행하지 않고 코딩에 집중할 수 있도록합니다. 또한 각 코드 변경이 동일한 테스트 세트 및 배포 단계를 거치도록하여보다 신뢰할 수 있고 안정적인 소프트웨어가 발생합니다.

    6. 조직이 CI/CD 파이프 라인 구현을 통해 어떻게 이익을 얻을 수 있습니까??

    CI/CD 파이프 라인을 구현함으로써 조직은 더 빠른 소프트웨어 제공, 시장 시간 단축, 코드 품질 향상 및 개발자 생산성 향상의 혜택을 누릴 수 있습니다. 이를 통해 팀이 소프트웨어를 더 자주 반복하고 릴리스하고 고객 피드백에 신속하게 응답하며 최소한의 다운 타임으로 새로운 기능과 업데이트를 제공 할 수 있습니다.

    7. Azure Devops 및 Flyway를 사용하여 눈송이 CI/CD 파이프 라인을 구축하기위한 전제 조건은 무엇입니까??

    Azure DevOps 및 Flyway를 사용하여 눈송이 CI/CD 파이프 라인을 구축하기위한 전제 조건에는 GIT에 대한 실습 경험, 활성 눈송이 계정 및 Active Azure DevOps 서비스 계정이 포함됩니다.

    8. 눈송이의 주요 특징은 무엇입니까??

    눈송이의 주요 특징에는 확장 성, 관리 요구 사항 없음, 강력한 보안 조치 및 반 구조화 된 데이터 지원이 포함됩니다. 컴퓨팅 및 스토리지 리소스의 자동 스케일링을 제공하고 관리를 단순화합니다. Snowflake는 또한 데이터 액세스를위한 강력한 보안 기능을 제공하고 구조화 및 반 구조화 된 데이터의 저장을 지원합니다.

    9. 눈송이는 다른 데이터웨어 하우스와 어떻게 다릅니 까??

    눈송이는 스토리지에서 컴퓨팅을 분리하여 다른 데이터웨어 하우스와 차별화됩니다. 컴퓨팅 및 스토리지를 결합한 Amazon Redshift와 같은 다른 데이터웨어 하우스와 달리 Snowflake는 사용자가 컴퓨팅 및 스토리지를 독립적으로 확장 할 수 있습니다. 이 유연성은 사용자가 특정 작업량 요구 사항에 따라 비용 및 성능을 최적화 할 수 있습니다.

    10. Snowflake는 실시간 데이터로드 및 복잡한 쿼리를 처리하기 위해 어떤 장점을 제공합니까??

    Snowflake는 사용자가 데이터로드를 위해 대규모 Snowflake Warehouse를 스크립트 한 다음 실시간으로 실시간으로 스케일로 스케일링 할 수 있도록 실시간 데이터로드 및 복잡한 쿼리를 처리 할 수있는 이점을 제공합니다. 이 접근법은 실시간 데이터로드 및 복잡한 쿼리의 효율적인 처리를 보장하면서 상당한 비용을 절약합니다.

    데이터 커뮤니티 서밋을 통과하십시오

    CI/CD 파이프 라인은 새로운 버전의 소프트웨어를 제공하기 위해 따라야하는 일련의 절차입니다. 연속 통합/연속 전달 (CI/CD) 파이프 라인은 DevOps 또는 a 사이트 안정성 엔지니어링 (SRE) 접근하다. 완성 그리고 테스트 도중뿐만 아니라 단계 배달 그리고 전개. CI/CD 파이프 라인의 각 단계는 수동으로 수행 할 수 있지만 CI/CD 파이프 라인의 실제 값은 자동화를 통해 실현됩니다.

    Azure DevOps & Flyway를 사용하여 눈송이 CI CD 파이프 라인 구축 단순화 : 4 가지 중요한 단계

    약어 CI 및 CD는 현대 개발 관행 및 DevOps에서 자주 사용됩니다. 연속 통합 (CI) 개발자가 자동화 된 빌드 및 테스트가 실행되는 중앙 저장소로 코드 변경을 자주 병합하는 기본 DevOps 모범 사례를 나타냅니다. 반면에, 연속 전달 (CD) 빌드 스테이지에 따라 테스트 및/또는 생산 환경에 모든 코드 변경을 자동으로 배포하므로 지속적인 통합의 확장입니다.

    목차

    이 기사의 완전한 연습으로, 당신은 그것이 제공하는 주요 기능과 함께 눈송이에 대한 괜찮은 이해를 얻게 될 것입니다. 이 기사는 또한 구축 방법에 대한 단계별 안내서를 제공합니다 눈송이 CI CD 원활한 방식으로 파이프 라인. Snowflake CI CD 파이프 라인에 대해 자세히 알아 보려면 함께 읽으십시오.

    목차

    • 전제 조건
    • 눈송이 란 무엇입니까??
      • 눈송이의 주요 특징
      • 1 단계 : 데모 프로젝트 생성
      • 2 단계 : 생산 환경 설정
      • 3 단계 : 라이브러리 변수 그룹을 만듭니다
      • 4 단계 : 눈송이 CI CD 배포 파이프 라인 생성 및 실행

      전제 조건

      • git에 대한 실습 경험.
      • 활성 눈송이 계정.
      • 활성 Azure DevOps 서비스 계정.

      ?

      눈송이는 가장 인기있는 것 중 하나입니다 클라우드 데이터웨어 하우스 단순성을 손상시키지 않고 수많은 기능을 제공합니다. 최고를 제공하기 위해 자동으로 상하로 스케일링합니다 성능 대비 비율. 눈송이의 특징은 분리된다는 것입니다 컴퓨팅 ~에서 저장. 이것은 Amazon Redshift를 포함한 거의 모든 다른 데이터웨어 하우스 가이 두 가지를 결합하여 크기를 고려해야합니다 가장 높은 워크로드 중에서 관련된 비용이 발생합니다.

      눈송이는 하드웨어 나 소프트웨어가 필요하지 않습니다 선택, 설치, 구성 또는 관리, 자원을 설정, 유지 보수 및 지원 사내 서버. 모든 데이터를 중앙 집중식 위치에 저장하고 컴퓨팅 크기를 독립적으로 저장할 수 있습니다. 예를 들어, 필요한 경우 실시간 데이터로드 복잡한 변환이지만보고에 복잡한 쿼리 만 있으면 데이터로드를 위해 대규모 눈송이 창고를 스크립트 한 다음 이후에 다시 축소 할 수 있습니다’s 완료 – 모두 실시간. 솔루션 목표를 위태롭게하지 않고 상당한 돈을 절약 할 수 있습니다.

      눈송이의 주요 특징

      눈송이의 주요 특징 중 일부는 다음과 같습니다

      • 확장 성 : 그만큼 계산 그리고 저장 자원은 눈송이에서 분리되어 있습니다’ 공유 데이터 아키텍처. 이 전략은 사용자에게 많은 양의 데이터를 신속하게로드해야 할 때 자원을 확장 할 수있는 기능을 제공하고 모든 종류의 운영을 방해하지 않고 프로세스가 완료되면 다시 스케일로 축소해야합니다.
      • 필요 없음 : 데이터베이스 관리자 또는 IT 팀의 광범위한 참여없이 비즈니스가 솔루션을 설정하고 관리 할 수 ​​있습니다. 소프트웨어 설치 또는 하드웨어 시운전이 필요하지 않습니다.
      • 보안: 눈송이는 사용자가 눈송이에 액세스하는 방법부터 데이터 저장 방법에 이르기까지 광범위한 보안 기능을 수용합니다. 계정에 대한 액세스를 제한하려면 IP 주소 화이트리스트를 통해 네트워크 정책을 관리 할 수 ​​있습니다. Snowflake는 다음을 포함한 다양한 인증 방법을 지원합니다 2 단계 인증 그리고 SSO ~을 통해 연합 인증.
      • 반 구조화 된 데이터 지원 : 눈송이’S 아키텍처는 저장을 가능하게합니다 구조 그리고 반 구조 동일한 위치에있는 데이터를 사용하여 데이터 변종 스키마 읽다 데이터 형식. 변종 구조화 된 데이터 및 반 구조화 된 데이터를 모두 저장할 수 있습니다. 데이터가로드되면 Snowflake는 자동으로 구문 분석하고 속성을 추출하여 원주 형식으로 저장합니다.

      CI/CD 파이프 라인이란 무엇입니까??

      CI/CD 파이프 라인은 새로운 버전의 소프트웨어를 제공하기 위해 따라야하는 일련의 절차입니다. 연속 통합/연속 전달 (CI/CD) 파이프 라인은 DevOps 또는 a 사이트 안정성 엔지니어링 (SRE) 접근하다. CI/CD 파이프 라인에는 모니터링 및 자동화가 통합되어 특히 응용 프로그램 개발 프로세스를 개선합니다 완성 그리고 테스트 도중뿐만 아니라 단계 배달 그리고 전개. CI/CD 파이프 라인의 각 단계는 수동으로 수행 할 수 있지만 CI/CD 파이프 라인의 실제 값은 자동화를 통해 실현됩니다.

      많은 소프트웨어 개발 팀은 지리적으로 분산되거나 분리되어 있지만 지속적인 통합 (CI)은 피하면서 빠른 개발을 가능하게합니다 충돌, 버그 및 복제를 병합합니다. 연속 통합은 항상 메인 브랜치를 최신 상태로 유지하지만 단기 분리 된 측면이나 사소한 변경에 대한 단기 분리 된 측면을 허용 할 수도 있습니다.

      지속적인 배송은 빠르고 점진적으로 개발할 수 있으며 개발 팀이 언제든지 소프트웨어를 구축하고 출시 할 수 있습니다. 또한 DevOps 팀이 비용을 절감하고 새로운 릴리스가 배치되는 속도를 높이는 데 도움이됩니다. 지속적인 전달은 반복 가능한 구조가 필요하며 지속적인 통합의 확장으로 간주됩니다. 이 기사의 뒷부분에서 구축하는 방법을 배웁니다 눈송이 CI CD 파이프 라인.

      Azure Devops는 무엇입니까??

      Azure Devops는 a입니다 서비스로서 소프트웨어 (SAAS) 소프트웨어 개발 및 배포를위한 엔드 투 엔드 DevOps 도구 체인을 제공하는 Microsoft가 제공하는 플랫폼. 또한 대부분의 시장과 통합됩니다’주요 도구와 DevOps 툴체인을 조정하기위한 탁월한 선택입니다. Azure Devops는 팀이 작업 계획, 코드 개발에 대해 협업하며 애플리케이션을 구축 및 배포 할 수있는 개발자 서비스를 제공합니다. Azure Devops는 개발자, 프로젝트 관리자 및 소프트웨어 개발에 대한 공동 작업을 제공하는 문화 및 일련의 절차를 조성합니다. 조직은 기존 소프트웨어 개발 접근법이 허용하는 것보다 훨씬 빠른 속도로 제품을 만들고 개선 할 수있게합니다.

      플라이 웨이는 무엇입니까??

      플라이 웨이는 an입니다 오픈 소스 도구 라이센스 아파치 라이센스 2.0 이를 통해 사용자는 자동화 및 버전 기반을 구현할 수 있습니다 데이터베이스 마이그레이션. 필요한 업데이트 작업을 SQL 스크립트 또는 자바 코드. Command Line 클라이언트, 빌드 프로세스의 일부 또는 Java 응용 프로그램의 일부로 데이터베이스 마이그레이션을 실행할 수 있습니다.

      이 프로세스의 주요 장점은 Flyway가 필요한 업데이트 작업을 감지하고 실행한다는 것입니다. 결과적으로, 당신은하지 않습니다’t 현재 데이터베이스를 업데이트하려면 어떤 SQL 업데이트 문을 실행 해야하는지 알아야합니다. 귀하와 동료는 데이터베이스를 한 버전에서 다음 버전으로 마이그레이션하는 데 사용될 업데이트 작업을 단순히 정의 할 수 있으며 Flyway는 현재 버전을 감지하고 필요한 업데이트 작업을 실행하여 데이터베이스를 업데이트합니다.

      확실하게 나ntegrate 디Hevo와 ATA’S 완전 자동화 코드 데이터 파이프 라인이 없습니다

      Hevo를 사용하는 1000 개 이상의 데이터 중심 회사와 같은 경우 사용하는 비즈니스 앱의 70% 이상이 SaaS 응용 프로그램입니다. 이러한 소스의 데이터를 적시에 통합하는 것은 연료 분석과 그로부터 내려진 결정에 중요합니다. 그러나 API 엔드 포인트 등이 얼마나 빨리 변경 될 수 있는지를 감안할 때 이러한 파이프 라인을 작성하고 관리하는 것은 영혼을 징수하는 운동이 될 수 있습니다.
      hevo’s없는 코드 데이터 파이프 라인 플랫폼은 몇 분 안에 150 개 이상의 소스를 연결하여 다음과 같은 창고에 거의 실시간으로 데이터를 전달할 수 있습니다 눈송이. 무엇’더욱이, 내장 된 변환 기능과 직관적 인 UI는 비 엔지니어조차도 파이프 라인을 설정하고 분석 할 준비가 된 데이터를 몇 분 안에 달성 할 수 있음을 의미합니다.

      .

      데이터 파이프 라인을 관리하는 더 나은 방법을 경험하기 위해 14 일 무료 평가판을 받으십시오.

      Azure Devops 및 Flyway를 사용하여 눈송이 CI/CD 파이프 라인을 만드는 방법?

      눈송이 CI CD 파이프 라인 구축은 광범위하게 4 단계 프로세스입니다. 아래에 주어진 단계를 따라 Snowflake CI CD 파이프 라인을 실행하고 깊게 실행하십시오

      1 단계 : 데모 프로젝트 생성

      눈송이 CI CD 파이프 라인 구축과 관련된 첫 번째 단계는 데모 Azure DevOps 프로젝트를 만들어야합니다. 아래에 주어진 단계를 따르십시오

      • 다음 스크립트를 활용하여 데이터베이스 및 사용자를 만듭니다

      -- 데이터베이스 생성 데이터베이스 생성 FLYWAY_DEMO COMMEND = 'AZURE DEVOPS 배포 테스트'; 데이터베이스 생성 FLYWAY_DEMO_DEV COMMING = 'AZURE DEVOPS 배포 테스트'; 데이터베이스 생성 FLYWAY_DEMO_QA COMMING = 'AZURE DEVOPS 배포 테스트'; - 배포 사용자 생성 사용자 devOpsUser password = ''default_role = sysadmin;

      • 적절한 자격 증명을 사용하여 Azure DevOps 계정에 로그인하십시오.
      • 선택하십시오 조직 그리고 블루 컬러를 클릭하십시오 +새 프로젝트 단추.

      눈송이 CI CD : 새로운 프로젝트 생성 | hevo 데이터

      • 프로젝트에 독특하고 간결한 이름을 부여하십시오. 설명을 추가 할 수도 있습니다. 허락하다’프로젝트를 그 이름으로 지정합니다 Snowflake_flyway 이 튜토리얼을 위해.
      • 이제 선택하십시오 시계 프로젝트의 옵션을 클릭하십시오 만들다 단추.

      눈송이 CI CD : Azure DevOps 프로젝트 | hevo 데이터

      2 단계 : 생산 환경 설정

      승인 단계를 추가하려면 환경이 있어야합니다. 아래에 주어진 단계를 따라 필요한 환경과 승인을 작성하십시오

      • Azure Devops 홈페이지로 돌아갑니다.
      • 왼쪽 탐색 표시 줄로 이동하여 클릭하십시오 환경 옵션.
      • 생산 환경에 고유 한 이름을 부여하고 클릭하십시오 만들다 단추.

      눈송이 CI CD : 생산 환경 | hevo 데이터

      • 생산 환경에 대한 승인을 얻으려면 옆에있는 3 개의 세로 점을 클릭하십시오 리소스 추가 단추.
      • 클릭하십시오 승인 및 수표 승인 목록을 추가하는 옵션.

      눈송이 CI CD : 자원 추가 | hevo 데이터

      3 단계 : 라이브러리 변수 그룹을 만듭니다

      여러 파이프 라인에 사용될 변수 세트가 있으면 한 번 변수 그룹을 만들어 여러 그룹으로 참조 할 수 있습니다. 라이브러리는 눈송이 CI CD 파이프 라인에 사용될 변수 및 파일을 안전하게 저장하는 데 사용됩니다. 아래에 주어진 단계를 따라 라이브러리 변수 그룹을 만듭니다

      눈송이 CI CD : 가변 그룹 생성 | hevo 데이터

      • 왼쪽 탐색 표시 줄에서 클릭하십시오 도서관 아래에 존재합니다 파이프 라인 .
      • 에 도서관 페이지, 가변 그룹 탭.
      • 클릭하십시오 +가변 그룹 새로운 라이브러리 변수 그룹을 만들기위한 버튼.
      • 그룹에 고유 한 이름을 제공하고 다음 변수를 추가하십시오.

      snowflake_jdbc_url = jdbc : snowflake : // snowflake_account_name =..스노우 플라크 컴퓨팅.com snowflake_warehouse = snowflake_rolename = sysadmin snowflake_devops_username = # 비밀 변수 유형으로 표시

      눈송이 CI CD : 라이브러리 변수 그룹 | hevo 데이터

      • 모든 변수를 성공적으로 추가 한 후에는 클릭하는 것을 잊지 마십시오 구하다 변수 그룹의 오른쪽에 버튼’이름. 이것은 변수 그룹의 모습입니다

      4 단계 : 눈송이 CI CD 배포 파이프 라인 생성 및 실행

      이제 눈송이 CI CD 파이프 라인을 만들려면 다음 단계를 따르십시오

      • 왼쪽 탐색 표시 줄에서 파이프 라인 옵션.
      • 처음으로 파이프 라인을 작성하는 경우 파이프 라인을 만듭니다 단추. 이미 정의 된 다른 파이프 라인이있는 경우 새로운 파이프 라인 단추.
      • 에 연결하다 탭을 선택하십시오 Azure Repos git 옵션을 선택하고 원하는 저장소를 선택하십시오 (Snowflake_flyway) 다음 화면에서.

      눈송이 CI CD : Azure Repos git | hevo 데이터

      • 에 파이프 라인을 구성하십시오 페이지를 선택하십시오 스타터 파이프 라인 옵션.

      눈송이 CI CD : 눈송이 구성 CI CD 파이프 라인 구성 | hevo 데이터

      • 마지막으로 다음 코드를 최종 Yaml을 검토하십시오 페이지.

      변수 : - 그룹 : 눈송이.데이터베이스 - 이름 : dbname 값 : flyway_demo- 이름 : FlywayArtifactName 값 : DatabaseartIfacts- 이름 : FlywayVmimage 값 : 'Ubuntu -16.04 ' - 이름 : FlywayContainerimage 값 :'Kulmam92/Flyway -Azure : 6.2.3 '트리거 : - 마스터 스테이지 : - 스테이지 : 변수 빌드 : - 이름 : dbname_postfix 값 : _dev 작업 : - 템플릿 : 템플릿/스노우 플레이크 웨이 빌드.YML 매개 변수 : jobName : 'buildDatabase'DatabasEname : $ (dbname) databasepostfix : $ (dbname_postfix) artifactName : $ (flywayArtifactName) vMimage : $ (FlywayVMimage) concative : $ (flywayvmimage) 컨테이너 라이지 작업 : - 템플릿 : 템플릿/SnowflakeFlywayDeploy.YML 매개 변수 : jobname : dev databaseName : $ (dbname) databasepostfix : $ (dbname_postfix) artifactName : $ (flywayArtifactName) vmimage : $ (FlywayVMimage) 컨테이너 리지 : $ (FlywayContainerImage) EnvironMeRimage : QA Variable : QA VARIABLE : QA VARIABLE : QA VARIABES 작업 : - 템플릿 : 템플릿/SnowflakeFlywayDeploy.YML 매개 변수 : jobName : QA DatabasEname : $ (dbname) databasepostfix : $ (dbname_postfix) artifactName : $ (flywayArtifactName) vmimage : $ (FlywayVmimage) 컨테이너 리지 : $ (flywayway waywayvmimage) 환경 이름 : QA- 스테이지 : prod : preod : preod wome : prod of wore # prod 작업용 빈 문자열 : - 템플릿 : 템플릿/스노우 플라이 웨이 디그리어.YML 매개 변수 : jobname : prod databasename : $ (dbname) databasepostfix : $ (dbname_postfix) artifactName : $ (flywayArtifactName) vmimage : $ (FlywayVmimage) Containerimage : $ (Flywaywaywaywaycontainerimage) 환경 이름 : prod

      눈송이 CI CD : 파이프 라인 저장 및 실행 | hevo 데이터

      • 코드를 편집기에 성공적으로 추가 한 후 저장 및 실행 단추.

      위에서 설명한 모든 단계를 올바른 순서로 따르면 스노우 플레이크 CI CD 파이프 라인을 처음부터 구축 할 수 있습니다!

      결론

      이 블로그는 제공하는 두드러진 기능과 함께 눈송이를 소개했습니다. 또한, 그것은 당신에게 눈송이 CI CD Azure Devops 및 Flyway를 사용하여 처음부터 파이프 라인.

      비즈니스가 성장하기 시작함에 따라 데이터는 회사 전체에서 기하 급수적으로 생성됩니다’S SAAS 응용 프로그램, 데이터베이스 및 기타 소스. 이 성장하는 스토리지 및 컴퓨팅 데이터의 데이터 요구를 충족하려면 엔지니어링 대역폭의 일부를 투자하여 모든 소스의 데이터를 통합하고 청소 및 변환 한 다음 마지막으로 클라우드 데이터웨어 하우스에로드해야합니다 눈송이 추가 비즈니스 분석. 이러한 모든 과제는 효율적으로 처리 할 수 ​​있습니다 HEVO 데이터와 같은 클라우드 기반 ETL 도구.

      No-Code Data Pipeline 인 Hevo Data는 다양한 소스와 다음과 같은 다양한 원하는 목적지간에 데이터 전송을 관리하는 일관되고 신뢰할 수있는 솔루션을 제공합니다 눈송이, 몇 번의 클릭으로. 100 개 이상의 소스와 강력한 통합을 가진 Hevo 데이터 (40 개 이상의 무료 소스 포함) 원하는 데이터 소스에서 데이터를 내보낼 수있을뿐만 아니라 선택한 대상으로로드 할 수있을뿐만 아니라 데이터를 분석 할 수 있도록 데이터를 변환 및 강화하여 BI 도구를 사용하여 주요 비즈니스 요구에 집중하고 통찰력있는 분석을 수행 할 수 있습니다.

      스핀을 위해 Hevo를 가져 가고 싶다? 여기에 가입하십시오 14 일 무료 평가판 기능이 풍부한 Hevo Suite 직접 경험하십시오. 또한 비즈니스 요구에 맞는 올바른 계획을 선택하는 데 도움이되는 타의 추종을 불허하는 가격을 살펴볼 수 있습니다!

      건축 경험을 공유하십시오 눈송이 CI CD 파이프 라인 아래 의견에서!

      눈송이

      지원 레벨이 데이터베이스의 지원 정도를 결정합니다 (자세히 알아보기).

      드라이버

      URL 형식 jdbc : 눈송이 : //계정.스노우 플라크 컴퓨팅.com/?DB =데이터 베이스& 창고 =창고& 역할 =역할 (선택적으로 & 스키마 =개요 현재 스키마를 지정하려면)
      Flyway 명령 줄이 있습니다 예
      Maven Central 좌표 그물.눈송이 : 눈송이 -JDBC : 3.6.23
      지원되는 버전 삼.6.23 이상
      기본 Java 클래스 그물.눈송이.고객.JDBC.스노우 클레이 리버

      SQL 스크립트 구문

      • 명령문이있는 표준 SQL 구문 ;

      호환성

      • Snowflake Web GUI에 의해 내보낸 DDL은 플라이 웨이 마이그레이션에서 변경되지 않음을 사용할 수 있습니다
      • Flyway에서 실행 된 모든 SQL 스크립트는 Snowflake Web GUI에서 실행할 수 있습니다 (자리 표시자가 교체 된 후)
      • 눈송이 드라이버는 Java 8이 필요합니다+. Java 7 사용자를위한 Snowflake의 지원은 없습니다.

      예

      / * 단일 라인 주석 */ 테이블 생성 test_data (value varchar (25) null 기본 키가 아님); / * 멀티 라인 댓글 */-SQL 스타일 주석-자리 표시자는 $ (이름) 값에 삽입.

      키 기반 인증

      Snowflake JDBC는 키 기반 인증을 지원합니다. 이것을 사용하려면 다음을 수행해야합니다

      • V3 이상을 사용하고 있는지 확인하십시오.Snowflake JDBC 드라이버 11 개 (Flyway는 현재이 버전과 함께 선적)
      • 공개/개인 키 쌍을 생성합니다
      • Alter 사용자를 사용하여 관련 눈송이 사용자 계정에 공개 키를 할당 -이 단계에 대한 전체 지침은 Snowflake를 참조하십시오’s 문서

      마지막으로, 추가 매개 변수로 JDBC 연결 문자열을 수정하여 키 기반 인증을 활성화하고 개인 키의 위치를 ​​참조하십시오. authenticator = snowflake_jwt & private_key_file = .

      제한

      • 여기에 설명 된 병렬 마이그레이션은 눈송이에서 사용할 수 없습니다. GitHub 문제 에서이 기능의 상태를 추적 할 수 있습니다.

      git과의 비행 및 눈송이 연결

      여러 테이블이있는 기존 데이터베이스가 있으며 일부 테이블의 스키마를 변경할 때마다 데이터 손실을 피하기 위해 수동 스크립트를 실행해야했습니다. 우리는 Git Repo와 통합하고 데이터베이스 용 업데이트 된 DDL을 생성 할 수있는 소프트웨어를 찾고 있습니다. Flyway 데이터베이스 마이그레이션 도구를 발견했으며 문서를 살펴 보면 데이터베이스 스키마의 변경 사항이 푸시되는 Code Repo와의 통합에 대한 질문이있었습니다. 또한 플라이 웨이는 눈송이와 함께 작동합니다. 그렇다면, 필요한 JDBC 드라이버를 어디에 추가 할 수 있습니까? 데이터베이스에 연결하고 .눈송이 연결을위한 conf 파일.

      2019 년 2 월 22 일 20:12에 요청했습니다

      67 4 4은 배지 18 18 청동 배지

      3 답변 3

      공식적으로 Flyway는 현재 눈송이와 함께 작동하지 않습니다 (https : // github에서 볼 수 있습니다.com/flyway/flyway/pull/2274). 이 논의에 따르면 눈송이 호환 포크가 존재하는 것처럼 보이지만 생산 시스템에서 크게 확인하지 않고는 권장하지는 않지만 실제로 필요한 경우 살펴볼 가치가있을 수 있습니다.

      GIT와의 플라이웨이 통합과 관련하여 Flyway Docker Image (https : // github를 가져 와서 CI 프로세스에서 Flyway를 통합 할 수 있습니다.com/flyway/flyway -docker) – 또는 눈송이 호환 포크를 찾기로 결정한 경우 자신의 이미지 사용 – 대상 데이터베이스에 대해 마이그레이트 명령을 실행하는 경우 (S).

      11 1 1 실버 배지 2 2 청동 배지

      답장을 보내 주셔서 감사합니다. 다른 데이터베이스와의 플라이웨이 호환성이 좋습니다. 우리는 옵션을보고 있습니다. 눈송이 옵션을 추가하기를 기대합니다

      2019 년 3 월 13 일 5:55

      나는이 풀 요청에서 일하는 사람이 아니지만 불행히도 🙂 내 팀은 당신과 똑같은 문제를 겪었습니다. Liquibase와 Sqitch를 확인할 수 있다고 생각합니다 !

      눈송이

      지원 레벨이 데이터베이스의 지원 정도를 결정합니다 (자세히 알아보기).

      드라이버

      URL 형식 jdbc : 눈송이 : //계정.스노우 플라크 컴퓨팅.?DB =데이터 베이스& 창고 =창고& 역할 =역할 (선택적으로 & 스키마 =개요 현재 스키마를 지정하려면)
      Flyway 명령 줄이 있습니다 예
      Maven Central 좌표 그물.눈송이 : 눈송이 -JDBC
      지원되는 버전 삼.6.23 이상
      기본 Java 클래스 그물.눈송이.고객.JDBC.스노우 클레이 리버

      SQL 스크립트 구문

      • 명령문이있는 표준 SQL 구문 ;

      호환성

      • Snowflake Web GUI에 의해 내보낸 DDL은 플라이 웨이 마이그레이션에서 변경되지 않음을 사용할 수 있습니다
      • Flyway에서 실행 된 모든 SQL 스크립트는 Snowflake Web GUI에서 실행할 수 있습니다 (자리 표시자가 교체 된 후)
      • +. Java 7 사용자를위한 Snowflake의 지원은 없습니다.

      예

      / * 단일 라인 주석 */ 테이블 생성 test_data (value varchar (25) null 기본 키가 아님); / * 멀티 라인 댓글 */-SQL 스타일 주석-자리 표시자는 $ (이름) 값에 삽입. 티');

      키 기반 인증

      Snowflake JDBC는 키 기반 인증을 지원합니다. 이것을 사용하려면 다음을 수행해야합니다

      • V3 이상을 사용하고 있는지 확인하십시오.Snowflake JDBC 드라이버 11 개 (Flyway는 현재이 버전과 함께 선적)
      • 공개/개인 키 쌍을 생성합니다
      • Alter 사용자를 사용하여 관련 Snowflake 사용자 계정에 공개 키를 할당 -이 단계에 대한 전체 지침은 Snowflake의 문서를 참조하십시오

      마지막으로, 추가 매개 변수로 JDBC 연결 문자열을 수정하여 키 기반 인증을 활성화하고 개인 키의 위치를 ​​참조하십시오. authenticator = snowflake_jwt & private_key_file = .

      제한

      • 여기에 설명 된 병렬 마이그레이션은 눈송이에서 사용할 수 없습니다. GitHub 문제 에서이 기능의 상태를 추적 할 수 있습니다.
      • Java 명령 줄에 배송 된 JRE를 포함하는 Java 16 이상을 사용하는 사용자는 Java_args에 다음 JVM 인수를 추가해야합니다.베이스/자바.lang = 모든 이름 . 이것은 명령 줄 또는 환경 변수를 통해 수행 할 수 있습니다. 이것은 Java 16 런타임의 변경으로 인한 것입니다.

      당신이 찾고 있던 것을 찾지 못했습니다?

      • Redgate 포럼을 방문하십시오
      • 연락처 지원