Vertex AI Jupyter 노트북 튜토리얼

튜토리얼 단계

• Vertex AI 모델 학습 작업 만들기
• AutoML 테이블 형식 모델 학습
• 모델 리소스를 서빙 엔드포인트 리소스에 배포
• 데이터를 전송하여 예측 수행
• 모델 리소스 배포 취소

튜토리얼 단계

• Vertex AI 데이터 세트 만들기
• AutoML 텍스트 분류 모델 리소스 학습
• 모델 리소스에 대한 평가 측정항목 가져오기
• 엔드포인트 리소스 만들기
• 엔드포인트 리소스에 모델 리소스 배포
• 온라인 예측 수행
• 일괄 예측 수행

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• 모델 학습
• 모델 평가 확인
• 일괄 예측 수행

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• 모델 학습
• 모델 평가 확인
• 모델 리소스를 서빙 엔드포인트 리소스에 배포
• 예측 수행
• 모델 배포 취소

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• 모델 학습
• 모델 리소스에서 Cloud Storage로 Edge 모델 내보내기
• 모델을 로컬로 다운로드
• 로컬 예측 수행

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• 모델 학습
• 모델 평가 확인
• 모델 리소스를 서빙 엔드포인트 리소스에 배포
• 예측 수행
• 모델 배포 취소

튜토리얼 단계

• 기본값에서 검색 공간을 줄여 시간을 절약하는 학습 파이프라인을 만듭니다.
• 이전 파이프라인의 아키텍처 검색결과를 재사용하여 시간을 절약하는 학습 파이프라인을 만듭니다.

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• 모델 학습
• 모델 평가 확인
• 일괄 예측 수행

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• 모델 학습
• 모델 평가 확인
• 일괄 예측 수행

튜토리얼 단계

• 이미지 모델 학습
• 이미지 모델을 에지 모델로 내보내기
• 테이블 형식 모델 학습
• 테이블 형식 모델을 클라우드 모델로 내보내기
• 텍스트 모델 학습
• 동영상 모델 학습

튜토리얼 단계

• Vertex AI TimeSeriesDataset 리소스 만들기
• 모델 학습
• 모델 평가 확인
• 일괄 예측 수행

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• 모델 학습
• 모델 평가 확인
• 일괄 예측 수행

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• AutoML 테이블 형식 예측 모델 리소스 학습
• 모델 리소스에 대한 평가 측정항목 가져오기
• 일괄 예측 수행

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• 모델 학습
• 모델 평가 확인
• 모델 리소스를 서빙 엔드포인트 리소스에 배포
• 예측 수행
• 모델 배포 취소

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• 모델 학습
• 모델 평가 확인
• 모델 리소스를 서빙 엔드포인트 리소스에 배포
• 예측 수행
• 모델 배포 취소

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• 모델 학습
• 모델 평가 확인
• 모델 리소스를 서빙 엔드포인트 리소스에 배포
• 예측 수행
• 모델 배포 취소

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• 데이터 세트에서 AutoML 모델의 학습 작업을 만듭니다.
• 모델 평가 측정항목을 확인합니다.
• Vertex AI 모델 리소스를 서빙 Vertex AI 엔드포인트에 배포합니다.
• 배포된 모델에 예측 요청을 수행합니다.
• 엔드포인트에서 모델 배포를 취소합니다.
• 삭제 프로세스를 수행합니다.

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• 모델 학습
• 모델 평가 확인
• 일괄 예측 수행

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• 모델 학습
• 모델 평가 확인
• 일괄 예측 수행

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• 모델 학습
• 모델 평가 확인
• 일괄 예측 수행

튜토리얼 단계

• 프로젝트에 로컬 BigQuery 테이블 만들기
• BigQuery ML 모델 학습
• BigQuery ML 모델 평가
• BigQuery ML 모델을 클라우드 모델로 내보내기
• 모델을 Vertex AI 모델 리소스로 업로드
• Vertex AI Vizier를 사용한 BigQuery ML 모델의 초매개변수 조정
• Vertex AI Model Registry에 BigQuery ML 모델 자동 등록

튜토리얼 단계

• 꽃의 측정치를 입력으로 사용하여 붓꽃의 유형을 예측하는 모델을 학습시킵니다.
• 모델 및 직렬화된 전처리기를 저장합니다.
• 예측 및 상태 점검을 처리하는 FastAPI 서버를 빌드합니다.
• 모델 아티팩트로 커스텀 컨테이너를 빌드합니다.
• Vertex AI 엔드포인트에 커스텀 컨테이너를 업로드하고 배포합니다.

튜토리얼 단계

• 모델 학습을 위한 Vertex AI 커스텀 TrainingPipeline을 만듭니다.
• TensorFlow 모델을 학습시킵니다.
• 모델 리소스를 서빙 엔드포인트 리소스에 배포
• 예측 수행
• 모델 리소스 배포 취소

튜토리얼 단계

• 모델 학습을 위해 Vertex AI 커스텀 작업을 생성합니다.
• 커스텀 컨테이너를 사용하여 TensorFlow 모델을 학습시키고 등록합니다.
• Vertex AI Model Registry에서 등록된 모델을 나열합니다.

튜토리얼 단계

• 서비스 계정 및 Cloud Storage 버킷 설정
• Vertex AI 텐서보드 인스턴스 만들기
• 커스텀 학습 작업 만들기 및 실행
• Vertex AI 텐서보드 프로파일러 대시보드 보기

튜토리얼 단계

• Python 패키지를 사용��� 학습
• 초매개변수 조정 시 정확도를 보고합니다.
• Cloud StorageFuse를 사용하여 모델 아티팩트를 Cloud Storage에 저장합니다.
• Vertex AI 모델 리소스를 만듭니다.

튜토리얼 단계

• 선행 학습된 이미지 분류 모델을 모델 리소스(모델 A)로 업로드합니다.
• 선행 학습된 텍스트 문장 인코더 모델을 모델 리소스(모델 B)로 업로드합니다.
• 공유 VM 배포 리소스 풀을 만듭니다.
• 공유 VM 배포 리소스 풀을 나열합니다.
• 엔드포인트 리소스 2개를 만듭니다.
• 배포 리소스 풀을 사용하여 첫 번째 모델(모델 A)을 첫 번째 엔드포인트 리소스에 배포합니다.
• 배포 리소스 풀을 사용하여 두 번째 모델(모델 B)을 두 번째 엔드포인트 리소스에 배포합니다.
• 처음 배포된 모델(모델 A)로 예측 요청을 보냅니다.
• 두 번째 배포된 모델(모델 B)로 예측 요청을 수행합니다.

튜토리얼 단계

• TensorFlow 모델 학습을 위한 Vertex AI 커스텀 작업을 만듭니다.
• 학습된 모델 아티팩트를 모델 리소스로 업로드합니다.
• 일괄 예측 수행

튜토리얼 단계

• TensorFlow 모델 학습을 위한 Vertex AI 커스텀 작업을 만듭니다.
• 학습된 모델 아티팩트를 모델 리소스에 업로드합니다.
• 서빙 엔드포인트 리소스를 만듭니다.
• 모델 리소스를 서빙 엔드포인트 리소스에 배포
• 예측 수행
• 모델 리소스 배포 취소

튜토리얼 단계

• AutoML 학습과 호환되는 BigQuery 테이블에서 Vertex AI 데이터 세트 리소스를 만듭니다.
• 데이터 세트의 사본을 BigQuery에서 AutoML 또는 커스텀 학습과 호환되는 Cloud Storage의 CSV 파일로 추출합니다.
• BigQuery 데이터 세트의 행을 커스텀 학습과 호환되는 pandas dataframe으로 선택합니다.
• BigQuery 데이터 세트에서 커스텀 학습 TensorFlow 모델과 호환되는 tf.data.Dataset로 행을 선택합니다.
• 추출된 CSV 파일에서 커스텀 학습 TensorFlow 모델과 호환되는 tf.data.Dataset로 행을 선택합니다.
• CSV 파일에서 BigQuery 데이터 세트를 만듭니다.
• BigQuery 테이블에서 커스텀 학습 XGBoost 모델과 호환되는 DMatrix로 데이터를 추출합니다.

튜토리얼 단계

• 데이터 라벨러를 위한 전문가 풀을 만듭니다.
• 데이터 라벨링 작업을 만듭니다.
• 데이터 라벨링 작업을 제출합니다.
• 데이터 라벨링 작업을 나열합니다.
• 데이터 라벨링 작업을 취소합니다.

튜토리얼 단계

• 데이터 사전 처리를 위한 모듈 실행
• 데이터 세트 아티팩트 만들기
• 로그 매개변수
• 모델 학습을 위한 모듈 실행
• 로그 매개변수
• 모델 아티팩트 만들기
• 데이터 세트, 모델, 매개변수에 추적 계보 할당

튜토리얼 단계

• 모델 매개변수 로깅
• 모든 에포크의 손실과 측정항목을 Vertex AI 텐서보드에 로깅
• 평가 측정항목 로깅

튜토리얼 단계

• 학습 구성요소 공식화
• 학습 파이프라인 빌드
• 여러 파이프라인 작업 실행 및 결과 로깅
• 다양한 파이프라인 작업 비교

튜토리얼 단계

• 사전 정의된 키 값 라벨 쌍 <label_key, label_value=""></label_key,>가 있는 TB 실험을 삭제하는 방법
• create_time 전에 생성된 TB 실험을 삭제하는 방법
• update_time 전에 생성된 TB 실험을 삭제하는 방법

튜토리얼 단계

• 스크립트에서 모델 실험 공식화
• Vertex AI Training에서 로컬 스크립트를 사용하여 모델 학습 실행
• Vertex AI 실험에서 ML 실험 매개변수 및 측정항목 확인

튜토리얼 단계

• 로컬(노트북) 학습
• 실험 만들기
• 실험에서 첫 번째 실행 만들기
• 로그 매개변수 및 측정항목
• 아티팩트 계보 만들기
• 실험 결과 시각화
• 두 번째 실행 실행하기
• 실험에서 두 실행 비교
• Cloud(Vertex AI) 학습
• 학습 스크립트 내

튜토리얼 단계

• Vertex AI SDK에서 자동 로깅을 사용 설정합니다.
• scikitlearn 모델을 학습시키고 실험 실행을 설정하지 않고 Vertex AI 실험에 자동 로깅된 측정항목과 매개변수를 사용하여 결과 실험 실행을 확인합니다.
• TensorFlow 모델을 학습시키고 aiplatform.start_run() 및 aiplatform.end_run()으로 실험 실행을 수동으로 설정하여 Vertex AI 실험으로 자동 로깅된 측정항목 및 매개변수를 확인합니다.
• Vertex AI SDK에서 자동 로깅을 사용 중지한 후 PyTorch 모델을 학습시키고 매개변수 또는 측정항목이 로깅되지 않았는지 확인합니다.

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• AutoML 테이블 형식 이진 분류 모델을 학습시킵니다.
• 학습된 모델의 모델 평가 측정항목을 확인합니다.
• 설명 기능을 사용하여 일괄 예측 요청을 수행합니다.

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• AutoML 테이블 형식 이진 분류 모델을 학습시킵니다.
• 학습된 모델의 모델 평가 측정항목을 확인합니다.
• 서빙 엔드포인트 리소스를 만듭니다.
• 모델 리소스를 서빙 엔드포인트 리소스에 배포
• 설명 가능성으로 온라인 예측 요청을 수행합니다.
• 모델 리소스 배포 취소

튜토리얼 단계

• TensorFlow 모델 학습을 위한 Vertex AI 커스텀 작업을 만듭니다.
• 학습된 모델의 모델 평가를 확인합니다.
• 모델이 배포되는 시점에 대한 설명 매개변수를 설정합니다.
• 학습된 모델 아티팩트와 설명 매개변수를 모델 리소스로 업로드합니다.
• 설명이 포함된 일괄 예측을 수행합니다.

튜토리얼 단계

• TensorFlow 모델 학습을 위한 Vertex AI 커스텀 작업을 만듭니다.
• 학습된 모델의 모델 평가를 확인합니다.
• 모델이 배포되는 시점에 대한 설명 매개변수를 설정합니다.
• 학습된 모델 아티팩트와 설명을 모델 리소스로 업로드합니다.
• 서빙 엔드포인트 리소스를 만듭니다.
• 모델 리소스를 서빙 엔드포인트 리소스에 배포
• 설명을 포함하여 예측을 수행합니다.
• 모델 리소스 배포 취소

튜토리얼 단계

• TensorFlow 모델 학습을 위한 Vertex AI 커스텀 작업을 만듭니다.
• 학습된 모델의 모델 평가를 확인합니다.
• 모델이 배포되는 시점에 대한 설명 매개변수를 설정합니다.
• 학습된 모델 아티팩트와 설명을 모델 리소스로 업로드합니다.
• 설명이 포함된 일괄 예측을 수행합니다.

튜토리얼 단계

• TensorFlow 모델 학습을 위한 Vertex AI 커스텀 작업을 만듭니다.
• 학습된 모델의 모델 평가를 확인합니다.
• 모델이 배포되는 시점에 대한 설명 매개변수를 설정합니다.
• 학습된 모델 아티팩트와 설명을 모델 리소스로 업로드합니다.
• 서빙 엔드포인트 리소스를 만듭니다.
• 모델 리소스를 서빙 엔드포인트 리소스에 배포
• 설명을 포함하여 예측을 수행합니다.
• 모델 리소스 배포 취소

튜토리얼 단계

• 모델 학습을 위해 Vertex 커스텀 작업을 생성합니다.
• TensorFlow 모델을 학습시킵니다.
• 모델 아티팩트를 검색하고 로드합니다.
• 모델 평가를 확인합니다.
• 설명 매개변수를 설정합니다.
• 모델을 Vertex AI 모델 리소스로 업로드합니다.
• 모델 리소스를 서빙 엔드포인트 리소스에 배포
• 설명을 포함하여 예측을 수행합니다.
• 모델 리소스 배포 취소

튜토리얼 단계

• TensorFlow Hub에서 사전 학습된 모델 다운로드
• 배포를 위한 모델 업로드
• 온라인 예측을 위한 모델 배포
• 설명이 포함된 온라인 예측 수행
• 설명이 포함된 일괄 예측 수행

튜토리얼 단계

• TensorFlow 텍스트 분류 모델 빌드 및 학습
• 배포를 위한 모델 업로드
• 온라인 예측을 위한 모델 배포
• 설명이 포함된 온라인 예측 수행

튜토리얼 단계

• 피처스토어를 만듭니다.
• 피처스토어의 새 항목 유형을 만듭니다.
• Pandas DataFrame의 특성 값을 피처스토어의 항목 유형으로 가져옵니다.

튜토리얼 단계

• 데이터를 호스팅하고 서빙하기 위해 온라인 피처스토어 인스턴스를 프로비저닝합니다.
• 온라인 피처스토어 인스턴스에 BigQuery 뷰를 등록하고 동기화 작업을 설정합니다.
• 온라인 서버를 사용하여 온라인 예측용 특성 값을 가져옵니다.

튜토리얼 단계

• 공개 또는 비공개 엔드포인트에 최적화된 온라인 서빙을 사용해서 데이터를 호스팅 및 서빙하도록 온라인 피처스토어 인스턴스를 프로비저닝합니다.
• 온라인 피처스토어 인스턴스에 BigQuery 뷰를 등록하고 동기화 작업을 설정합니다.
• 온라인 서버를 사용하여 온라인 예측용 특성 값을 가져옵니다.

튜토리얼 단계

• 데이터를 호스팅하고 서빙하기 위해 온라인 피처스토어 인스턴스를 프로비저닝합니다.
• BigQuery 테이블을 서빙할 온라인 피처스토어 인스턴스를 만듭니다.
• 온라인 서버를 사용하여 가장 가까운 이웃을 검색합니다.

튜토리얼 단계

• 피처스토어, 항목 유형, 특성 리소스를 만듭니다.
• Pandas DataFrame의 특성 값을 항목 유형으로 가져옵니다.
• 온라인 피처스토어의 항목 특성 값을 Pandas DataFrame에서 읽습니다.
• 피처스토어의 특성 값을 Pandas DataFrame에 일괄 서빙합니다.
• 업데이트된 특성 값을 사용한 온라인 서빙입니다.
• 학습을 위해 특성 값을 가져올 특정 시점 정확성입니다.

튜토리얼 단계

• 피처스토어, 항목 유형, 특성 리소스를 만듭니다.
• 특성 데이터를 피처스토어 리소스로 가져옵니다.
• 가져온 특성을 사용하여 온라인 예측 요청 처리
• 학습 작업 등 오프라인 작업에서 가져온 특성에 액세스
• 스트리밍 가져오기를 사용하여 소량의 데이터를 가져옵니다.

튜토리얼 단계

• 일괄 추론을 위해 사전 정의된 템플릿을 사용하여 Vertex AI 파이프라인 작업을 만듭니다.
• Vertex AI Pipelines를 사용하여 파이프라인을 실행합니다.
• 지정된 데이터 세트의 모델에 대한 예측 결과를 생성합니다.

튜토리얼 단계

• 모델 조정 단계 수를 설정합니다.
• 조정을 위해 사전 정의된 템플릿을 사용하여 Vertex AI 파이프라인 작업을 만듭니다.
• Vertex AI Pipelines를 사용하여 파이프라인을 실행합니다.
• 조정 모델로 온라인 예측을 수행합니다.

튜토리얼 단계

• 설치 및 가져오기
• 임베딩 데이터 세트 만들기
• 색인 만들기
• 색인 쿼리

튜토리얼 단계

• 설치 및 가져오기
• 임베딩 생성

튜토리얼 단계

• Vertex AI LLM 모델을 가져옵니다.
• 모델을 조정합니다.
• 그러면 Vertex AI 엔드포인트가 자동으로 생성되고 모델이 배포됩니다.
• Vertex AI LLM을 사용하여 예측합니다.
• Vertex AI Prediction을 사용하여 예측합니다.

튜토리얼 단계

• Vertex AI PaLM API의 예측 엔드포인트를 사용하여 메시지에 대한 생성형 AI 응답을 수신합니다.
• 텍스트 임베딩 엔드포인트를 사용하여 메시지의 벡터 표현을 수신합니다.
• 입력/출력 학습 데이터를 기반으로 LLM의 프롬프트 조정을 수행합니다.

튜토리얼 단계

• 이미지 데이터 세트를 임베딩으로 변환
• 색인 만들기
• 색인에 임베딩 업로드
• 색인 엔드포인트 만들기
• 색인 엔드포인트에 색인 배포
• 온라인 쿼리 수행

튜토리얼 단계

• ANN 색인 만들기
• VPC 네트워크로 색인 엔드포인트 만들기
• ANN 색인 배포
• 온라인 쿼리 수행

튜토리얼 단계

• BigQuery 데이터 세트를 임베딩으로 변환
• 색인 만들기
• 색인에 임베딩 업로드
• 색인 엔드포인트 만들기
• 색인 엔드포인트에 색인 배포
• 온라인 쿼리 수행

튜토리얼 단계

• ANN 색인 및 무작위 대입 색인 생성
• VPC 네트워크로 IndexEndpoint 만들기
• ANN 색인 및 무작위 대입 색인 배포
• 온라인 쿼리 수행
• 컴퓨팅 재현율

튜토리얼 단계

• AutoML 이미지 분류 모델 학습
• 일괄 예측 수행
• 엔드포인트에 모델 배포
• 온라인 예측을 수행합니다.

튜토리얼 단계

• AutoML 객체 감지 모델을 학습시킵니다.
• 일괄 예측 수행
• 엔드포인트에 모델 배포
• 온라인 예측을 수행합니다.

튜토리얼 단계

• AutoML 동영상 객체 추적 모델을 학습시킵니다.
• 일괄 예측 수행

튜토리얼 단계

• Vertex AI 데이터 세트 리소스 만들기
• 모델 학습
• 모델 평가 확인
• 모델 리소스를 서빙 엔드포인트 리소스에 배포
• 예측 수행
• 모델 배포를 취소합니다.

튜토리얼 단계

• 태스크 이름 및 Cloud Storage 프리픽스 설정
• 관리형 데이터 세트를 만들기 위한 AutoML 텍스트 데모 학습 데이터 복사
• Vertex AI에서 데이터 세트 만들기
• 학습 작업 구성
• 학습 작업 실행 및 Vertex AI에서 모델 생성
• 일괄 예측 작업을 만들기 위한 AutoML 텍스트 데모 예측 데이터 복사
• 모델에서 일괄 예측 작업 수행

튜토리얼 단계

• 태스크 이름 및 Cloud Storage 프리픽스 설정
• 관리형 데이터 세트를 만들기 위한 AutoML 동영상 데모 학습 데이터 복사
• Vertex AI에서 데이터 세트 만들기
• 학습 작업 구성
• 학습 작업 실행 및 Vertex AI에서 모델 생성
• 일괄 예측 작업 생성을 위한 AutoML 동영상 데모 예측 데이터 복사
• 모델에서 일괄 예측 작업 수행

튜토리얼 단계

• 관리형 데이터 세트를 만들기 위한 AutoML 동영상 데모 학습 데이터 복사
• Vertex AI에서 데이터 세트 만들기
• 학습 작업 구성
• 학습 작업 실행 및 Vertex AI에서 모델 생성
• 일괄 예측 작업 생성을 위한 AutoML 동영상 데모 예측 데이터 복사
• 모델에서 일괄 예측 작업 수행

튜토리얼 단계

• AutoML 동영상 분류 모델 학습
• 일괄 예측 수행

튜토리얼 단계

• 학습 코드를 Python 애플리케이션에 패키징합니다.
• Cloud Build 및 Artifact Registry를 사용하여 학습 애플리케이션을 컨테이너화합니다.
• Vertex AI에서 커스텀 컨테이너 학습 작업을 만들고 실행합니다.
• 학습 작업에서 생성된 모델을 평가합니다.
• Vertex AI Model Registry에서 학습된 모델의 모델 리소스를 만듭니다.
• Vertex AI 일괄 예측 작업을 실행합니다.
• 모델 리소스를 Vertex AI 엔드포인트에 배포합니다.
• 모델 리소스에서 온라인 예측 작업을 실행합니다.
• 생성된 리소스를 삭제합니다.

튜토리얼 단계

• 학습 코드를 Python 애플리케이션에 패키징합니다.
• Cloud Build 및 Artifact Registry를 사용하여 학습 애플리케이션을 컨테이너화합니다.
• Vertex AI에서 커스텀 컨테이너 학습 작업을 만들고 실행합니다.
• 학습 작업에서 생성된 모델을 평가합니다.
• Vertex AI Model Registry에서 학습된 모델의 모델 리소스를 만듭니다.
• Vertex AI 일괄 예측 작업을 실행합니다.
• 모델 리소스를 Vertex AI 엔드포인트에 배포합니다.
• 모델 리소스에서 온라인 예측 작업을 실행합니다.
• 생성된 리소스를 삭제합니다.

튜토리얼 단계

• scikitlearn 모델 학습을 위한 Vertex AI 커스텀 작업을 만듭니다.
• 학습된 모델 아티팩트를 모델 리소스로 업로드합니다.
• 일괄 예측 수행
• 엔드포인트에 모델 배포
• 온라인 예측을 수행합니다.

튜토리얼 단계

• scikitlearn 모델 학습을 위한 Vertex AI 커스텀 작업을 만듭니다.
• 학습된 모델 아티팩트를 모델 리소스로 업로드합니다.
• 일괄 예측 수행
• 엔드포인트에 모델 배포
• 온라인 예측을 수행합니다.

튜토리얼 단계

• TensorFlow 모델 학습을 위한 Vertex AI 초매개변수 조정 작업을 만듭니다.

튜토리얼 단계

• 비공개 Docker 저장소를 만듭니다.
• 비공개 Docker 저장소와 관련된 컨테이너 이미지에 태그를 지정합니다.
• 컨테이너 이미지를 비공개 Docker 저장소로 내보냅니다.
• 비공개 Docker 저장소에서 컨테이너 이미지를 가져옵니다.
• 비공개 Docker 저장소를 삭제합니다.

튜토리얼 단계

• 커스텀 학습 작업의 학습 매개변수와 예측 측정항목을 추적합니다.
• 실험의 모든 매개변수 및 측정항목에 대한 분석을 추출하고 수행합니다.

튜토리얼 단계

• 로컬에서 학습된 모델의 매개변수 및 측정항목을 추적합니다.
• 실험의 모든 매개변수 및 측정항목에 대한 분석을 추출하고 수행합니다.

튜토리얼 단계

• Kubeflow Pipelines SDK를 사용하여 Vertex AI에서 실행되는 ML 파이프라인을 빌드합니다.
• 파이프라인은 데이터 세트를 만들고, scikitlearn 모델을 학습시키고, 모델을 엔드포인트에 배포합니다.
• 아티팩트와 메타데이터를 생성하는 커스텀 파이프라인 구성요소를 작성합니다.
• Cloud 콘솔과 프로그래매틱 방식으로 Vertex AI Pipelines 실행을 비교합니다.
• 파이프라인 생성 아티팩트의 계보를 추적합니다.
• 파이프라인 실행 메타데이터를 쿼리합니다.

튜토리얼 단계

• Vertex AI 데이터 세트 만들기
• 데이터 세트 리소스에서 AutoML 테이블 형식 분류 모델을 학습시킵니다.
• 학습된 AutoML 모델 리소스를 파이프라인으로 가져옵니다.
• 일괄 예측 작업을 실행합니다.
• 분류 평가 구성요소를 사용하여 AutoML 모델을 평가합니다.
• 분류 측정항목을 AutoML 모델 리소스로 가져옵니다.

튜토리얼 단계

• Vertex AI 데이터 세트 만들기
• AutoMLTabularTrainingJob 구성
• 모델을 반환하는 AutoMLTabularTrainingJob 실행
• 사전 학습된 AutoML 모델 리소스를 파이프라인으로 가져오기
• 파이프라인에서 일괄 예측 작업 실행
• 회귀 평가 구성요소를 사용하여 AutoML 모델 평가
• 회귀 측정항목을 AutoML 모델 리소스로 가져오기

튜토리얼 단계

• Vertex AI 데이터 세트 만들기
• 데이터 세트 리소스에서 AutoML 텍스트 분류 모델을 학습시킵니다.
• 학습된 AutoML 모델 리소스를 파이프라인으로 가져옵니다.
• 일괄 예측 작업을 실행합니다.
• 분류 평가 구성요소를 사용하여 AutoML 모델을 평가합니다.
• 평가 측정항목을 AutoML 모델 리소스로 가져옵니다.

튜토리얼 단계

• Vertex AI 데이터 세트 만들기
• Vertex AI 데이터 세트 리소스에서 AutoML 동영상 분류 모델을 학습시킵니다.
• 학습된 AutoML Vertex AI 모델 리소스를 파이프라인으로 가져옵니다.
• 파이프라인 내에서 일괄 예측 작업을 실행합니다.
• 분류 평가 구성요소를 사용하여 AutoML 모델을 평가합니다.
• 분류 측정항목을 AutoML Vertex AI 모델 리소스로 가져옵니다.

튜토리얼 단계

• 공개 소스에서 데이터 세트를 가져옵니다.
• 데이터를 로컬에서 사전 처리하고 BigQuery에 테스트 데이터를 저장합니다.
• scikitlearn Python 패키지를 사용하여 로컬에서 RandomForest 분류 모델을 학습시킵니다.
• Artifact Registry에서 예측을 위해 커스텀 컨테이너를 만듭니다.
• 모델을 Vertex AI Model Registry에 업로드합니다.
• Vertex AI Pipeline을 만들고 실행합니다.

튜토리얼 단계

• 모델 학습을 위한 Vertex AI CustomTrainingJob을 만듭니다.
• CustomTrainingJob을 실행합니다.
• 모델 아티팩트를 검색하고 로드합니다.
• 모델 평가 확인
• 모델을 Vertex AI 모델 리소스로 업로드합니다.
• 사전 학습된 Vertex AI 모델 리소스를 파이프라인으로 가져옵니다.
• 파이프라인에서 일괄 예측 작업을 실행합니다.
• 회귀 평가 구성요소를 사용하여 모델을 평가합니다.
• 회귀 측정항목을 Vertex AI 모델 리소스로 가져옵니다.

튜토리얼 단계

• 사전 학습된(축약된) 모델을 Vertex AI Model Registry로 가져옵니다.
• 커스텀 모델 평가를 구성합니다.
• 모델 평가 측정항목을 Vertex AI Model Registry의 해당 모델로 가져옵니다.
• Vertex AI Model Registry에서 해당 모델의 모델 평가를 나열합니다.
• 두 번째 커스텀 모델 평가를 구성합니다.
• 두 번째 모델 평가 측정항목을 Vertex AI Model Registry의 해당 모델로 가져옵니다.
• Vertex AI Model Registry에서 해당 모델의 두 번째 모델 평가를 나열합니다.

튜토리얼 단계

• Vertex AI 모델 리소스로 사전 학습된 모델을 업로드합니다.
• 일괄 예측 요청을 생성합니다.
• 모델 모니터링 특성에서 보고된 통계, 시각화, 기타 데이터를 해석합니다.

튜토리얼 단계

• AutoML 모델을 학습시킵니다.
• 엔드포인트 리소스에 모델 리소스 배포
• 모델 모니터링을 위한 엔드포인트 리소스를 구성합니다.
• 편향에 대한 합성 예측 요청을 생성합니다.
• 드리프트에 대한 합성 예측 요청을 생성합니다.
• 이메일 알림이 수신될 때까지 기다립니다.

튜토리얼 단계

• 1. AutoML 이미지 분류 모델 학습
• 2. 배포 이미지와 외부 이미지를 모두 포함하는 일괄 예측을 제출합니다.
• 3. 모델 모니터링을 사용하여 각 이미지에서 이상치 점수를 계산합니다.
• 4. 배포에서 벗어난 일괄 예측 요청의 이미지를 식별합니다.

튜토리얼 단계

• 1. AutoML 이미지 분류 모델 학습
• 2. 엔드포인트를 만듭니다.
• 3. 엔드포인트에 모델을 배포하고 모델 모니터링을 구성합니다.
• 4. 배포 이미지와 외부 이미지를 모두 포함하는 온라인 예측을 제출합니다.
• 5. 모델 모니터링을 사용하여 각 이미지에서 이상치 점수를 계산합니다.
• 6. 배포에서 벗어난 온라인 예측 요청의 이미지를 식별합니다.

튜토리얼 단계

• 사전 학습된 커스텀 테이블 형식 모델을 다운로드합니다.
• 선행 학습된 모델을 모델 리소스로 업로드합니다.
• 엔드포인트 리소스에 모델 리소스 배포
• 모델 모니터링을 위한 엔드포인트 리소스를 구성합니다.
• 편향에 대한 합성 예측 요청을 생성합니다.
• 이메일 알림이 수신될 때까지 기다립니다.
• 드리프트에 대한 합성 예측 요청을 생성합니다.
• 이메일 알림이 수신될 때까지 기다립니다.

튜토리얼 단계

• 사전 학습된 커스텀 테이블 형식 모델을 다운로드합니다.
• 선행 학습된 모델을 모델 리소스로 업로드합니다.
• TensorFlow Serving 제공 바이너리를 사용하여 엔드포인트 리소스에 모델 리소스를 배포합니다.
• 모델 모니터링을 위한 엔드포인트 리소스를 구성합니다.
• 편향에 대한 합성 예측 요청을 생성합니다.
• 이메일 알림이 수신될 때까지 기다립니다.
• 드리프트에 대한 합성 예측 요청을 생성합니다.
• 이메일 알림이 수신될 때까지 기다립니다.

튜토리얼 단계

• 사전 학습된 커스텀 테이블 형식 모델을 다운로드합니다.
• 선행 학습된 모델을 모델 리소스로 업로드합니다.
• 엔드포인트 리소스에 모델 리소스 배포
• 모델 모니터링을 위한 엔드포인트 리소스를 구성합니다.
• 특성 입력에 대한 편향 및 드리프트 감지입니다.
• 특성 기여 분석을 위한 편향 및 드리프트 감지입니다.
• 1,000개의 예측 요청을 전송하여 입력 스키마를 자동으로 생성합니다.
• 모니터링 작업을 나열, 일시중지, 재개, 삭제합니다.
• 사전 정의된 입력 스키마를 사용하여 모니터링 작업을 다시 시작합니다.
• 로깅된 모니터링 데이터를 확인합니다.

튜토리얼 단계

• 사전 학습된 XGBoost 모델을 다운로드합니다.
• 선행 학습된 모델을 모델 리소스로 업로드합니다.
• 엔드포인트 리소스에 모델 리소스 배포
• 모델 모니터링을 위한 엔드포인트 리소스를 구성합니다.

튜토리얼 단계

• Vertex AI 모델 리소스로 사전 학습된 모델을 업로드합니다.
• Vertex AI 엔드포인트 리소스를 만듭니다.
• 엔드포인트 리소스에 모델 리소스 배포
• 모델 모니터링을 위한 엔드포인트 리소스를 구성합니다.
• 모델 모니터링을 위한 기준 분포를 초기화합니다.
• 합성 예측 요청을 생성합니다.
• 모델 모니터링 특성에서 보고된 통계, 시각화, 기타 데이터를 해석하는 방법을 이해합니다.

튜토리얼 단계

• 모델의 첫 번째 버전을 만들고 Vertex AI Model Registry에 등록합니다.
• 모델의 두 번째 버전을 만들고 Vertex AI Model Registry에 등록합니다.
• 기본값인 모델 버전(축약됨)을 업데이트합니다.
• 모델 버전 삭제
• 다음 모델 버전을 다시 학습시킵니다.

튜토리얼 단계

• KFP 파이프라인 만들기

튜토리얼 단계

• 사전 학습된(축약된) 모델을 Vertex AI Model Registry로 가져옵니다.
• 합성 모델 평가 측정항목을 해당(축약된) 모델로 가져옵니다.
• Vertex AI 엔드포인트 리소스를 만듭니다.
• 축약된 모델을 엔드포인트 리소스에 배포합니다.
• Vertex AI Pipeline 만들기
• 축약된 모델을 가져옵니다.
• 사전 학습된 모델의 다른 인스턴스(챌린저)를 가져옵니다.
• 사전 학습된 (챌린저) 모델을 기존 축약된 모델의 새 버전으로 등록합니다.
• 합성 모델 평가를 만듭니다.
• 합성 모델 평가 측정항목을 해당 챌린저 모델로 가져옵니다.
• 평가를 비교하고 축약 또는 챌린저를 기본값으로 설정합니다.
• 새 축약된 모델을 배포합니다.

튜토리얼 단계

• KFP 파이프라인 만들기

튜토리얼 단계

• KFP 파이프라인 만들기

튜토리얼 단계

• BigQuery에서 데이터 세트를 만듭니다.
• 일괄 예측을 위해 일부 데이터를 소스 데이터 세트와 별도로 설정하세요.
• 학습 애플리케이션을 위한 커스텀 Python 패키지를 만듭니다.
• Python 패키지를 Cloud Storage에 업로드합니다.
• Vertex AI 파이프라인을 만듭니다.

튜토리얼 단계

• 파이프라인 구축:

튜토리얼 단계

• 독립 실행형 학습 작업으로 커스텀 구성요소를 만듭니다.
• 머신 리소스에 대한 구성요소 수준 설정을 사용하여 파이프라인을 실행합니다.
• 독립 실행형 학습 구성요소를 Vertex AI CustomJob으로 변환합니다.
• 머신 리소스에 대한 customjoblevel 설정을 사용하여 파이프라인을 실행합니다.

튜토리얼 단계

• KFP 파이프라인 만들기

튜토리얼 단계

• KFP 파이프라인 만들기

튜토리얼 단계

• KFP 파이프라인 만들기

튜토리얼 단계

• BigQuery로 데이터를 수집하는 Dataflow 작업을 위한 구성요소 만들기
• BigQuery의 데이터에 대해 실행할 사전 처리 단계를 위한 구성요소 만들기
• BigQuery ML을 사용하여 로지스틱 회귀 모델을 학습하기 위한 구성요소 만들기
• 생성된 모든 구성요소로 Kubeflow DSL 파이프라인을 빌드 및 구성
• Vertex AI Pipelines에서 파이프라인 컴파일 및 실행

튜토리얼 단계

• KFP 파이프라인 만들기

튜토리얼 단계

• 사전 학습된 모델을 모델 리소스로 업로드합니다.
• 정답 데이터를 사용하여 모델 리소스에서 BatchPredictionJob을 실행합니다.
• 모델 리소스에 대한 평가 측정항목 아티팩트를 생성합니다.
• 평가 측정항목을 기준점에 비교합니다.

튜토리얼 단계

• KFP 파이프라인 만들기

튜토리얼 단계

• Python 함수 기반 KFP 구성요소를 빌드합니다.
• KFP 파이프라인을 구성합니다.
• 경로 참조 및 값에 따라 구성요소 간에 아티팩트와 매개변수를 전달합니다.
• kfp.dsl.importer 메서드를 사용합니다.
• KFP 파이프라인을 컴파일합니다.
• Vertex AI Pipelines를 사용하여 KFP 파이프라인을 실행합니다.

튜토리얼 단계

• KFP 구성요소 만들기

튜토리얼 단계

• 사전 학습된(챔피언) 모델을 Vertex AI Model Registry로 가져옵니다.
• 합성 모델 학습 평가 측정항목을 해당(챔피언) 모델로 가져옵니다.
• Vertex AI 엔드포인트 리소스를 만듭니다.
• 챔피언 모델을 엔드포인트 리소스에 배포합니다.
• 배포된 모델의 추가(경합자) 버전을 가져옵니다.
• 합성 모델 학습 평가 측정항목을 해당(경합자) 모델로 가져옵니다.
• Vertex AI Pipeline 만들기
• 챔피언 모델을 가져옵니다.
• (모의) 프로덕션 데이터를 사용한 챔피언 모델 미세 조정
• 챔피언 모델에 대한 합성 학습+프로덕션 평가 측정항목을 가져옵니다.
• 경합자 모델을 가져옵니다.
• (모의) 프로덕션 데이터를 사용한 경합자 모델 미세 조정
• 경합자 모델에 대한 합성 학습+프로덕션 평가 측정항목을 가져옵니다.
• 경합자의 평가를 챔피언과 비교하고 새로운 챔피언을 기본값으로 설정합니다.
• 새로운 챔피언 모델을 배포합니다.

튜토리얼 단계

• Vertex AI 파이프라인을 정의하고 컴파일합니다.
• 파이프라인 실행에 사용할 서비스 계정을 지정합니다.

튜토리얼 단계

• BigQuery 및 Vertex AI Training 데이터 세트 만들기
• BigQuery ML 및 AutoML 모델 학습
• BigQueryML 및 AutoML 모델에서 평가 측정항목 추출
• 최고의 학습 모델 선택
• 최고의 학습 모델 배포
• 배포된 모델 인프라 테스트

튜토리얼 단계

• 모델 학습을 위한 Vertex AI 커스텀 TrainingPipeline을 만듭니다.
• TensorFlow 모델을 학습시킵니다.
• 일괄 예측 작업을 전송합니다.

튜토리얼 단계

• TensorFlow Hub에서 모델 아티팩트를 다운로드합니다.
• 모델에 대해 Triton 제공 구성 파일을 만듭니다.
• 모델 배포를 위해 Triton 제공 이미지를 사용해서 커스텀 컨테이너를 생성합니다.
• 모델을 Vertex AI 모델 리소스로 업로드합니다.
• Vertex AI 모델 리소스를 Vertex AI 엔드포인트 리소스에 배포합니다.
• 예측 요청을 수행합니다.
• 모델 리소스를 배포 취소하고 엔드포인트를 삭제합니다.

튜토리얼 단계

• TensorFlow 1.x 에스티메이터를 위해 사전 학습된 테이블 형식 분류 모델 아티팩트를 다운로드합니다.
• TensorFlow 에스티메이터 모델을 Vertex AI 모델 리소스로 업로드합니다.
• 엔드포인트 리소스 만들기
• 모델 리소스를 엔드포인트 리소스에 배포합니다.
• 엔드포인트 리소스에 배포된 모델 리소스 인스턴스에 대해 온라인 원시 예측을 수행합니다.

튜토리얼 단계

• TensorFlow Hub에서 사전 학습된 이미지 분류 모델을 다운로드합니다.
• 압축된 이미지 데이터를 수신하고 모델 입력에 대해 압축 해제되고 사전 처리된 데이터를 출력하는 제공 함수를 만듭니다.
• TensorFlow Hub 모델 및 제공 함수를 Vertex AI 모델 리소스로 업로드합니다.
• 엔드포인트 리소스를 만듭니다.
• TensorFlow Serving 제공 바이너리를 사용하여 엔드포인트 리소스에 모델 리소스를 배포합니다.
• 엔드포인트 리소스에 배포된 모델 리소스 인스턴스에 대해 온라인 예측을 수행합니다.
• 모델 리소스 인스턴스에 대해 일괄 예측을 수행합니다.

튜토리얼 단계

• 비공개 엔드포인트 리소스 만들기
• VPC 피어링 연결 구성
• 비공개 엔드포인트 리소스에 배포하기 위한 모델 리소스의 제공 바이너리 구성
• 모델 리소스를 비공개 엔드포인트 리소스에 배포
• 비공개 엔드포인트에 예측 요청 보내기

튜토리얼 단계

• 사전 학습된 텍스트 생성 모델을 로드합니다.
• 비스트리밍 예측을 수행합니다.
• 스트리밍을 지원하는 사전 학습된 텍스트 생성 모델을 로드합니다.
• 스트리밍 예측을 수행합니다.
• 사전 학습된 채팅 모델을 로드합니다.
• 로컬 대화형 채팅 세션을 수행합니다.
• 텍스트 생성 모델로 일괄 예측을 수행합니다.
• 텍스트 임베딩 모델로 일괄 예측을 수행합니다.

튜토리얼 단계

• PyTorch에서 사전 학습된 이미지 모델 다운로드
• 커스텀 모델 핸들러 만들기
• 모델 보관 파일에 모델 아티팩트 패키징
• 배포를 위한 모델 업로드
• 예측을 위한 모델 배포
• 온라인 예측 수행
• 일괄 예측 수행

튜토리얼 단계

• 학습 애플리케이션을 Python 소스 배포로 패키징
• 사전 빌드된 컨테이너에서 학습 작업 구성 및 실행
• 모델 보관 파일에 모델 아티팩트 패키징
• 배포를 위한 모델 업로드
• 예측을 위해 사전 빌드된 컨테이너를 사용하여 모델 배포
• 온라인 예측 수행

튜토리얼 단계

• PyTorch 분산 학습 애플리케이션 만들기
• 사전 빌드된 컨테이너로 학습 애플리케이션 패키징
• Reduction Server를 사용하여 Vertex AI에서 커스텀 작업 만들기
• 작업 제출 및 모니터링

튜토리얼 단계

• 태스크 이름 및 Cloud Storage 프리픽스 설정
• 관리형 데이터 세트를 만들기 위한 AutoML 동영상 데모 학습 데이터 복사
• Vertex AI에서 데이터 세트 만들기
• 학습 작업 구성
• 학습 작업 실행 및 Vertex AI에서 모델 생성
• 일괄 예측 작업 생성을 위한 AutoML 동영상 데모 예측 데이터 복사
• 모델에서 일괄 예측 작업 수행

튜토리얼 단계

• Vertex AI 관리형 데이터 세트를 만들기 위한 데이터 다운로드 및 CSV 파일 준비를 위한 유틸리티 함수 만들기
• 데이터 다운로드
• 관리형 데이터 세트 생성을 위한 CSV 파일 준비
• 커스텀 학습 Python 패키지 만들기
• TensorFlow Serving 컨테이너 만들기
• 관리형 텍스트 데이터 세트로 커스텀 Python 패키지 학습 실행
• 모델 배포 및 Vertex AI에서 엔드포인트 만들기
• 엔드포인트 예측
• 모델에 대한 일괄 예측 작업 만들기

튜토리얼 단계

• 프로젝트를 설정합니다.
• Syn2 데이터의 사전 학습 모델 예측 데이터를 다운로드합니다.
• 마스크 출력을 기반으로 특성 중요도를 시각화하고 이해합니다.
• 이 튜토리얼에서 만든 리소스를 삭제합니다.

튜토리얼 단계

• 학습 데이터를 가져옵니다.
• Vertex AI TabNet 컨테이너에 대한 학습 매개변수를 구성합니다.
• CSV 데이터를 사용하여 Vertex AI Training을 이용해 모델을 학습시킵니다.
• 모델을 Vertex AI 모델 리소스로 업로드합니다.
• Vertex AI 모델 리소스를 Vertex AI 엔드포인트 리소스에 배포합니다.
• 배포된 모델을 사용하여 예측을 수행합니다.
• Vertex AI TabNet 모델을 초매개변수로 조정합니다.

튜토리얼 단계

• 1. 설정

튜토리얼 단계

• 1. Prophet 모델을 학습시킵니다.
• 1. 평가 측정항목을 확인합니다.
• 1. Prophet 모델을 사용하여 일괄 예측을 수행합니다.

튜토리얼 단계

• TabNet CustomJob을 만듭니다. 학습에 사용할 초매개변수를 알고 있는 경우 가장 좋은 옵션입니다.
• TabNet HyperparameterTuningJob을 만듭니다. 이렇게 하면 데이터 세트에 가장 적합한 초매개변수 집합을 가져올 수 있습니다.

튜토리얼 단계

• 와이드 앤 딥 CustomJob을 만듭니다. 학습에 사용할 초매개변수를 알고 있는 경우 가장 좋은 옵션입니다.
• 와이드 앤 딥 HyperparameterTuningJob을 만듭니다. 이렇게 하면 데이터 세트에 가장 적합한 초매개변수 집합을 가져올 수 있습니다.

튜토리얼 단계

• Docker 저장소 및 구성을 만듭니다.
• 커스텀 학습 코드로 커스텀 컨테이너 이미지를 만듭니다.
• 서비스 계정 및 Google Cloud Storage 버킷을 설정합니다.
• 커스텀 컨테이너를 사용하여 커스텀 학습 작업을 만들고 실행합니다.

튜토리얼 단계

• 서비스 계정 및 Google Cloud Storage 버킷을 설정합니다.
• 맞춤설정된 학습 코드를 작성합니다.
• 학습 코드를 패키징하여 Google Cloud Storage에 업로드합니다.
• 실시간에 가까운 모니터링을 위해 Vertex AI TensorBoard가 사용 설정된 커스텀 학습 작업을 만들고 실행합니다.

튜토리얼 단계

• TensorFlow 실행을 조정하고 초매개변수 및 측정항목을 로깅합니다.
• 실행을 시작하고 모든 항목을 하나의 상위 디렉터리 아래에 로깅합니다.
• Vertex AI 텐서보드의 HParams 대시보드에서 결과를 시각화합니다.

튜토리얼 단계

• 서비스 계정 및 Cloud Storage 버킷 설정
• Vertex AI 텐서보드 인스턴스 만들기
• Vertex AI 텐서보드 프로파일러를 사용 설정하는 커스텀 학습 작업 만들기 및 실행
• Vertex AI 텐서보드 프로파일러 대시보드를 확인하여 모델 학습 성능 디버깅하기

튜토리얼 단계

• 커스텀 학습 코드를 준비하고 학습 코드를 사전 빌드된 컨테이너에 Python 패키지로 로드
• Vertex AI 텐서보드 프로파일러를 사용 설정하는 커스텀 학습 작업 만들기 및 실행
• Vertex AI 텐서보드 프로파일러 대시보드를 확인하여 모델 학습 성능 디버깅하기

튜토리얼 단계

• 서비스 계정 및 Google Cloud Storage 버킷을 설정합니다.
• 커스텀 학습 코드로 KFP 파이프라인을 구성합니다.
• 거의 실시간 모니터링을 위해 Vertex AI 텐서보드가 사용 설정된 Vertex AI Pipelines에서 KFP 파이프라인을 컴파일하고 실행합니다.

튜토리얼 단계

• Python 패키지를 사용한 학습
• 초매개변수 조정 시 정확도를 보고합니다.
• Cloud StorageFuse를 사용하여 모델 아티팩트를 Cloud Storage에 저장합니다.

튜토리얼 단계

• Python 패키지를 사용한 학습
• Cloud StorageFuse를 사용하여 모델 아티팩트를 Cloud Storage에 저장합니다.
• FastAPI 예측 서��를 구성합니다.
• Dockerfile 배포 이미지를 구성합니다.
• 배포 이미지를 로컬에서 테스트합니다.
• Vertex AI 모델 리소스를 만듭니다.

튜토리얼 단계

• MirroredStrategy

튜토리얼 단계

• 자동화된 초매개변수 조정을 위한 학습 애플리케이션 코드 수정
• 학습 애플리케이션 코드 컨테이너화
• Vertex AI Python SDK로 초매개변수 조정 작업 구성 및 실행

튜토리얼 단계

• Python 패키지를 사용한 학습
• 초매개변수 조정 시 정확도를 보고합니다.
• Cloud StorageFuse를 사용하여 모델 아티팩트를 Cloud Storage에 저장합니다.
• Vertex AI 모델 리소스를 만듭니다.

튜토리얼 단계

• Google Cloud 프로젝트 설정

튜토리얼 단계

• Artifact Registry 및 Docker를 사용하여 커스텀 컨테이너 빌드
• Vertex AI 실험 저장을 위한 Vertex AI 텐서보드 인스턴스 만들기
• Vertex AI SDK CustomContainerTrainingJob 실행

튜토리얼 단계

• 텍스트 분류 모델을 위한 학습 패키지를 만듭니다.
• Vertex AI에서 커스텀 학습을 사용하여 모델을 학습시킵니다.
• 생성된 모델 아티팩트를 확인합니다.
• 예측용 커스텀 컨테이너를 만듭니다.
• 예측을 위해 커스텀 컨테이너를 사용하여 학습된 모델을 Vertex AI 엔드포인트에 배포합니다.
• 배포된 모델에 온라인 예측 요청을 보내고 검증합니다.
• 이 노트북에서 만든 리소스를 삭제합니다.

튜토리얼 단계

• 학습 및 테스트 데이터 세트를 만들고 모델을 학습시키는 커스텀 학습 스크립트를 작성합니다.
• Vertex AI SDK CustomTrainingJob 실행

튜토리얼 단계

• 마스터 노드에서 ETCD 클러스터를 시작하는 셸 스크립트 만들기
• PyTorch Elastic의 GitHub 저장소에서 코드를 사용하여 학습 스크립트 만들기
• 데이터를 다운로드하고 호스트에서 ETCD 클러스터를 시작하는 컨테이너 만들기
• GPU가 있는 여러 노드를 사용하여 모델 학습

튜토리얼 단계

• Google Cloud 프로젝트의 PROJECT_ID 및 REGION 변수를 구성합니다.
• 모델 아티팩트를 저장할 Cloud Storage 버킷을 만듭니다.
• 학습 코드를 호스팅하는 커스텀 Docker 컨테이너를 빌드하고 컨테이너 이미지를 Artifact Registry에 푸시합니다.
• Vertex AI SDK CustomContainerTrainingJob 실행

튜토리얼 단계

튜토리얼 단계

• 무작위 알고리즘을 사용한 초매개변수 조정
• Vizier(Bayesian) 알고리즘으로 초매개변수 미세 조정
• Vizier 연구를 위한 시도 제안 및 결과 업데이트

튜토리얼 단계

• BigQuery에서 필요한 데이터 가져오기
• 데이터 사전 처리
• TensorFlow(>=2.4) 분류 모델 학습
• 학습된 모델의 손실 평가
• 실행자 기능을 사용하여 노트북 실행 자동화
• Cloud Storage 경로에 모델 저장
• 생성된 리소스 삭제

튜토리얼 단계

• '노트북에서 BigQuery'를 사용하여 데이터 세트 로드
• 데이터 세트에 대해 탐색적 데이터 분석 수행
• 특성 선택 및 사전 처리
• scikitlearn을 사용하여 선형 회귀 모델 빌드
• Vertex Explainable AI를 위한 모델 구성
• 모델을 Vertex AI로 배포
• 배포된 모델 테스트
• 삭제

튜토리얼 단계

• 데이터 탐색
• BigQuery 및 ARIMA 모델이 포함된 모델
• 모델 평가
• 학습 데이터에 대해 BigQuery ML을 사용하여 모델 결과 평가
• 테스트 데이터에 대해 MAE, MAPE, MSE, RMSE 모델 결과 평가
• 실행자 기능 사용

튜토리얼 단계

• Python 및 SQL을 사용하여 BigQuery에서 공개 데이터 쿼리
• BigQuery INFORMATION_SCHEMA를 사용하여 데이터 세트 탐색
• 데이터의 흥미로운 부분을 탐색하는 데 도움이 되는 대화형 요소 만들기
• 탐색적 상관관계 및 시계열 분석 수행
• 노트북에서 정적 및 대화형 출력(데이터 테이블 및 플롯) 만들기
• Cloud Storage에 일부 출력 저장

튜토리얼 단계

• 필수 라이브러리 설치
• Cloud Storage 버킷에서 데이터 세트 읽기
• 데이터 세트에 대한 탐색적 분석 수행
• 데이터 세트 사전 처리
• scikitlearn을 사용하여 랜덤 포레스트 모델 학습
• Cloud Storage 버킷에 모델 저장
• Vertex AI 모델 리소스 만들기 및 엔드포인트에 배포
• 테스트 데이터에서 WhatIf 도구 실행
• 모델 배포 취소 및 모델 리소스 삭제

튜토리얼 단계

• BigQuery에서 Google 애널리틱스 4 데이터의 내보내기를 살펴보세요.
• 인구통계, 행동 데이터, 라벨(churn/notchurn)을 사용하여 학습 데이터를 준비합니다.
• BigQuery ML을 사용하여 XGBoost 모델을 학습시킵니다.
• BigQuery ML을 사용하여 모델을 평가합니다.
• BigQuery ML을 사용하여 앱 제거 사용자를 예측합니다.

튜토리얼 단계

• '노트북에서 BigQuery' 통합을 사용하여 BigQuery에서 데이터 세트를 로드합니다.
• 데이터 세트를 분석합니다.
• 데이터 세트의 특성을 사전 처리합니다.
• 향후 60일 이내에 제품이 판매될지 예측하는 랜덤 포레스트 분류기 모델을 빌드합니다.
• 모델 평가
• Vertex AI를 사용하여 모델을 배포합니다.
• WhatIf 도구를 구성하고 테스트합니다.

튜토리얼 단계

• Cloud Storage 버킷에서 필요한 데이터 세트 로드
• 데이터 세트에 있는 필드 분석
• 유지보수 필요 예측 모델에 필요한 데이터 선택
• 남은 유용한 수명을 예측하기 위한 XGBoost 회귀 모델 학습
• 모델 평가
• Executor를 사용하여 노트북 endtoend를 학습 작업으로 실행
• Vertex AI에 모델 배포
• 삭제

튜토리얼 단계

• Cloud Storage 버킷에서 필요한 데이터 세트를 로드합니다.
• 데이터 세트에 있는 필드를 분석합니다.
• 데이터를 처리하여 모델을 빌드합니다.
• 처리된 데이터를 기반으로 BigQuery ML 예측 모델을 빌드합니다.
• BigQuery ML 모델에서 예측 값을 가져옵니다.
• 예측을 해석하여 최적의 가격을 식별합니다.
• 삭제

튜토리얼 단계

• 필수 데이터 로드
• 데이터 사전 처리
• 모델에 필요한 데이터 선택
• 데이터 세트를 Vertex AI 관리형 데이터 세트에 로드
• AutoML 텍스트 학습을 사용한 감정 모델 학습
• 모델 평가
• Vertex AI에 모델 배포
• 예측 수행
• 삭제

튜토리얼 단계

• Google Cloud 프로젝트 및 Dataproc 클러스터 설정
• sparkbigqueryconnector 구성
• BigQuery의 ���이터를 Spark DataFrame으로 수집
• 수집된 데이터 사전 처리
• Monoglot 저장소에서 가장 자주 사용되는 프로그래밍 언어 쿼리
• Monoglot 저장소에 저장된 각 언어로 된 코드의 평균 크기(MB) 쿼리
• Polyglot 저장소에서 가장 많이 발견된 언어 파일 쿼리
• 쿼리 결과를 BigQuery에 다시 작성
• 이 노트북 튜토리얼을 위해 만든 리소스 삭제

튜토리얼 단계

• Google Cloud 프로젝트 및 Dataproc 클러스터를 설정합니다.
• Cloud Storage 버킷 및 BigQuery 데이터 세트를 만듭니다.
• sparkbigqueryconnector를 구성합니다.
• BigQuery 데이터를 Spark DataFrame으로 수집합니다.
• 탐색적 데이터 분석(EDA)을 수행합니다.
• 샘플을 사용하여 데이터를 시각화합니다.
• 데이터를 정리합니다.
• 특성을 선택합니다.
• 모델을 학습시킵니다.
• 결과를 출력합니다.
• 모델을 Cloud Storage 버킷에 저장합니다.
• 튜토리얼용으로 만든 리소스를 삭제합니다.