- Cloudera AI Inference 개요
- 컨트롤 플레인 및 런타임 아키텍처
- Cloudera AI 생태계 내 연동
- CPU 및 GPU 기반 배포 방식
- 기업 환경을 위한 주요 기능
- AI Registry 개요
- Cloudera Model Hub
- Cloudera AI Registry를 활용한 모델 등록 및 거버넌스 관리
- 모델 크기와 정밀도의 기본 개념
- 모델 크기, 정밀도 및 양자화
- 지연 시간과 처리량 간의 상충 관계
- 입출력 비율과 동시 처리의 기본 개념
- 입출력 비율과 동시 처리를 고려한 워크로드 규모 산정
- AI 추론을 위한 NVIDIA GPU 참고 가이드
- AI 추론을 위한 GPU 선택 기준
- 비용 최적화를 위한 GPU 선택
- NVIDIA NIM 및 벤치마킹
실습
- AI Inference 인터페이스 살펴보기
- AI Registry에 LLM 가져오기
- Cloudera AI Inference UI에서 모델 엔드포인트 배포
- 인증 및 엔드포인트 호출
- Hugging Face에서 모델 가져오기
Cloudera Copilot 및 AI 기반 개발 지원
- Cloudera Copilot 개요
- JupyterLab 편집기 연동
- 기반 기술인 JupyterAI 확장 기능 이해
- Cloudera AI Inference에 배포된 모델과 Copilot 연결
실습
- AI Workbench에서 Copilot 활성화
- Copilot과 AI Inference 엔드포인트 연결
- AI를 활용한 코드 생성
- 확장 기능 로드, 모델 목록 확인 및 별칭 등록
- --format code를 활용한 Python 및 PySpark 코드 생성
- Markdown, HTML, 수식 출력 형식 활용
- %ai error를 활용한 SQL 및 Python 오류 디버깅
- 복잡한 코드를 이해하기 쉬운 언어로 설명
- 대화 맥락을 유지하며 반복적으로 개발
- 채팅 패널 명령어 활용: /ask, /fix, /generate
- 실제 업무 과제 수행: ETL, 머신러닝 템플릿, 문서화
- 별칭 등록·사용·수정·삭제
Cloudera Data Warehouse의 SQL AI Assistant
- SQL AI Assistant 소개 및 주요 기능
- Hive를 지원하는 자연어 기반 SQL 생성
- 기반 기술인 JupyterAI 확장 기능 이해
- Cloudera AI Inference에 배포된 모델과 Copilot 연결
실습
- Hue에서 AI Assist 활성화
- GENERATE를 활용한 업무 질문 기반 SQL 쿼리 생성
- AI 기반 쿼리 최적화 및 성능 개선
- FIX를 활용한 SQL 오류 디버깅 및 수정
- EXPLAIN을 활용한 복잡한 SQL 쿼리 설명
- 대화형 인터페이스에서 Generate, Edit, Optimize, Fix, Comment 기능 활용
Cloudera AI Inference와 Agent Studio를 연동한 멀티 에이전트 워크플로
- 기업 업무 자동화 및 의사결정에 활용되는 AI 에이전트 개요
- Cloudera Agent Studio를 활용한 멀티 에이전트 워크플로 구축 및 관리
- Cloudera AI Inference 연동을 통한 에이전트의 실시간 AI 처리
- LLM, 도구 및 오케스트레이션으로 구성된 에이전트 시스템 구조
실습
- Agent Studio에서 데이터베이스 에이전트 구축 및 살펴보기
- Hive 도구를 사용해 에이전트를 Cloudera Data Warehouse(CDW)에 연결
- SQL 실행 에이전트와 데이터베이스 도구 간의 상호작용 이해
- 에이전트 인터페이스에서 일상적인 영어로 업무 관련 질문 입력
- CDW에서 Hive SQL 쿼리 자동 생성 및 실행
- SQL 에이전트와 분석 에이전트의 협업을 통한 심층 분석
- 사용자 질문부터 SQL 생성, 데이터 조회, 응답까지 전체 과정 실행
- 대화형 AI를 활용한 실제 데이터 탐색

