본문 바로가기

IT상자30

6. AWS TechCamp [기본 과정] : Snowflake 데이터를 활용한 AWS 머신러닝 서비스 구축하기 2024년 6월 27일 (목) 2:00 PM – 5:00 PM    Snowflake  클라우드 기반의 데이터 웨어하우스 서비스 탄탄한 데이터 기반을 위한 요구 조건 끊임없는 데이터 사일로 현상 : 사일로는 운영의 복잡성을 증가시키고 분석을 위해서는 결국 데이터의 이동을 발생 → 통합된 데이터 : 단일 플랫폼에서 비정형 데이터 포맷, 오픈 포맷, 서드파티 데이터까지 모두 접근  숨은 비용 증가 : 최적화 작업을 위한 여러 가지 수동 작업과 여러 가지 서비스/기능을 통해
숨겨진 비용이 발생 → TCO 절약
: 완전 관리형 서비스를 사용하여 최소한의 시간, 노력, 전문 지식만으로 대규모 사용자 대상의 워크로드를 효율적으로 지원  단편적인 정책 : 시스템과 사용자 전반에 걸쳐 일관되지 않은 거버넌스 정책으로 .. 2024. 6. 27.
5. AWS TechCamp [기본 과정] : AWS에서 제안하는 Generative AI Application 모범사례 알아보기 2024년 6월 27일 (목) 9:00 AM – 12:00 PM    빅데이터의 확산에 따라 무한대에 가까운 컴퓨팅 리소스가 생겼으며, 머신러닝 기술도 혁신적으로 발전하고 있다.  생성형 AI  생성형 AI는 대화(가이드, 조언), 이야기, 이미지, 동영상, 음악 등 새로운 콘텐츠와 아이디어를 생성한다.즉, 인간의 창의성을 증진시키고, 혁신을 이끌며, 다양한 유형의 정보를 종합하는 데 사용이 가능하다.방대한 데이터에서 사전 훈련된 대규모 언어 모델에 의해 구동되며, 일반적으로 이를 파운데이션 모델(Foundation Model)이라고 정의한다. 머신러닝 → 딥러닝 → 파운데이션 모델로 진화하며, 생성형 AI도 다양하고 복잡한 입력 데이터를 처리하여 더욱 다양하고 복잡한 출력을 제공해 준다. 전통적인 머신.. 2024. 6. 27.
4. AWS TechCamp [기본 과정] : Amazon Bedrock을 활용하여 상품리뷰 요약과 비디오 숏폼 만들기 2024년 6월 26일 (수) 2:00 PM – 5:00 PM    Amazon Bedrock  Foundation Model(FM)을 사용하여 Generative AI 애플리케이션을 손쉽게 만들고 확장하는 완전 관리형 서비스이다. Foundation Model(FM)광범위한 데이터를 적용시킨 머신러닝 모델으로, 범용적인 즉, 올라운드 플레이어라고 할 수 있다.FM은 여러 모델이 존재하며, 동작하는 방식이 모두 다르다.  Amazon Bedrock에서는 이것들을 통일시키기 위해 단일 API로 설계되어있다.이는 RAG에도 사용이 가능하며, 에이전트 기능, 서버리스 서비스를 지원한다. Amazon Bedrock 작동 방식1. FM 선택 Playground를 사용하여 FM을 실험해 보고 필요에 맞는 FM을 선.. 2024. 6. 26.
3. AWS TechCamp [기본 과정] : Amazon OpenSearch와 Amazon Bedrock을 활용하여 고도화된 검색 시스템 구현하기 2024년 6월 26일 (수) 9:00 AM – 12:00 PM    검색의 진화비정형데이터는 검색이 어렵지만, 이는 최신 AI를 활용하면 해결된다(이미지 검색 등).여기엔 '벡터 기술'이라는 것이 존재한다. 벡터벡터는 데이터를 기계 학습 모델이 숫자의 배열로 변환(Embedding)한 것이다.임베딩된 벡터 사이의 거리(Knn)를 통해 데이터 사이의 유사성을 파악한다. Amazon OpenSearch의 Vector Embedding을 활용하면 새로운 ML 기반 기술을 검색에 쉽게 적용할 수 있다. 벡터 엔진을 활용하면 많은 수의 벡터를 효율적으로 관리가 가능하다.벡터 검색 기술은 데이터 분석, 콘텐츠 추천, 유사 항목 검색 등 다양한 분야에서 활용이 가능하다. 벡터 데이터베이스많은 양의 벡터 데이터를 효.. 2024. 6. 26.
2. AWS TechCamp [기초 과정] : 기초부터 배우는 AWS 핵심 서비스로 웹 애플리케이션 구축하기 2024년 6월 25일 (화) 2:00 PM – 5:00 PM    AWS Region전 세계에 AWS 데이터센터가 클러스터 형태로 위치한 물리적 위치이다. 하나의 리전은 고가용성, 확장성과 내결함성을 위해 3개 이상의 AZ로 구성된다.Availability Zones(가용영역)모든 AWS 리전은 지리적 영역 내에서 격리되고 물리적으로 분리된 최소 3개의 AZ(가용 영역)로 구성된다.   Amazon VPC(Virtual Private Cloud)  사용자가 정의한, 논리적으로 격리된 가상의 프라이빗 네트워크 환경이다. 간단한 구성만으로도 AWS의 확장 가능한 인프라를 기존 데이터센터 환경과 유사하게 사용한다.Amazon VPC 구성1. 리전 선택 및 IP 주소 범위 설정 리전 선택 후에는 IP주소 범위.. 2024. 6. 25.

티스토리툴바