본문 바로가기

Analytics18

Prompt Engineering 지난 시간에 생성형 AI의 기반인 Transformer에 대해서 간단히 살펴보고 이 모델에서 최상의 결과를 얻기 위해서 어떤 것이 필요한지 알아보다가 Global에서는 Prompt Engineering 직군이 뜨고 있고하여 해당 Traing을 진행했고, 내용을 요약해 보았습니다. ChatGPT stands for Chat Generative Pre-training Transformer. Prompts are a detailed description of the desired output expected from an artificial intelligence model. LLM 모델이 양질의 데이터로 잘 만들어 졌어도, 모델에 질의하는 사용자가 불안전한 질문을 한다면 좋은 답변을 할 수 없을 것입니다. .. 2023. 12. 11.
ChatGPT가 기존 딥러닝과 무슨 차이가 있는걸까? Gen AI의 대표주자인 ChatGPT가 기존의 딥러닝 모델기반의 서비스/플랫폼과 무엇이 다른걸까? 이런 생각이 들었고, 한참 검색을 했습니다. 긴 내용을 정리하면, 5~6년전만해도 CNN/RNN 같은 신경망 딥러닝 모델이 대세였고, 최근에 Transformer가 등장하면서 많은 영역에서 기존 모델을 대체했다는 것입니다. 기존의 기계학습에는 대규모 데이터세트에 정답지(labeling)를 달아서 학습을 해야 했는데, Transformer는 패턴을 수학적으로 찾기때문에 labeling이 필요없고, 게다가 연산의 병렬 프로세싱에 적합하여 성능도 좋다고 하네요. 그러니 더 대량의 데이터 학습에 장점이 생긴것 같습니다. 사실 이 Transformer의 시작은 Google 직원이 "Attention Is All Y.. 2023. 12. 11.
생성형 AI(Generative AI) 란? Generative Artificial Intelligence의 약자인 Generative AI는 훈련받은 내용과 유사한 새롭고 독창적인 콘텐츠를 생성할 수 있는 능력을 갖춘 인공 지능 알고리즘 및 모델 클래스를 의미합니다. 이러한 모델은 인간이 제작한 콘텐츠와 유사한 이미지, 텍스트, 오디오 등과 같은 데이터를 생성할 수 있습니다. Generative AI는 훈련 단계에서 데이터 세트의 패턴과 기능을 학습한 다음 해당 지식을 사용하여 해당 패턴에 맞는 새로운 데이터를 생성하는 방식으로 작동합니다. - 텍스트 생성: 기사, 이야기, 시 등을 포함하여 인간과 유사한 텍스트를 생성합니다. - 이미지 생성: 종종 임의의 노이즈에서 시작하여 사실적인 이미지와 유사하도록 다듬는 새로운 이미지를 생성합니다. - 오.. 2023. 10. 11.
LLM 이란 무엇이고, 그 활용사례는? 최근에 고객사에서 LLM(Large Language Model)의 요건으로 project가 진행되거나 계획중입니다. 이것은 OpenAI에서 제공한 ChatGPT라는 서비스가 준 파급력으로 보입니다. ChatGPT는 GPT-3.5 아키텍처를 기반으로 한 Large Language Model (LLM)입니다. LLM은 다양한 자연어 처리(NLP) 작업을 수행할 수 있는 딥러닝 알고리즘 입니다 . 대규모 언어 모델은 변환기 모델을 사용하며 대규모 데이터 세트를 사용하여 학습됩니다. 이를 통해 자연어 이해 및 생성 작업에 탁월한 성능을 가지게 되며, 다양한 언어 관련 작업을 수행할 수 있는 능력을 가지고 됩니다. 사용자의 입력에 따라 자연스러운 대화를 생성하고 응답하는 데 사용될 수 있습니다. LLM(Large.. 2023. 8. 31.
파일시스템 (특징, 제약사항, 성능 지표) 파일 시스템은 컴퓨터에서 데이터를 구성, 저장 및 검색하는 시스템입니다. 디스크 또는 기타 저장 장치에 있는 데이터의 물리적 저장을 관리하고 쉽게 액세스하고 조작할 수 있는 구조화된 형식으로 데이터를 구성하는 역할을 합니다. 파일 시스템은 디스크에 저장된 데이터의 논리적 보기를 제공하며 운영 체제가 데이터가 트리 구조와 유사한 파일 및 디렉토리의 계층 구조에 저장된 것처럼 데이터와 상호 작용할 수 있도록 합니다. 각 파일과 디렉토리는 파일 시스템 내에서 고유한 이름과 위치를 가지며 필요에 따라 읽고 쓰고 삭제할 수 있습니다. 파일 시스템은 또한 생성 시간과 날짜, 마지막 수정 및 액세스, 액세스 권한 및 소유권 정보와 같은 각 파일 및 디렉토리에 대한 메타데이터를 제공합니다. 다양한 유형의 파일 시스템이.. 2023. 2. 12.
S3 호환 스토리지(S3 compatible storage) S3 호환 스토리지는 Amazon S3(Simple Storage Service) 애플리케이션 프로그래밍 인터페이스(API)와 상호 작용할 수 있는 스토리지 시스템을 의미합니다. S3 API는 스토리지 시스템 내에서 객체(즉, 파일)를 생성, 검색, 업데이트 및 삭제하는 데 사용되는 일련의 작업 및 프로토콜을 정의합니다. S3 호환 스토리지 시스템은 S3 API와 함께 작동하도록 설계되어 Amazon S3의 대체품으로 사용할 수 있습니다. 즉, Amazon S3와 함께 작동하도록 구축된 애플리케이션 및 서비스는 수정 없이 이러한 호환 가능한 스토리지 시스템에서도 작동할 수 있습니다. S3 호환 스토리지 시스템은 두 가지 유형으로 분류할 수 있습니다. 1. 오브젝트 스토리지: 이 유형의 스토리지는 이미지,.. 2023. 1. 28.
반응형