트랜스포머(자연어처리)

통도사

개인인증 판매자스토어

최초 등록일: 2022.05.14
최종 저작일: 2022.05; 4페이지/ 한컴오피스; 가격 3,000원

다운로드

장바구니

상세정보
자료후기 (0)
자료문의 (0)
판매자정보

* 본 문서(hwp)가 작성된 한글 프로그램 버전보다 낮은 한글 프로그램에서 열람할 경우 문서가 올바르게 표시되지 않을 수 있습니다. 이 경우에는 최신패치가 되어 있는 2010 이상 버전이나 한글뷰어에서 확인해 주시기 바랍니다.

소개글

"트랜스포머(자연어처리)"에 대한 내용입니다.

본문내용

I. 서론
트랜스포머는 2017년 구글이 발표한 논문인 "Attention is all you need"에서 나온 모델이다. 기존의 seq2seq의 구조인 인코더-디코더를 따르면서도 논문의 이름처럼 어텐션(attention)만을 이용하여 자연어처리를 할 수 있도록 만든 모델링을 말한다. 즉 RNN을 사용하지 앟ㄴ고 인코더-디코더 구조를 설계하였음에도 자연어 처리 분야에서 RNN보다 우수한 성능을 보여주었다.

II. 본론
1. 자연어 처리에 필요한 데이터
1) 지도학습 : 정답이 정해진 문제
- 예) 감성분석 : 어떤 단어가 긍정인지 부정인지 정답을 알아야 함(라벨링 작업을 통하여 진행함)

2) 비지도학습 : 정답이 정해지지 않은 문제
- 예) 워드투벡터 : 빈칸 앞뒤에 함께 등장하는 단어의 빈도를 알아보는 작업에서는 정답 데이터가 반드시 필요한 것이 아님

참고 자료

OpenAI GPT-2 웹 사이트 : Openai.com/blog/better-language-models
OpenAI GPT-2 깃허브 : github.com/openai/gpt-2
OpenAI GPT-2 논문 : cdn.openai.com/better-language-models/language_models.are_unsupervised_multitask_learners.pdf
위키독스 문서 : https://wikidocs.net/31379

환불정책

해피캠퍼스는 구매자와 판매자 모두가 만족하는 서비스가 되도록 노력하고 있으며, 아래의 4가지 자료환불 조건을 꼭 확인해주시기 바랍니다.

파일오류	중복자료	저작권 없음	설명과 실제 내용 불일치
파일의 다운로드가 제대로 되지 않거나 파일형식에 맞는 프로그램으로 정상 작동하지 않는 경우	다른 자료와 70% 이상 내용이 일치하는 경우 (중복임을 확인할 수 있는 근거 필요함)	인터넷의 다른 사이트, 연구기관, 학교, 서적 등의 자료를 도용한 경우	자료의 설명과 실제 자료의 내용이 일치하지 않는 경우

이런 노하우도 있어요!더보기

찾던 자료가 아닌가요?아래 자료들 중 찾던 자료가 있는지 확인해보세요

딥러닝 자연어처리 Transformer 트랜스포머 설명 ppt 13페이지

Transformer Transformer RNN 사용하지 않음 - Parallelization
트랜스포머와 딥러닝 11페이지

방식을 사용하여 자연어를 처리하는 방법이다. 2) 탄생배경 트랜스포머의 ... 결론 Transformer는 기존의 자연어 처리 기술을 압도적으로 능가하는 ... 자연어 처리의 방법 자연어 처리의 방법으로는 다양한 방법이 연구되어 왔다.
인간과 기계의 소통, AI 기술 자연어 처리(NLP) 23페이지

트랜스포머 vs 바트 (BERT)vsGPT-3 + 문맥 이해 잘해야 ! ... 트랜스포머 ( Transfomer ), 버트 (BERT), GPT-3 문장 ... 분석 → 더 적은 연산으로도 효율적으로 문장을 이해할 수 있다는 장점 트랜스포머
Transformer 기술이 바꿔버린 AI의 세상 7페이지

Transformer 인코더와 디코더는 모두 자연어 처리 작업을 위한 신경망 ... 답변을 포함한 다양한 자연어 처리 작업에 효과적인 것으로 알려지고 있습니다 ... 반면, Transformer 기술은 병렬 처리가 가능하여 여러개의 GPU를
[인공지능] 인공지능(AI)의 진보와 미래 (알파고에서 Chat GPT까지) 11페이지

그러나 2017년 구글 딥마인드에서 발표한 트랜스포머(Transformer ... 첫째로, 자연어 처리 모델의 진보가 있었습니다. ... 인간의 언어를 이해하고 처리하는 자연어 처리 모델은 인공지능의 발전에 있어서
GPT 매개변수 숫자가 갖는 의미 (GPT parameters) 6페이지

트랜스포머 아키텍처 GPT는 트랜스포머(Transformer) 아키텍처를 ... LLM은 주로 트랜스포머(Transformer) 아키텍처를 기반으로 구성됩니다 ... 트랜스포머의 장점은 문장의 길이에 영향을 받지 않는 병렬 처리 능력을 갖추고
GPT 분석방법 3페이지

즉 RNN을 사용하지 앟ㄴ고 인코더-디코더 구조를 설계하였음에도 자연어 처리 ... 자연어 처리에 필요한 데이터 1) 지도학습 : 정답이 정해진 문제 - 예) ... (주어진 단어로 주변 빈칸 추론) 3) 문제점 자연어 처리를 위해서 사람이
1장 발췌 요약 6페이지

요약하면 트랜스포머는 언어 번역, 텍스트 요약, 질문 답변과 같은 자연어 ... 신경망은 이미지 및 음성 인식, 자연어 처리 및 의사결정 등 다양한 작업을 ... 작동원리: 트랜스포머와 신경망 3. 트랜스포머 알고리즘 4.
제약 설계-AI기반 4페이지

본 알고리즘은 NLP(자연어처리)를 위한 목적으로 개발되었지만 이후에 컴퓨터 ... 이와 같이 트랜스포머는 CNN과 RNN을 대체해나가고 있다. ... 본 보고서에서도 언급되었듯이 트랜스포머 모델은 문장 속 단어와 같은 순차
시계열 분야의 딥러닝 3페이지

- 자연어 처리 분야의 SOTA 모델의 근간이 되는 방법이다. - 서로 ... N-BEATS ● 순환신경망(RNN) ● 컨브넷(ConvNets) ● 트랜스포머 ... 효과적이고 빠르게 예측을 수행할 수 있도록 하는 방법론을 적용한 방법이다. - 트랜스포머
대화형 인공지능 서비스의 도입이 미래의 교육과 사회에 끼칠 순기능과 역기능 6페이지

‘Transformer’라는 것은 이 인공지능이 자연어를 처리하기 위해 딥러닝 ... 초거대 인공지능의 높은 자연어처리 수준은 학습자의 쓰기 과정에서도움을 줄 ... 기반의 트랜스포머 모델을 사용한다는 것을 의미한다.
Chat GPT에 대하여 (이 레포트는 Chat GPT를 활용하여 제작하였습니다) 5페이지

Chat GPT의 주요 기능 중 하나는 트랜스포머 아키텍처를 사용하는 것입니다 ... 이것은 특히 자연어 처리 작업에 적합한 신경망의 일종으로, 문장에서 단어 ... 전반적으로, Chat GPT는 자연어 처리의 주요 혁신을 나타내며 언어를
김재인의 , 인공지능 시대의 블루오션은 창조성이다. 6페이지

(Transformer)라는 자연어 처리 모델을 발표한 것이 그 출발이다. ... 이어서 비영리단체인 오픈 AI는 이 모델을 활용해 ’사전훈련 생성 트랜스포머 ... 이러한 생성 인공지능의 역사는 매우 일천해서 2017년 구글의 연구자들이 트랜스포머
현대 컴퓨터 과학의 발전과 알고리즘의 역할 6페이지

트랜스포머 모델의 이러한 성공은 자연어 처리뿐만 아니라, 다른 시퀀스 모델링 ... 또한 본 논문에서는 트랜스포머 모델이라는 새로운 아키텍처를 소개하였습니다. ... 의료 분야에서의 자연어 처리 기술 동향.
벡터 데이터베이스 12페이지

) , 비전트랜스포머 ( 이미지 ) 기존 데이터 베이스의 문제 어느 정도 ... 문장 ( 메일본문 ) 문서파일 오디오 동영상 3D 임베딩 사람이 쓰는 자연어를 ... 데이터의 특성 표현이 가능 예 ) 구글 Bert 모델 ( 문장이나 단어 처리
인공지능의 역사적 발전과 현재 동향 6페이지

최근 몇 년 동안, 자연어 처리(NLP) 분야에서는 트랜스포머 모델의 등장이 ... 현재의 인공지능 기술은 이미지 인식, 자연어 처리, 자율 주행 차량 등 다양한 ... 이러한 트랜스포머 모델은 현재 다양한 NLP 작업에 활용되고 있으며, 이