본문 바로가기

분류 전체보기192

[DAY 62] 자연어 처리 (NLP) 복습 [천재교육] 프로젝트 기반 빅데이터 서비스 개발자 양성 과정 9기학습일 : 2024.10.17📕 학습 목록자연어 처리 모델 (NLP) 개념 복습 📗 기억할 내용1. 자연어 처리 모델(NLP) 정의자연어 처리 모델(NLP, Natural Language Processing): 인간이 사용하는 언어를 컴퓨터가 이해하고 처리할 수 있도록 하는 기술. 텍스트 데이터를 분석하고, 이해하며, 생성하는 작업을 포함하며, 이러한 작업을 수행하기 위해 다양한 모델들이 발전해 왔음 2. 자연어 처리 모델(NLP)1) NLP 모델의 발전① 초기 모델LSTM(Long Short-Term Memory): 시계열 분석이 가능한 기초적인 모델. 숫자 분석에는 강점을 보이지만, 자연어 분석에는 부족한 면이 있음② 발전형 모델CN.. 2024. 10. 17.
[DAY 61] NLP 실습???????? [천재교육] 프로젝트 기반 빅데이터 서비스 개발자 양성 과정 9기학습일 : 2024.10.16📕 학습 목록콘텐츠 이용 실태 조사 📗 프로젝트 작업 내역1) 프로젝트 제목2022년도 초등학생 대상 콘텐츠 이용 실태 조사 2) 프로젝트 목표초등학생(3~6학년)을 대상으로 한 교육 콘텐츠의 이용 현황을 분석학년별 콘텐츠 이용 특성 및 콘텐츠 유형(영상 강의, 문제 풀이 등)별 활용도를 분석3) 사용한 데이터 셋2022년도 초등학생 미디어 콘텐츠 이용 데이터4) 워크플로우① 데이터 수집 및 전처리WITH quarter_data AS ( SELECT QUARTER(e_media."datestamp[active]") AS quarter, e_study.userid, .. 2024. 10. 16.
[DAY 60] 자연어 처리 (NLP) 모델 [천재교육] 프로젝트 기반 빅데이터 서비스 개발자 양성 과정 9기학습일 : 2024.10.15📕 학습 목록자연어 처리 (NLP) 기술 📗 기억할 내용1. 자연어 처리 (NLP) 기술1) Transformer 모델①  정의 및 특징Transformer는 자연어 처리(NLP) 분야에서 매우 중요한 모델2017년 Google의 연구팀이 발표한 논문 "Attention is All You Need"에서 처음 제안되었으며, 그 이후로 다양한 자연어 처리 작업에 적용되고 있음Transformer는 자연어 처리 모델의 기본 구조로, 텍스트 분류, 기계 번역, 질문 응답 등의 작업에서 뛰어난 성능을 보임② 작동 방식Self-Attention 메커니즘을 통해 문장의 모든 단어 간 관계를 동시에 고려하는 방식이전의 R.. 2024. 10. 15.
[DAY 59] 자연어 처리 (NLP) [천재교육] 프로젝트 기반 빅데이터 서비스 개발자 양성 과정 9기학습일 : 2024.10.14📕 학습 목록Generative AIPrompt EngineeringTransformer 아키텍처 📗 기억할 내용1. Generative AI (생성형 AI)Generative AI : 기존의 데이터나 프롬프트를 기반으로 새로운 텍스트, 이미지, 오디오 등을 생성하는 AI 기술딥러닝 기술을 사용하여 새로운 콘텐츠를 만들 수 있음1) 대표적인 모델GPT: 텍스트 생성에 강점을 가진 모델로, 다양한 형태의 텍스트 생성 작업에 사용DALL·E: 텍스트 설명을 바탕으로 이미지를 생성하는 모델Stable Diffusion: 사용자의 텍스트 설명을 바탕으로 고품질의 이미지 생성2) 활용 분야콘텐츠 생성: 자동으로 글쓰기.. 2024. 10. 14.
[DAY 58] 자연어 처리 (NLP) [천재교육] 프로젝트 기반 빅데이터 서비스 개발자 양성 과정 9기학습일 : 2024.10.11📕 학습 목록자연어 처리 모델자연어 처리 딥러닝 모델 변천사 📗 기억할 내용1. 자연어 처리(NLP)의 개요자연어 처리 : 인간의 언어를 컴퓨터가 이해하고 처리하는 기술크게 텍스트 처리와 음성 처리로 나눌 수 있음주요 응용 분야: 기계 번역, 질의응답 시스템, 텍스트 분류, 감정 분석 등2. 주요 자연어 처리 기술1) 임베딩 벡터(Embedding Vector)정의: 단어를 고차원에서 저차원의 연속적인 벡터 공간으로 변환한 값목적: 단어 간의 의미적 유사성을 표현하고, 모델이 단어 간의 관계를 학습할 수 있도록 돕는 역할을 함대표 기법: Word2Vec, GloVe, FastText기능: 단어를 의미적으로 유.. 2024. 10. 11.
[DAY 57] SQL 실습 [천재교육] 프로젝트 기반 빅데이터 서비스 개발자 양성 과정 9기학습일 : 2024.10.10📕 학습 목록콘텐츠 이용 실태 조사 📗 프로젝트 작업 내역1) 프로젝트 제목2022년도 초등학생 대상 콘텐츠 이용 실태 조사 2) 프로젝트 목표초등학생(3~6학년)을 대상으로 한 교육 콘텐츠의 이용 현황을 분석학년별 콘텐츠 이용 특성 및 콘텐츠 유형(영상 강의, 문제 풀이 등)별 활용도를 분석3) 사용한 데이터 셋2022년도 초등학생 미디어 콘텐츠 이용 데이터4) 워크플로우① 데이터 수집 및 전처리WITH quarter_data AS ( SELECT QUARTER(e_media."datestamp[active]") AS quarter, e_study.userid, .. 2024. 10. 10.