작성자: 13기 김현지 Pytorch로 신경망 모델 정의하고 사용하기 Reference: 파이토치 사용자 모임-튜토리얼 anweh 티스토리: https://anweh.tistory.com/21?category=946891, https://anweh.tistory.com/22?category=94 Contents 신경망 모델 구성하기 모델 매개변수 최적화하기 모델 저장하고 불러오기 1. 신경망 모델 구성하기 FashionMNST 데이터셋의 이미지들을 분류하는 신경망을 구성해보자. import os import torch from torch import nn from torch.utils.data import DataLoader from torchvision import datasets, transforms..

알쓸쿠잡/프레임워크 2021. 11. 24. 14:20

작성자: 13기 김현지 PyTorh 사용법 정리! Reference: PyTorch로 시작하는 딥러닝 입문, 파이토치 한국 사용자 모임-튜토리얼 Contents 파이토치 패키지의 기본 구성 DATASET과 DATALOADER 파이토치 패키지의 기본 구성 1. torch 메인 네임스페이스. 텐스 등의 다양한 수학 함수가 포함되어져 있으며 Numpy와 유사한 구조를 가진다. 2. torch.autograd 자동 미분을 위한 함수들이 포함되어 있다. 자동 미분의 on/off를 제어하는 콘텍스트 매니저(enable_grad/no_grad)나 자체 미분 가능 함수를 정의할 때 사용하는 기반 클래스인 'Function' 등이 포함되어 있다. 3. torch.nn 신경망을 구축하기 위한 다양한 데이터 구조나 레이어 ..

알쓸쿠잡/프레임워크 2021. 11. 24. 14:16

작성자: 13기 김현지 파이썬 class 개념 정리! Reference: 파이썬 코딩 도장 Unit 34, 파이썬 코딩 도장 Unit 36 Contents 클래스 사용하기 클래스 상속 사용하기 1. 클래스 사용하기 클래스와 메서드 만들기 클래스는 class에 클래스 이름을 지정하고 : (콜론)을 붙인 뒤 다음 줄부터 def로 메서드를 작성하면 된다. 여기서 메서드는 클래스 안에 들어있는 함수를 뜻한다. 클래스 이름은 보통 대문자로 시작한다. 메서드 작성 방법은 함수와 같으며 코드는 반드시 들여쓰기를 해야 한다. 메서드의 첫 번째 매개변수는 반드시 self를 지정해야 한다. class 클래스이름: def 메서드(self): 코드 예제 class Person: def greeting(self): print(..

알쓸쿠잡/파이썬 2021. 11. 24. 14:01

작성자 : 14기 임혜리 참고 커널 : https://www.kaggle.com/chanoncharuchinda/top-100-korean-dramas Top 100 Korean Dramas Explore and run machine learning code with Kaggle Notebooks | Using data from Top 100 Korean Drama (MyDramaList) www.kaggle.com 데이터 설명 top100_kdrama.csv 는 'MyDramaList'라는 외국 웹사이트에서 공개한 '한국 드라마 Top 100' 데이터이다. beautifulsoup이라는 라이브러리를 통해 웹 크롤링을 진행하였다. beautifulsoup : 인터넷 문서의 구조에서 명확한 데이터를 추출하..

심화 스터디/코드 분석 스터디 2021. 11. 23. 17:12

대회 및 데이터 소개 대회 소개 : https://www.kaggle.com/c/spooky-author-identification Spooky Author Identification | Kaggle www.kaggle.com 대회와 데이터 셋에 대해서 소개 하자면 이 대회는 주어진 문장 데이터를 통해 해당 소설을 작성한 작가를 예측하는 대회이다. 주어진 데이터는 다음과 같다. id - 주어진 문장에 부여된 고유 번호 text - 각각의 작가들이 작성한 텍스트 데이터 author - 문장의 작가들 : EAP = Edgar Allan Poe, HPL = HP Lovecraft, MWS = Marry Wollstonecraft Shelley 필사 커널 소개 https://www.kaggle.com/zikaz..

심화 스터디/코드 분석 스터디 2021. 11. 14. 20:17

Week6_;Natural Language Processing(NLP) 작성자 : 14기 김유민 Kaggle : Bag of Words Meets Bags of Popcorn 커널 필사 대회 소개 링크 : https://www.kaggle.com/c/word2vec-nlp-tutorial 영화리뷰를 읽고 그 리뷰가 영화를 추천하고 있는지 아닌지를 예측 평가하는 기준은 ROC커브 데이터 파일 labeledTraindata.csv - id/sentiment/review 3개의 칼럼- Id는 글쓴이, sentiment는 1이면 긍정, 0이면 부정적인 리뷰를 뜻하고 review는 직접 쓴 리뷰 testData.csv - sentiment가 빠진 2개의 열 [Reference] 캐글 : https://www.ka..

심화 스터디/코드 분석 스터디 2021. 11. 13. 14:58

작성자 : 채윤병 참고 : MIT spring 2021 6.874 Computational system biology lecture 15 일반적인 ML, deep learning의 경우 데이터의 형태가 이미지, 텍스트, 수치와 같은 형태 생물 데이터(gene-gene, cell-cell, protein-protein)의 경우 데이터간의 연관성이 매우 복잡하게 얽혀있기 때문에 일반적인 데이터 형태로 표현하기가 어려움 >> Graph network 형태로 데이터를 표현 데이터의 형태에서 Node는 drug discovery의 경우 약물이 될 수도 있고 gene, protein등이 될 수 있다. Edge의 경우 Node들 간의 연관성을 담고 있다. (그렇지만 Drug discovery와 같은 분야에서 일반적인..

심화 스터디/의료 데이터 스터디 2021. 11. 11. 20:33

1. Introduction 이제까지의 머신러닝의 일반적인 접근법은 어떠한 task에서 바라는 행동(예를 들면 질문과 질문에 대한 대답, 글과 글에 대한 요약 같은 것들)을 담은 데이터를 학습시켜서 이를 따라할 수 있는 시스템을 만들고, 다른 iid 데이터에서도 이 performance가 잘 작동되는지 test하는 것이었다. 그러나 이러한 접근법은 다루기가 힘들고 데이터 분포의 작은 변화에도 큰 영향을 받는다는 단점이 있었다. 시스템의 보편성에서 문제가 일어나는 이유를 특정 단일한 task에 training data를 제한했기 때문이라고 분석하였다. 그래서 더 넓은 영역의 domain과 task에 대한 performance를 측정하고 training을 할 수 있도록 구조를 고치는 것이 필요하다고 제안되었..

심화 스터디/NLP 스터디1 2021. 11. 11. 19:44