국문과 유목민

.gitignore 적용하기 글과 [Git] .gitignore이란? / .gitignore 사용법글을 참고해서 작성합니다. 조금 더 친절한 설명과 세부적인 설명을 원하시면 해당 블로그들을 참고하시면 더 좋습니다. .gitignore git에서 log를 관리할 때 보통 폴더 내 모든 파일에 대해 Tracking을 진행한다. 하지만 용량이 큰 파일이나 임시파일 등의 경우 Tracking이 필요하지 않거나, 용량이 커 관리의 어려움이 생기곤 한다. 또한 보안이나 저작권 상 문제 등으로 올리지 말아야 할 파일들이 있을 수도 있다. 따라서 이러한 파일들을 Tracking하지 않게 설정을 해줘야 하는데 이때 사용할 수 있는 파일이 .gitignore다. .gitignore 규칙 .gitignore를 생성하기 위해..

해당 포스팅은 Hugging Face Transformers에서 제공하는 Huggingface library에서 wandb를 사용하는 간단한 방법에 대해 다루고 있습니다. 아주 기초적인 사용법에 대해서 다루고 있기 때문에 위의 공식 Documents를 확인하시는 것이 가장 좋음을 미리 알려드립니다. 소개 팀프로젝트나 개인 실험을 함에 있어서 wandb를 사용하면, 실험 관리나 공유가 쉽다. 이전에 팀과제를 수행할 때도 wandb를 사용했을 때 만족도가 높아서 이번 팀 과제를 수행할 때도 사용하고자 했다. 하지만 이번 과제의 경우 베이스라인 코드가 HuggingFace Transformer 라이브러리로 구현되어 있어서 어떻게 사용해야 될 지 몰라서 검색을 좀 했다. 문제를 해결하기는 했는데, 검색을 하면서..

0. NLP OVERVIEW 자연어처리는 사전적인 의미로 '컴퓨터를 이용해 인간 언어의 이해, 생성 및 분석을 다루는 인공지능 기술'이라고 정의된다. 사실 컴퓨터의 자연어처리는 쉽게 정리하자면 다음과 같은 세 단계를 거쳐서 진행이 된다. Encoder를 이용해 자연어를 벡터 형태로 인코딩 메세지 전송 Decoder를 이용해 벡터를 자연어로 디코딩 간단히 정리하자면 자연어처리의 연구는 "컴퓨터가 이해할 수 있게, 수학적으로, 어떻게 이쁘게 인코딩할 수 있는지"에 대한 방법을 연구하는 것으로 볼 수 있다. 왜냐하면 인코딩이 이쁘게 되면 디코딩을 통해 무엇이든지 할 수 있기 때문이다. 그렇다면 자연어를 어떻게 이쁘게 인코딩할 수 있을 지에 대해 알아보겠다. 1. 자연어 처리의 응용분야 대부분의 자연어처리는 '..

출처) https://wayhome25.github.io/etc/2017/03/27/vi/ vi 단축키 정리 · 초보몽키의 개발공부로그 vi 단축키 정리 27 Mar 2017 | vim 학습자료 vi 단축키 삽입 키 기능 i 커서 위치에 Insert I 줄 맨 앞에서 Insert a 커서 다음에 Insert A 줄 맨 뒤에서 Insert o 커서 아래로 한 줄 띄우고 Insert O 커서 위로 한 줄 wayhome25.github.io Vim 명령어 단축키 출처: 도서출판 인사이트