본문 바로가기

Community9

임베딩 벡터 간 유사도에 대한 오해 개인 프로젝트를 진행하다가 LLM의 답변에 대한 정량적인 평가 지표 개발의 필요성을 느끼고 모델의 특징을 고려한 평가 지표를 만들어보려고 했습니다. 프로젝트 주제를 간단히 소개하면, 입력된 법률 분쟁 상황에 대한 조언을 하는 파인튜닝을 수행한 LLM입니다. LLM 파인튜닝에 사용하는 학습 데이터는 다음과 같이 법적 상황에 대한 QA 형식으로 이루어져 있습니다. 질문: 남편이 가출하여 연락이 되지 않다가 3년 6개월 뒤 ‘실종자 찾아주기’ 운동의 일환으로 DNA검사를 했더니 남편은 3년 전에 이미 교통사고로 사망하였고, 신원미상자로 처리되었다고 합니다. 가출 전 남편이 들어놓은 사망보험금을 청구했더니 보험회사는 사망 후 3년이 경과하였기 때문에 소멸시효 완성을 주장하고 있습니다. 보험금은 못 받는건가요? .. 2023. 7. 29.
기술 문서 번역의 어려움 오픈소스 컨트리뷰션 HuggingFace 한글화 프로젝트에서 본격적으로 번역활동을 시작했습니다. Transformers 라이브러리의 공식 문서를 한글로 번역하는 작업인데, 하위 문서를 골라서 번역을 수행합니다. 처음으로 고른 문서는 How to add a model to 🤗 Transformers? 입니다. Transformers 라이브러리에 새로운 모델을 추가하는 방법을 단계별로 매우 구체적으로 설명하고 있는 문서입니다. 이 문서를 번역하는 도중 여러가지 문제점에 직면했었는데 구체적으로 어떤 문제였는지 하나씩 정리해보았습니다. 용어 번역 문제 먼저 팀에서 어떤 과정으로 번역을 수행하는지 간단하게 요약하자면 다음과 같습니다. 1. 원본 문서를 ChatGPT, DeepL등을 사용하여 기계번역 수행 2. 초.. 2023. 7. 22.
2023 오픈소스 컨트리뷰션 아카데미 Review 부스트캠프 팀원의 소개로 오픈소스 컨트리뷰션 아카데미를 알게 되어, 지원하였습니다. 오픈소스 컨트리뷰션 아카데미는 오픈소스에 대한 진입장벽을 허물고, 선의의 경쟁의 형식으로 오픈소스 문화에 기여하는 '컨트리뷰톤'에 참여하여 오픈소스 문화를 경험하는 멘토링 프로그램입니다. 개발자로서 오픈소스에 기여하고, 내 PR이 직접 merge되는 것의 가치를 알고 있기에 매우 좋은 기회라고 생각되어 망설임없이 지원하였습니다. 지식은 공유되어야 한다는 생각을 평소부터 갖고 있었기 때문에 단순히 오픈소스에 기여해봤다는 경험을 가지려기보다는, 그 행위 자치에 큰 의미를 두고 참여하고 싶다는 생각이 들었습니다. 올해는 약 20여개의 프로젝트가 진행되는데, 인공지능 분야를 공부하고 있어 관련 분야의 프로젝트를 지원하였습니다. .. 2023. 7. 14.
8주차 회고 [AI BoostCamp 8주차 (23.04.22~23.04.26) 회고] 부스트 캠프에서 공부를 한 지 벌써 두 달이 되어간다. 그리고 벌써 LV1 과정이 끝났다. 이번 주 강의 주제는 AI 서비스 개발 기초인데, 모델을 기획하고 개발하며 배포하는 과정 사이에서 일어나는 모든 일들에 대해서 간단하게 소개하는 강의들이었다. 대회 사이 한 주 동안 가볍게 듣는 강의들이라 공부한 내용에 대해서는 많이 할 말이 없다. 대회가 끝나고 같은 팀원, 그리고 다른 팀원들과 각자 회고하고 공유하는 일이 메인이지 않았나 싶다. 이제 부스트캠퍼들은 8주간의 LV1 과정을 마치고, 앞으로는 새로운 팀원들과 대회와 프로젝트를 진행한다. 우리 조는, 운이 좋게도 처음부터 마음이 잘 맞는 사람들끼리 구성이 되었고, 계속해서 함께.. 2023. 5. 1.