Every (139) 썸네일형 리스트형 [후기] 모두를 위한 한국어 오픈액세스 언어모델 못다한 이야기 (feat. 모두연) #2 본격적인 이준범님의 프로젝트 소개 가보자궈~~!~!~! 1. 회사 및 프로그램 소개 2. 강연 a. 한국어 오픈액세스 LM 동향 b. Llama-2-Ko/Yi-Ko/Solar-Ko 등 프로젝트 소개 c. 학습 데이터 수집, 전처리 과정, 토크나이저 제작 과정 및 시행착오 d. 오픈모델의 사용성과 라이센스 3. Q&A 그쵸.. 항상 데이터가 중요하죠. 공개되어있는 한국어 데이터의 경우 Ai Hub, 모두의 말뭉치, 위키피디아 등등 많지만 은근 AI Hub가 짱짱하다고 하는데요! 혹시 프로젝트 하시는 분들은 참고하시면 좋겠네요ㅎㅎ 직접 from scratch 식으로 만들었다고 하시는데, 와우... 대단하군요..! 특히 데보션에 이와 관한 내용이 잘 정리가 되어있다고 하니 함 봐야겠어요! 좌표는 아시죠? 밑에.. [후기] 모두를 위한 한국어 오픈액세스 언어모델 못다한 이야기 (feat. 모두연) #1 사실,, 요 행사를 진행한지 좀 되었는데요.. 열심히 필기하면서 재밌게 보다가 놓친부분이 있어서 영상이 재업로드될 때까지 기다렸습니다ㅎ 시작을 해볼게요!! 강연 순서는 다음과 같습니다. 1. 회사 및 프로그램 소개 2. 강연 a. 한국어 오픈액세스 LM 동향 b. Llama-2-Ko/Yi-Ko/Solar-Ko 등 프로젝트 소개 c. 학습 데이터 수집, 전처리 과정, 토크나이저 제작 과정 및 시행착오 d. 오픈모델의 사용성과 라이센스 3. Q&A 강연을 리뷰하기에 앞서 저는 한국어 언어모델 연구과 특정 Domain에 언어모델이 적용될 때 어떻게 하면 높은 성능을 취할 수 있을까? 에 굉장히 관심이 많습니다. 특이하게도 어느 한 Domain을 정해놓기보단 통용되는 성능에 더 관심이 많구요. 궁극적으로는 산업.. OpenSource 기여자 되기 (feat. LangChain) 안녕 여러분! 최근 "Zl랄발광 랭체인" 포스팅과 함께 랭체인 공부를 하면서 신기한 경험을 해서 그 얘기를 좀 해보려고 가져왔어요! 열심히 프로젝트를 하면서 공부도 병행하고 있던 찰나 생애 처음으로 프레임워크 공식독스를 처음부터 끝까지 파보게되는데,, 아니.. 공식독스라는것들이 예제가 너무 실행안되는게 많잖아..? 그와중에 눈에 딱 들어와서 꽂힌게 있었으니 그것이 바로 Retry parser! Retry parser는 Langchain의 동작도중 오류가 날 경우를 캐치하여 다시 parsing해주는 아이인데 요녀석,, 실행이 안되는구만..! 자꾸만 type error도 나고 난리가 나네 아주 😡😡😡 한 1시간 좀 넘게 봤나..? 아 요놈 요거 원인을 찾았다..!! 이때 당시 Langchain이 versio.. Zl랄발광 랭체인 #1 요새 핫한 생성형 AI, 이걸 써먹을 수 있는 랭체인 프레임워크에 대해 알아보자! 여러분은 LLM이라는것을 아는가? LLM은 Large Language Model의 약자로 엄청나게 많은 자본을 잡아먹어 기존의 LM(Language Model)의 사이즈를 키운것으로 이해하면 편할것이다. 이러한 LLM을 원동력으로 하는 애플리케이션을 만들어야 산업전반적으로 써먹을텐데 그부분에 대해서는 언어모델의 연구만큼 이루어져있지 않은것이 현실이다. 랭체인(Langchain)은 그 부분을 해소시켜주는 대표젹인 프레임워크로 이미 수면아래에서는 그 가능성을 알아보고 도입하고자 하는 사람들이 많은것 같다. 필자역시 그중하나로 요 랭체인이라는 아이를 잘 노나먹어(?)보자는 의미에서 공부하고 그 내용을 블로그로 써보려고 한다. (.. [후기] MODUCON2023 여러분, 여러분은 'MODUCON(모두콘)'을 아시나요? MODUCON(모두콘)’은 모두의연구소의 연구원분들이 1년 동안의 연구 활동을 공유하는 모두연만의 특별한 축제에요. 인공지능 세미나 및 인공지능 분야 전문가분들과 네트워킹 할 수 있는 자리로 지난 몇년간 꾸준히 이어져오고있는 행사랍니다. 저도 굉장히 좋아하는 행사인데요, 매번 직접참가하지 못하지만 추후 올라오는 영상들을 꾸준히 보고있답니다 ㅎㅎ 이번에는 특히나 제가 취업준비를 하는 시기이기도 하고 많은 성장을 이룬 시기이기때문에 듣고 알아본 내용을 회고로써 남겨보려고 합니다! 당연하게도 모두의 연구소 Youtube 채널에서 다시보기를 할 수 있으니 관심이 있으시다면 한번씩 꼭 보세요!!! 좌표 남겨놓을게요!! 👉 https://www.youtube.. 이전 1 2 3 4 5 ··· 28 다음
