본문 바로가기

퍼펭스쿨 AI 논문 리뷰

(6)
LMM 환각을 해결해주는 딱따구리! Woodpecker 논문 리뷰! 들어가며 원문: Woodpecker: Hallucination Correction for Multimodal Large Language Models 안녕하세요 퍼펭스쿨입니다! 여러분, LLM이나 LMM 같은 생성 AI 모델의 가장 큰 문제가 무엇일까요? 바로 없는 얘기를 찰떡처럼 지어내는 환각 현상입니다. 오늘 소개할 논문은 마치 딱따구리 처럼, LMM 모델이 거짓말한 부분만 쏙쏙 골라서 고쳐주는 방법을 소개하는 Woodpecker: Hallucination Correction 입니다. 아직 LMM이 생소하신 분들은 이전 리뷰를 보고 와주세요! GPT4 이제 눈까지 떠버렸다👀 GPT-4V 논문 리뷰
GPT4 이제 눈까지 떠버렸다👀 GPT-4V 논문 리뷰 들어가며 GPT4가 눈까지 떠버렸습니다. 이 녀석... 이제 언어 뿐만 아니라 이미지도 이해할 수 있게 되었습니다. 10월 11일 마이크로 소프트 연구팀에서 논문 한편을 공개했는데요, 바로 "The Dawn of LMMs: Preliminary Explorations with GPT-4V(ision)"입니다. 대충 "LMM 새벽이 온다...! GPT-4V 프리뷰" 입니다. 이제 LLM은 가버리고 LMM의 시대가 올꺼라는데요, 대체 GPT-4V의 성능이 어느 정도길래 이 정도로 호들갑을 떠는지 한번 리뷰해보겠습니다. Dawn of LMMs 먼저 논문 제목은 "LMM 새벽이 온다. GPT-4V 프리뷰"입니다. 제목 하나는 기가 막히죠? 아직 대중에게 공개되지 않는 GPT-4V 모델의 이모저모를 뜯어보는 논문..
AI들이 차린 게임회사🕹️ chatdev 리뷰 참고 자료 📄 Communicative Agent 논문 arxiv 📄 Generative Agent 논문 arxiv 들어가며 ▶️ 리뷰 영상 AI 에이전트들끼리 모여서 차린 게임 회사는 어떤 모습일까요? 자기들끼리 아이디어 회의도 하고, 개발도 하고, 코드 리뷰와 디버깅을 하면서 완성한 소프트웨어는 어떠한 모습일까요? 오늘은 칭와대에서 최근 공개한 Communicative Agent for Software Development 논문을 리뷰해보았습니다. 논문 제목 답게 저자들은 에이전트끼리 협업을 통해서 소프트웨어를 개발하는 시스템을 연구하였습니다. AI들이 모여있는 게임회사는 어떻게 일하는지 함께 리뷰해보시죠! Commnicative Agent 논문 3줄 요약 게임 회사 CEO, CTO, 개발자, 디자이..
라마, 알파카, 비쿠나 오픈소스 챗봇 낙타들🐪 총정리! 참고 자료 📄 llama 논문 arxiv 📄 instruct GPT 논문 arxiv 🌐 chatGPT 블로그 포스팅 🌐 alpaca 블로그 포스팅 🌐 vicuna 블로그 포스팅 들어가며 ▶️ 리뷰 영상 라마, 알파카, 비쿠나를 들어보셨나요? 바로 핫하게 떠오르고 있는 chatGPT를 위협하는 오픈소스 챗봇들입니다. 대체 이 낙타들은 어떻게 탄생했는지, 어떻게 chatGPT 같은 대화형 인터페이스를 만들었는지 저와 함께 리뷰해보시요! 라마, 알파카, 비쿠나의 등장 먼저 시작은 chatGPT입니다. 경악스러운 성능으로 전세계를 뒤집어 놓으면서 LLM 열풍을 불러왔습니다. 하지만 openai라는 회사 이름에는 걸맞지 않게 chatGPT 모델 웨이트 파일이나 소스코드, 모델 학습 코드 등은 모두 공개하지 않은채..
무엇이든 누끼따는✂️ AI! Segment Anything Model 리뷰 들어가며 📄 Segment Anything Model 논문 🧑‍💻 Segment Anything Model github ▶️ 리뷰 영상 하나의 모델이 다양한 Computer Vision task를 수행할 수 있다면 어떨까요? 일일이 테스크 별로 모델을 만들 필요가 없어져서 매우 편리하겠죠? 오늘은 메타가 최근 공개한 Segment Anything Model 논문을 리뷰해보았습니다. 논문 제목 답게 저자들은 promptable segmentation이라는 새로운 task를 정의하고, 아주 유연한 비전 모델을 만드는 시도를 했습니다. 과연 메타의 연구진들은 GPT 처럼 computer vision 계의 general AI를 만드는데 성공했을까요? 같이 리뷰해보시죠! Segment Anything Model ..
AI들끼리 살고 있는 마을🏡 Generative Agent 리뷰 들어가며 📄 generative agent 논문 🧑‍💻 논문 소스 코드 ▶️ 리뷰 영상 게임 NPC들이 기억이 있다면 어떨까요? 또 NPC들끼리 대화를 나누고 파티도 연다면 어떨까요? 장안의 화제인 Generative Agent 논문을 리뷰해보았습니다. Generative Agent 논문 3줄 요약 자연어 형태의 기억을 가진 아바타들과 이들이 모여 사는 마을을 만들었다. 아바타들의 기억과 다음에 무슨 행동을 할 지를 prompt 형태로 chatGPT 한테 물어봤다. 그랬더니 아바타끼리 대화도 하고, 썸도 타고, 파티도 열더라! Generative Agent 먼저 아바타에 해당하는 generative agent에 대해서 알아보겠습니다. 저자는 아바타의 이름, 직업, 성격, 가족, 사회 관계 등을 자연어로 ..