Communication-Efficient Learning of Deep Networks from Decentralized Data

Communication-Efficient Learning of Deep Networks from Decentralized Data

필승! 강화도에서 해병대 장교로 국방의 의무를 다하고, 현재는 대학원에서 인공지능을 공부하고 있는 규씨입니다.단순히 읽고 이해하는 것만으로는 기억에 오래 남지 않는다는 것을 깨닫고, 공부한 내용을 정리하고 공유하면서 더 오래 기억하기 위해 블로그를 시작하게 되었습니다.읽으시면서 틀리거나 제가 잘못 이해한 부분 지적해 주시면 정말 감사하겠습니다.  함께 배우고 성장하는 공간이 되기를 바랍니다. 감사합니다!Communication-Efficient Learning of Deep Networks from Decentralized Data  □ Abstract현대 모바일 기기는 사용자 경험을 개선할 수 있는 모델 학습에 적합한 다양한 데이터에 접근할 수 있음그러나 이러한 데이터는 종종 개인정보 보호가 필요하며,..

  • format_list_bulleted 대학원/논문 리뷰
  • · 2024. 8. 20.
  • textsms
CRADLE: Empowering Foundation Agents TowardsGeneral Computer Control

CRADLE: Empowering Foundation Agents TowardsGeneral Computer Control

필승! 강화도에서 해병대 장교로 국방의 의무를 다하고, 현재는 대학원에서 인공지능을 공부하고 있는 규씨입니다.단순히 읽고 이해하는 것만으로는 기억에 오래 남지 않는다는 것을 깨닫고, 공부한 내용을 정리하고 공유하면서 더 오래 기억하기 위해 블로그를 시작하게 되었습니다.읽으시면서 틀리거나 제가 잘못 이해한 부분 지적해 주시면 정말 감사하겠습니다.  함께 배우고 성장하는 공간이 되기를 바랍니다. 감사합니다!CRADLE: Empowering Foundation Agents TowardsGeneral Computer Control  □ Abstract기존의 에이전트들이 다양한 환경에서 일반화하는데 어려움을 겪고 있음이러한 문제를 해결하기 위해, 연구진은 기초 에이전트들이 스크린샷을 입력으로 받고 키보드 및 마우..

  • format_list_bulleted 대학원/논문 리뷰
  • · 2024. 8. 9.
  • textsms
RAG-FUSION: A NEW TAKE ON RETRIEVAL-AUGMENTED GENERATION

RAG-FUSION: A NEW TAKE ON RETRIEVAL-AUGMENTED GENERATION

필승! 강화도에서 해병대 장교로 국방의 의무를 다하고, 현재는 대학원에서 인공지능을 공부하고 있는 규씨입니다.단순히 읽고 이해하는 것만으로는 기억에 오래 남지 않는다는 것을 깨닫고, 공부한 내용을 정리하고 공유하면서 더 오래 기억하기 위해 블로그를 시작하게 되었습니다.읽으시면서 틀리거나 제가 잘못 이해한 부분 지적해 주시면 정말 감사하겠습니다.  함께 배우고 성장하는 공간이 되기를 바랍니다. 감사합니다!RAG-FUSION: A NEW TAKE ON RETRIEVAL-AUGMENTED GENERATION  □  Abstract Infineon은 엔지니어, 계정 관리자 및 고객이 제품 정보를 신속하게 얻기 위한 RAG-Fusion 모델 제시RAG-Fusion은 RAG와 RRF(Reciprocal Rank F..

  • format_list_bulleted 대학원/논문 리뷰
  • · 2024. 6. 22.
  • textsms
Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks

Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks

필승! 강화도에서 해병대 장교로 국방의 의무를 다하고, 현재는 대학원에서 인공지능을 공부하고 있는 규씨입니다.단순히 읽고 이해하는 것만으로는 기억에 오래 남지 않는다는 것을 깨닫고, 공부한 내용을 정리하고 공유하면서 더 오래 기억하기 위해 블로그를 시작하게 되었습니다.읽으시면서 틀리거나 제가 잘못 이해한 부분 지적해 주시면 정말 감사하겠습니다.  함께 배우고 성장하는 공간이 되기를 바랍니다. 감사합니다!Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks   □  Abstract 매개변수에 지식을 저장하고, 하위 NLP 작업에서 파인튜닝을 통해 SOTA 달성한 대규모 사전 학습된 언어 모델은 지식을 접근하고 정밀하게 조작하는 능력이 제한되며,..

  • format_list_bulleted 대학원/논문 리뷰
  • · 2024. 6. 14.
  • textsms
Attention Is All You Need

Attention Is All You Need

필승! 강화도에서 해병대 장교로 국방의 의무를 다하고, 현재는 대학원에서 인공지능을 공부하고 있는 규씨입니다.단순히 읽고 이해하는 것만으로는 기억에 오래 남지 않는다는 것을 깨닫고, 공부한 내용을 정리하고 공유하면서 더 오래 기억하기 위해 블로그를 시작하게 되었습니다.읽으시면서 틀리거나 제가 잘못 이해한 부분 지적해 주시면 정말 감사하겠습니다. 함께 배우고 성장하는 공간이 되기를 바랍니다. 감사합니다!Attention Is All You Need□ AbstractRNN이나 CNN을 사용하지 않고, 어텐션 메커니즘만으로 구성된 새로운 네트워크 구조 제안 이 모델은 WMT 2014 영어-독일어 번역, 영어-프랑스어 번역 작업에서 기존 최고 성능을 뛰어넘음 Transformer는 다양한 작업에서 일반화 될 수..

  • format_list_bulleted 대학원/논문 리뷰
  • · 2024. 6. 7.
  • textsms