12/10 트랜스포머 모델 기반 최신 자연어처리 현황/한계 및 발전방향 (김현기 박사/한국전자통신연구원)

작성자
kaistsoftware
작성일
2020-12-07 15:19
조회
7463
  • 강사 : 김현기 박사 (한국전자통신연구원)  
  • 일시 : 2020. 12. 10 (목) 17:00~18:30
구글의 BERT(Bidirectional Encoder Representations from Transformers)는 자연어 처리 분야에서 획기적인 성능개선을 이루었다. 또한 최근에는 BERT의 속도와 성능을 개선하는 RoBERTa, ALBERT, StructBERT, GPT-3, Longformer, BigBird 등 다양한 모델들이 등장하였습니다. 본 강연에서는 다양한 언어 모델들의 특징과 함께, 언어분석, 정보추출, 정보검색, 기계독해 분야의 활용사례에 대해 소개합니다. 그리고 현재 언어모델의 한계 및 발전방향에 대해서도 논의하고자 합니다.
전체 121
번호 제목 작성자 작성일 추천 조회
공지사항
2024년 봄학기 콜로퀴엄 일정 안내
kaistsoftware | 2024.02.21 | 추천 1 | 조회 3574
kaistsoftware 2024.02.21 1 3574
50
2021년 봄학기 콜로퀴엄 일정 안내
kaistsoftware | 2021.03.09 | 추천 0 | 조회 9191
kaistsoftware 2021.03.09 0 9191
49
12/10 트랜스포머 모델 기반 최신 자연어처리 현황/한계 및 발전방향 (김현기 박사/한국전자통신연구원)
kaistsoftware | 2020.12.07 | 추천 0 | 조회 7463
kaistsoftware 2020.12.07 0 7463
48
12/3 Algorithm-Hardware Co-Design for Machine Learning (박종세 교수/KAIST 전산학부)
kaistsoftware | 2020.12.01 | 추천 0 | 조회 7264
kaistsoftware 2020.12.01 0 7264
47
11/26 동시성 프로그램은 언제 메모리를 해제할 수 있는가? (강지훈 교수/KAIST 전산학부)
kaistsoftware | 2020.11.23 | 추천 0 | 조회 6763
kaistsoftware 2020.11.23 0 6763
46
11/19 인공지능과 사이버보안 : 水魚之交 (수어지교) (김인중 박사/국가보안기술연구소)
kaistsoftware | 2020.11.16 | 추천 0 | 조회 6427
kaistsoftware 2020.11.16 0 6427
45
11/12 딥러닝 기반 자연어처리 연구 동향 (이창기 교수/강원대 컴퓨터공학과)
kaistsoftware | 2020.11.09 | 추천 0 | 조회 7589
kaistsoftware 2020.11.09 0 7589
44
11/5 Relation Extraction for Knowledge Graph Construction (이경호 교수/연세대 컴퓨터과학과)
kaistsoftware | 2020.10.30 | 추천 0 | 조회 7077
kaistsoftware 2020.10.30 0 7077
43
10/15 Probabilistic Programming (양홍석 교수/KAIST 전산학부)
kaistsoftware | 2020.10.07 | 추천 0 | 조회 8110
kaistsoftware 2020.10.07 0 8110
42
10/8 Mining and Learning with Graphs: Clustering, Hypergraphs, and Representation Learning (황지영 교수/KAIST 전산학부)
kaistsoftware | 2020.10.05 | 추천 0 | 조회 6938
kaistsoftware 2020.10.05 0 6938
41
9/24 Data Augmentation for 3D Vision (김태균 교수/KAIST 전산학부)
kaistsoftware | 2020.09.16 | 추천 0 | 조회 7717
kaistsoftware 2020.09.16 0 7717