CGnA@Yonsei

The research conducted at Computer Graphics and Applications (CGnA) Lab in Yonsei University is centered around exploring innovative methods of interaction between various forms of media content, such as visual and audio elements. Their research interests span across a diverse range of fields, including computer graphics, virtual and augmented reality, music technology, and human-computer interaction, among others.

연세대학교 컴퓨터그래픽스연구실에서는 시각 및 청각 요소와 같은 다양한 형태의 미디어 콘텐츠 간의 혁신적인 상호 작용 방법을 탐구하는 데 중점을 두고 연구를 진행하고 있습니다. 컴퓨터 그래픽스, 가상 및 증강 현실, 음악기술, 인간과 컴퓨터의 상호작용 등 다양한 분야에 걸쳐 연구하고 있습니다.

Click to more news

Search

Two papers from CGnA were presented at the prestigious IEEE ISMAR 2024 conference (Seattle; 24.10.21 - 24.10.25). The paper co-authored by Hyunjung Kim and In-Kwon Lee, “Is 3DGS Useful?: Comparing the Effectiveness of Recent Reconstruction Methods in VR” was presented at IEEE ISMAR 2024, and ‘MARR: A Multi-Agent Reinforcement Resetter for Redirected Walking’, co-authored by Ho Jung Lee, Sang-Bin Jeon, Yong-hun Cho, and In-Kwon Lee, was invited to present at the same conference after being published in IEEE TVCG. Congratulations to all the researchers on their achievements!

CGnA의 두 논문이 저명한 학술대회 IEEE ISMAR 2024 학술대회 (Seatle; 24.10.21 - 24.10.25) 에서 발표되었습니다. 김현정과 이인권이 공동 저술한 논문, "Is 3DGS Useful?: Comparing the Effectiveness of Recent Reconstruction Methods in VR"이 IEEE ISMAR 2024에서 발표되었고, 이호정, 전상빈, 조용훈, 이인권이 공동 저술한 논문 "MARR: A Multi-Agent Reinforcement Resetter for Redirected Walking"은 IEEE TVCG에 게재 이후 동 학술대회에 초청 발표되었습니다. 모든 연구진의 성과를 축하합니다!

Research Highlights: 3DGS and Multi-Agent Resetter Innovations Presented at IEEE ISMAR 2024

On October 18, 2024, the EVOVA VR team in CGnA won the grand prize at the “2024 Metaverse Developer Contest” hosted by the Ministry of Science and ICT and jointly organized by the Korea Radio Promotion Association, the Korea Metaverse Industry Association, and the Information and Communication Industry Promotion Agency. The grand prize includes a certificate and a cash prize of 10 million won. The EVOVA VR is a team of doctoral and master's researchers in CGnA's lab and participated in this development contest based on the theme of “VR Showroom utilizing 3DGS”.

2024년 10월 18일 과학기술정보통신부가 주최하고 한국전파진흥협회, 한국메타버스산업협회, 정보통신산업진흥원이 공동으로 주관한 "2024년도 메타버스 개발자 경진대회"에서 CGnA 연구실내 EVOVA VR 팀이 최우수상을 수상하였습니다. 최우수상에는 상장과 상금 1000만원이 각각 주어집니다. EVOVA VR은 CGnA 연구실 내 박사 및 석사 연구원으로 구성된 팀으로 "3DGS를 활용한 VR Showroom" 이라는 주제를 바탕으로 이번 개발경진대회에 참여하였습니다.

CGnA and EVOVA VR win the grand prize at the “2024 Metaverse Developer Contest” hosted by the Ministry of Science and ICT.

Dohae Lee's paper "ClothCombo: Modeling Inter-Cloth Interaction for Draping Multi-Layered Clothes" won the CLO Paper Award at the Korea Computer Graphics Society (KCGS) 2024 conference held at Sonobell, Gyeongju for three days from July 9. The paper was also selected as the best paper representing the College of Computing at the Yonsei University Graduate Innovation Award for the first semester of the 2024 academic year. This paper proposes the novel graph neural network (GNN) model that drapes multiple layers of 3D clothing on a 3D human avatar. It was presented at the SIGGRAPH-ASIA '23 conference in Australia in December 2023 and published in ACM Transactions on Graphics, the top journal in the field of computer graphics.

이도해의 논문 "ClothCombo: Modeling Inter-Cloth Interaction for Draping Multi-Layered Clothes"가 지난 7월 9일부터 3일간 경주 소노벨에서 열린 한국컴퓨터그래픽학회 2024 학술대회에서 CLO 논문상을 수상했습니다. 이 논문은 또한 2024년 1학기 연세대학교 대학원 혁신 우수 논문상 중 인공지능융합대학 단과대학 최우수 논문으로 선정되었습니다. 이 논문은 3D 인간 아바타에 여러 겹의 3D 옷을 입히는 세계 최초의 그래프 신경망(GNN) 모델을 제안하였습니다. 2023년 12월 호주에서 열린 SIGGRAPH-ASIA '23 컨퍼런스에서 발표되었으며, 컴퓨터 그래픽스 분야 최고 저널인 ACM Transactions on Graphics에 게재되었습니다.

Twin Honors for Groundbreaking Multi-Layered Clothing Model: Awarded by CLO and Yonsei University Graduate School

At the IEEE VR 2024 conference held in Orlando, USA last March, the paper "Redirection Strategy Switching: Selective Redirection Controller for Dynamic Environment Adaptation" presented by Ho Jung Lee and others won the Best Paper award. This award was given to six excellent papers within 1% of all papers submitted to this conference.

이호정 등이 지난 3월 미국 올란도에서 개최된 IEEE VR 2024 학술대회에서 발표한 paper "Redirection Strategy Switching: Selective Redirection Controller for Dynamic Environment Adaptation" 가 Best Paper 상을 수상하였습니다. 이 상은 이 학술대회에 submit 되었던 모든 논문들 가운데 1% 이내의 우수한 논문들 6편에게 주어졌습니다.

Awarded Best Paper at IEEE VR 2024

A groundbreaking research aimed at enhancing the immersive experience for virtual reality (VR) users has recently been published in the IEEE Transactions on Visualization and Computer Graphics, a top-tier journal in the field of computer graphics. Conducted by researchers from South Korea, Sang-Bin Jeon, Jaeho Jung, Jinhyung Park, and In-Kwon Lee, the study titled "F-RDW: Redirected Walking with Forecasting Future Position" introduces a novel mechanism to overcome the limitations of existing Redirected Walking (RDW) techniques that often require specific preconditions related to the layout of the virtual environment or the direction of the user’s walk.

가상현실(VR) 사용자의 몰입감을 높이기 위한 획기적인 연구가 최근 컴퓨터 그래픽 분야 최고 권위의 학술지인 IEEE Transactions on Visualization and Computer Graphics 저널에 게재되었습니다. CGNA 구성원인 전상빈, 정재호, 박진형, 이인권이 수행한 'F-RDW: 미래 위치 예측을 통한 방향 전환 보행'이라는 제목의 이 연구는 가상 환경의 레이아웃이나 사용자의 보행 방향과 관련된 특정 전제 조건이 필요한 기존 방향 전환 보행(RDW) 기술의 한계를 극복하기 위한 새로운 메커니즘을 소개했습니다.

Revolutionizing VR Experiences: Introducing the Predictive Redirected Walking Technique, F-RDW

The paper, "MARR: A Multi-Agent Reinforcement Resetter for Redirected Walking," co-authored by Ho Jung Lee, Sang-Bin Jeon, Yong-Hun Choi, and In-Kwon Lee, has been accepted by the top-tier journal “IEEE Transactions on Visualization and Computer Graphics”. The paper investigates how to determine the optimal direction after reset when multiple users are using a redirected walking technique to experience a virtual environment while sharing a single physical space.

이호정, 전상빈, 조용훈, 이인권이 공동 집필한 paper, "MARR : A Multi-Agent Reinforcement Resetter for Redirected Walking," 이 top-tier journal인 IEEE Transactions on Visualization and Computer Graphics에 accept되었습니다. 이 논문은 다수의 사용자가 하나의 물리적 공간을 공유한 채 가상 환경을 경험할 때 방향 전환 보행 기법을 사용하는 경우 reset 후의 최적 방향을 결정하는 방법을 연구한 연구입니다.

Breaking Boundaries in VR: New Study on Multi-Agent Resetter Accepted by Prestigious Journal

Dr. Hayeon Kim, who received her Ph.D. in August 2023 through an integrated master's and doctoral program in CGNA's lab, has been appointed as an assistant professor at Dankook University (Jukjeon Campus) as of March 1, 2024. During her studies, Dr. Kim conducted various research and projects specialized in virtual reality and published her research in top-tier journals and conferences, including IEEE Transactions on Multimedia, IEEE Transactions on Visualization and Computer Graphics, IEEE ISMAR Journal Track, and SIGGRAPH 2022. Dr. Hayeon Kim has been doing outstanding research as a postdoc in CGNA lab from September 2023 to February 2024.

CGNA 연구실에서 석박통합과정을 거쳐 2023년 8월 박사학위를 취득한 김하연 박사가 2024년 3월 1일자로 단국대학교 (죽전 캠퍼스) 소프트웨어 학과에 조교수로 임용되었습니다. 김하연 박사는 재학 중 virtual reality에 특화된 다양한 연구와 프로젝트를 수행하였으며, 특히, IEEE Transactions on Multimedia, IEEE Transactions on Visualization and Computer Graphics, IEEE ISMAR Journal Track, SIGGRAPH 2022 등 top-tier journal 과 conference에 연구결과를 발표한 바 있습니다. 김하연 박사는 2023년 9월 부터 2024년 2월까지 CGNA 연구실에서 postdoc으로 뛰어난 연구를 수행해 온 바 있습니다.

Dr. Hayeon Kim's Rise to Assistant Professorship at Dankook University

The following two papers have been finally accepted for the IEEE VR 2024 conference journal track:

Ho Jung Lee, Sang-Bin Jeon, Yong-Hun Cho, In-Kwon Lee, "Redirection Strategy Switching: Selective Redirection Controller for Dynamic Environment Adaptation"

Hyunjeong Kim, Sang-Bin Jeon, In-Kwon Lee, "Locomotion Techniques for Dynamic Environments: Effects on Spatial Knowledge and User Experiences"

Both papers will be presented at IEEE VR 2024, March 16-21, 2024 in Orlando, USA, and simultaneously published in IEEE Transactions on Visualization and Computer Graphics, a top-tier journal in the field of computer graphics.

아래 두 개의 paper들이 IEEE VR 2024 conference journal track에 최종 accept 되었습니다:

Ho Jung Lee, Sang-Bin Jeon, Yong-Hun Cho, In-Kwon Lee, "Redirection Strategy Switching: Selective Redirection Controller for Dynamic Environment Adaptation"

Hyunjeong Kim, Sang-Bin Jeon, In-Kwon Lee, "Locomotion Techniques for Dynamic Environments: Effects on Spatial Knowledge and User Experiences"

두 paper는 2024년 3월 16일에서 21일 까지 미국 올란도에서 열리는 IEEE VR 2024에서 발표되며, 동시에 computer graphics 분야 top-tier journal인 IEEE Transactions on Visualization and Computer Graphics에 게재됩니다.

Innovative Research in Virtual Reality: Two Papers Accepted at IEEE VR 2024 Journal Track

The article "ClothCombo: Modeling Inter-Cloth Interaction for Draping Multi-Layered Clothes" authored by Dohae Lee, Hyun Kang, and In-Kwon Lee is accepted for publication in the journal track of the SIGGRAPH-ASIA 2023 conference. This conference is a highly renowned event in the field of computer graphics and will take place in December 2023 in Sydney, Australia. The paper introduces ClothCombo, which is a pipeline designed for draping various clothing combinations on 3D human models with different body postures and types. GNN-based networks are utilized to model interactions between various layers of clothing, allowing for the development of multi-layer apparel in an efficient manner. The paper will be published concurrently with the conference presentation in the premiere journal in computer graphics, ACM Transactions on Graphics.

Link to publication

이도해, 강현, 이인권이 공동 집필한 paper "ClothCombo: Modeling Inter-Cloth Interaction for Draping Multi-Layered Clothes" 가 SIGGRAPH-ASIA 2023 학술대회의 journal track에 최종 accept 되었다. 이 학술대회는 computer graphics 분야에서 가장 권위있는 학술대회 중의 하나로서 2023년 12월 호주의 Sydney에서 개최된다. 이 paper는 다양한 체형과 포즈를 가진 3D 인간 모델에 임의의 옷 조합을 입히는 파이프라인인 “클로스콤보(ClothCombo)” 를 소개하고 있다. GNN 기반 네트워크를 활용하여 여러 겹의 옷 사이의 상호작용을 효율적으로 모델링함으로써 다중 레이어 의류를 구현할 수 있도록 하였다. 이 paper는 학술대회 발표와 동시에 computer graphics 분야의 최고 권위 학술지인 ACM Transactions on Graphics에도 동시에 게재될 예정이다.

Final acceptance to SIGGRAPH-ASIA 2023 Journal Track

2023년 9월 12일 연세대학교와 특허청이 공동으로 주관한 대학원생 창업경진대회에서 CGnA 연구실내 VBody 팀이 최우수상을 수상하였습니다. VBody팀은 CGnA 연구실 내 박사 및 석사 연구원으로 구성된 팀으로 이번 창업경진대회에 참여하였습니다.

CGnA and VBody win the grand prize at the graduate student startup competition jointly hosted by the Korean Intellectual Property Office and Yonsei University.

CGnA 연구실의 창업팀 MeTown이 2023년 8월 22일 Plug&Play 창업 캠프 2023에서 최우수상을 수상하였습니다. 본 행사는 연세대학교 창업지원단과 연세대학교 기술지주회사에서 주관한 행사로 제주도에서 진행되었으며 CGnA 연구실의 박사 및 석사 구성원으로 이뤄진 MeTown팀이 본 행사에 참석하였습니다.

CGnA and the Metown team win the grand prize at the graduate school innovation project Plug&Play Startup Camp 2023.

Hayeon Kim, Jinhyung Park, and In-Kwon Lee's paper ""To Be or Not to Be Me?": Exploration of Self-Similar Effects of Avatars on Social Virtual Reality Experiences" has been accepted for the journal track of the 22nd IEEE International Symposium on Mixed and Augmented Reality (ISMAR) conference. The paper will be presented at the ISMAR 2023 conference in Sydney, Australia, October 16-20, and will be published in the IEEE Transactions on Visualization and Computer Graphics, a top-tier journal in computer graphics. The paper is the first to analyze in-depth the different experiences users have with avatars that are similar to them versus avatars that are not similar to them in a social VR environment. When using self-similar avatars, users experienced a higher sense of embodiment and social presence. On the other hand, presence, an important aspect of the VR experience, was not significantly related to the self-similarity of the avatar. Furthermore, self-similar avatars were found to decrease immersion, another important aspect of the VR experience. This could be due to increased self-awareness, which makes people more cautious of their behavior, which inhibits immersion. In addition, it was found that the voice similarity of the avatar was more important to the VR experience than the visual similarity.

김하연, 박진형, 이인권의 paper "“To Be or Not to Be Me?": Exploration of Self-Similar Effects of Avatars on Social Virtual Reality Experiences” 가 제 22회 IEEE International Symposium on Mixed and Augmented Reality (ISMAR) 학술대회의 저널 트랙에 최종 accept되었다. 이 paper는 오는 2023년 10월 16일부터 20일까지 호주 시드니에서 열리는 ISMAR 2023 학술대회에서 발표되는 동시에 computer graphics분야의 top-tier journal인 IEEE Transactions on Visualization and Computer Graphics에 게재될 예정이다. 이 논문은 social VR 환경에서 사용자와 유사한 아바타와 유사하지 않은 아바타를 사용했을 때 사용자의 다양한 경험을 심도있게 분석한 최초의 연구 결과를 담고 있다. 자기와 유사한 아바타를 사용할 때 사용자는 높은 구체화 (embodiment) 감각과 사회적 존재감을 느낄 수 있었다. 반면에 VR 경험에서 중요한 요소인 현존감 (presence) 은 아바타의 자기 유사성 여부와 큰 상관이 없었다. 게다가 자기 유사 아바타는 VR 경험의 또다른 중요 요소인 몰입감 (immersion) 을 오히려 저하시키는 것으로 나타났다. 이는 자기 인식 (self-awareness) 이 높아지면서, 남들 눈에 비치는 자신의 행동을 조심하게 되며, 이것이 몰입감을 저해하는 것으로 해석된다. 또한 아바타의 자기 유사성 중 비주얼 적인 요소보다는 오히려 음성의 유사성 여부가 VR 경험에 가장 중요한 영향을 미치는 것으로 해석되었다.

Final acceptance to ISMAR 2023 Journal Track

The CGnA Lab, along with its startup company, MeTown, has been chosen for a three-year project aimed at supporting university-based metaverse research and development labs. This initiative is sponsored by the South Korean Ministry of Science and ICT and administered through the Korea Association of Promotion of Radio Waves.

Under the project, the CGnA Lab will receive government research funding of KRW 200 million annually to work on the development of a "Metaverse Fashion XR Platform based on Human and Clothing Reconstruction." The project promises to advance the development of the metaverse, a virtual environment where users can interact in real-time with each other and with digital objects.

The CGnA Lab's selection for the project is a testament to its cutting-edge research and development in the field of metaverse technology. The Lab and its partner, MeTown, are set to bring their expertise in human and clothing reconstruction to the project, which will likely have far-reaching implications for the future of the metaverse.

CGnA 연구실이 메타버스 랩 지원사업에 선정 되었습니다. 이 사업은 한국 과학기술정보통신부가 한국전파진흥협회를 통해 대학의 메타버스 관련 연구 개발 연구실을 지원하는 사업입니다. CGnA 연구실은 연구실내 스타트업인 미타운과 함께 "인체 및 의류 복원 기반 메타버스 페션 XR 플랫폼 개발" 이라는 주제로 3년간 사업에 참여하며, 매년 2억원의 정부출연 연구비를 지원받게 됩니다.

CGnA and MeTown Win Three-Year Funding for Metaverse Fashion Platform Development

On March 15, 2023, "MeTown," which was founded in our research lab, completed its official incorporation process. After a preparation period of over three years, MeTown was established as a subsidiary of Yonsei University Technology Holdings, and Jeon Sangbin, who has played a key role as a team member alongside Lee Dohae, who has been continuously involved as a core member, took on the role of CEO. MeTown has meticulously planned for the short and long term to achieve its goal of realizing the full-scale service of its mobile virtual fitting room, which it has been preparing for so long, within this year. Let us watch the ambitious growth of these pioneers, who started the lab's first startup.

지난 2023년 3월 15일 우리 연구실에서 창업한 "MeTown" 이 정식으로 법인 설립을 마쳤습니다. 지난 3년여간의 준비 과정을 거쳐 연세대학교 기술지주회사의 자회사로 설립된 MeTown에는 그동안 계속해서 핵심 멤버로 참여해 온 이도해와 함께 팀메이트로 핵심 역할을 해온 전상빈이 대표를 맡아 운영하게 되었습니다. MeTown은 그동안 준비했던 mobile virtual fitting room의 본격적인 서비스를 올해 안에 실현하는 것을 목표로 장단기의 구체적인 기획을 빈틈없이 마련하여 준비하였습니다. 연구실 창업 1호로 야심차게 시작한 이들의 본격적인 성장을 지켜 보기로 합시다.

“MeTown” incorporation completed.

Professor In-Kwon Lee has been awarded the Excellence Teaching Professor Award. This award was given based on his outstanding performance in the year of 2022 as evaluated through his lectures. He is one of the four professors from the College of Computing who have received this prestigious award.

이인권 교수가 2022년도 연세대학교 우수강의 교수상을 수상했다. 이번 시상은 2022년 한해 이루어진 강의평가를 바탕으로 선정되었으며, 인공지능융합대학에서는 총 4명의 교수가 수상했다.

In-Kwon Lee awarded the Excellence Teaching Professor Award in Yonsei

The image above is the original version of the CGnA Homepage's cover image, "Giraffes in the City." This artwork was initially created in a smaller format in a traditional oil painting style, as part of a video painting paper published by Professor Jong-Cheol Yoon, who received his Ph.D. in 2012 from the CGnA lab. The Dally-2 AI engine then utilized the outpainting technique to enlarge the painting and produce the final version.

위의 이미지가 CGnA Homepage의 cover image “Giraffes in the City” (도시의 기린들) 입니다. 이 그림은 원래 지난 2012년 CGnA 연구실에서 박사학위를 받은 윤종철 교수(강원대)가 publish한 video painting paper를 위해 만들었던 유화 스타일의 작은 output으로 부터 시작되었습니다. 그것을 Dally-2 AI engine이 outpainting 기법을 이용하여 크게 그려낸 것입니다.

Here is the original image:

원본은 다음과 같습니다:

The Dalle-2 AI Image generator’s outpainting tool drew all of the surrounding backgrounds and objects based on the above image. It’s amazing!

Dalle-2 AI Image generator의 outpainting tool을 이용하여 위의 단순한 기린 얼굴 이미지를 시작으로 주위의 모든 배경과 오브젝트들을 그려내었습니다. 놀랍지 않은가요?

“Giraffes in the City”, Created Using Dalle-2’s Out-Painting Technology

From February 1st to 3rd, 2023, ten members of CGnA Lab including graduate students and interns attended the HCI Korea 2023 academic conference held at High1 Resort in Jeongseon-gun, Gangwon Province in Korea. At this conference, our lab presented a total of three papers.

2023년 2월 1일 부터 3일까지 강원도 정선군의 하이원리조트에서 열린 HCI Korea 2023 학술대회에 CGnA Lab의 대학원생과 인턴들 모두 10명이 참석하였다. 이번 학술대회에는 우리 연구실에서 총 세편의 paper를 발표하였다.

Attending HCI Korea 2023 conference

MeTown, the startup team from CGnA Lab, won first place at the Yonsei University Graduate School Promising Startup Club Achievement Presentation held on January 9, 2023. The event was hosted by the Yonsei University Startup Support Team. MeTown team is scheduled to establish a subsidiary of Yonsei University's technology holding company in the spring of 2023.

CGnA Lab의 창업팀 MeTown이 2023년 1월 9일 열린 연세대학교 대학원 유망창업동아리 성과발표회에서 1등을 수상했다. 이 행사는 연세대학교 창업지원단이 개최하였다. MeTown 팀은 2023년 봄 연세대학교 기술지주회사 자회사로 설립될 예정이다.

MeTown, First place at Yonsei University Graduate Startup Achievement

At the awards ceremony for outstanding graduate theses innovation held on January 3, 2023, Jeon Sang-bin, a master's student at CGnA, won the Best Paper Award in the College of Computing. This year, a total of 11 Yonsei University graduate students, one from each college, were awarded the prize for publishing papers during the year 2022. The awarded paper titled "Dynamic Optimal Space Partitioning for Redirected Walking in Multi-user Environment" was presented at SIGGRAPH 2022 and published in the ACM Transactions on Graphics journal. Congratulations to Sang-Bin.

2023년 1월 3일에 열린 대학원혁신우수논문 시상식에서 CGnA의 전상빈 (석사과정) 학생이 인공지능융합대학 최우수 논문상을 수상하였습니다. 이번 논문상은 2022년 한해 동안 논문을 출간한 연세대학교 대학원생 중에 각 단과대학에서 1인씩 총 11명이 수상하였습니다. 해당 논문은 SIGGRAPH 2022에서 발표하고 ACM Transactions on Graphics 저널에 실린 "Dynamic Optimal Space Partitioning for Redirected Walking in Multi-user Environment" 입니다. 전상빈에게 축하를 보냅니다.

Sang-Bin Jeon awarded Graduate School Innovation Excellent Thesis Prize

Computer Graphics and Applications Laboratory, Department of Computer Science, College of Computing, Yonsei University