검색 상세

머신러닝 기반 사운드 생성을 활용한 웹소설 디자인에 관한 연구

Designing a Web Novel with ML-based Generative Sound

초록/요약

전자 출판물이 주목받으면서, 전자 출판물과 시청각을 결합한 연구들이 진행되었다. 관련 연구들은 시청각 효과가 독자의 읽기 경험에 도움을 준다고 설명하였다. 하지만 전자 출판물 시장을 견인하고 있는 웹소설은, 이러한 효과를 제대로 활용하지 못하고 있다. 본 연구에서는 사운드 효과가 적용된 웹소설의 새로운 제작 방안으로, 실시간 디자인 방법을 제안한다. 텍스트 정서 분석 기술로 작품의 감정을 분석한 뒤, 머신러닝 기술을 활용해 감정에 어울리는 음악을 생성한다. 생성된 머신러닝 사운드와 결합한 작품은, 모바일 인터페이스로 구성되어 독자에게 제공된다. 이러한 디자인을 통해 기존의 웹소설보다 높은 읽기 경험 전달을 목표로 한다. 프로토타입을 제작하여, 30명의 사용자에게 기존 웹소설과 비교 실험을 진행하였다. 실험 결과, 프로토타입의 몰입과 일부 만족도에서 긍정적인 반응을 얻을 수 있었고, 머신러닝 기반의 사운드가 작품 감상에 도움이 되었다는 의견을 받을 수 있었다. 위 결과를 토대로, 머신러닝 기술의 활용 가능성을 확인할 수 있었다. 본 연구에서는, 제안하는 디자인에 대한 독자의 반응을 중점적으로 탐구하였지만, 이러한 결과는 곧, 콘텐츠 제작자가 새로운 형태의 작품을 창작할 때도, 머신러닝 기술의 활용이 유용할 수 있음을 의미한다.

more

초록/요약

With electronic publication taking its place as the new forms of reading experience, researches combining electronic publications and audio-visualization have been conducted. Related researches have explained that music can help the viewer’s reading experience. However, web novel, the driving force for this new market of electronic publication, does not fully explore this new possibility. In this research, I introduce the new viewing platform design for web novel using machine-learning generated music. The platform is designed to provide the sound matched to the text using the text sentiment analysis technology. Once the text is on the new platform design, each sentence’s emotion is immediately analyzed with the machine learning technology and music is generated and provided on the needed spots, which enhances the reading experience on the mobile phone interface. I conducted comparative experiments with existing web novels with 30 users. The result of experiment was positive. Most of readers found that the text with the machine learning-based sounds on the new platform design was helpful and enhanced their reading experience. With the result, We can see the possibilities of various applications and amalgamations in machine-learning driven environment. This research only examines the viewer’s exposure and response to the new reading experience, however it can also inspire the content’s creators to explore the new forms and styles with the proactive application of machine-learning technology.

more