노래방 멜로디에서 가장 높은 음과 낮은 음 추출

Question

안녕하세요.노래방과 관련된 사이드 프로젝트를 진행하는 중인데, 노래에서 가수가 부르는 멜로디 내 가장 높은 음과 가장 낮은 음을 추출하는 좋은 방법이 무엇이 있을까요?지금 생각 중인 방법으로는Youtube 노래방 영상 or 음원 링크 -> 반주 제거 -> 음 추출 후 가장 높은 음과 낮은 음을 추출하는 API 구현 (해당 방식은 어떻게 해야할지 감도 안 옵니다, Youtube 영상의 오디오 정보를 분석하는 예제를 구글링해봐도 없습니다 ㅠㅠ)금영노래방이나 TJ노래방 기술팀에 연락해서 알려달라고 하기 (그런데 거기서 해줄 이유는 없습니다)그냥 각 곡마다 가장 높은 음과 낮은 음을 조사하고, 데이터베이스에 추가한 다음, 이러한 방식으로 서비스 내에 등록된 음원 만을 제공하기 (이 경우 노가다가 필요한 작업입니다..)정도가 있습니다.현실적으로는 3번 방식으로 서비스 프로토타입을 구현한 다음, 2번 방식으로 넘어가는 방식 역시 고려 중이기는 합니다.의견과 조언 부탁드리겠습니다! 미리 감사합니다.

캐티 · Answer

요즘 추세는 딥러닝이어요. 2차원적인 웨이브 오디오는 읽으면 파형만 나오는데 가청 대역으로 한정하였다 하더라도 목소리인지 악기 소리인지 구별할 방법이 없지 않나요. 남은 방법은 딥러닝이어요.

더미 · Answer

안녕하세요! 노래방 사이드 프로젝트, 정말 흥미롭네요. 말씀하신 음역 추출 기능은 사용자에게 정말 유용할 것 같습니다. 몇 가지 방법을 더 자세히 살펴보고, 각 방법의 장단점을 비교해 보겠습니다.1. 오디오 분석 기반 접근 방식:장점:자동화: 음원 파일만 있으면 자동으로 음역을 추출할 수 있습니다.정확성: 잘 구현된 알고리즘은 사람이 듣는 것보다 정확하게 음을 식별할 수 있습니다.단점:기술적 난이도: 오디오 신호 처리 및 음악 이론에 대한 이해가 필요합니다.반주 제거: 반주가 있는 음원의 경우, 멜로디만 분리하는 것이 어려울 수 있습니다.API 부재: 말씀하신 대로, 쉽게 사용할 수 있는 API는 아직 없는 것 같습니다.구현 방향:음원 파일 준비: YouTube 영상에서 음원 추출 (youtube-dl 등 활용) 또는 기존 음원 파일 사용반주 제거 (선택 사항): Spleeter, Demucs 등의 오픈 소스 도구 활용음고 추출: Librosa, Essentia, Aubio 등의 라이브러리 활용하여 음고 추출 (Pitch Detection)멜로디 추출 (선택 사항): 음고 정보를 바탕으로 멜로디 라인 추출 알고리즘 구현최고/최저 음역 추출: 추출된 음고 정보에서 최고 및 최저 값을 찾아 음역 표기법 (예: C4, G3)으로 변환2. 악보 데이터 활용:장점:정확성: 악보는 멜로디 정보를 정확하게 담고 있습니다.추가 정보: 조표, 음자리표 등을 활용하여 더 정확한 음역 분석 가능단점:데이터 확보: 모든 곡의 악보 데이터를 구하기 어려울 수 있습니다.악보 분석: 악보 데이터를 분석하는 기술이 필요합니다. (MusicXML, MIDI 등)구현 방향:악보 데이터 확보: 온라인 악보 사이트, 저작권 협회 등에서 악보 데이터 수집 (API 활용 가능 여부 확인)악보 파싱: MusicXML 파서 라이브러리 (MuseScore, Verovio 등) 또는 MIDI 파서 라이브러리 활용음역 정보 추출: 파싱된 악보 데이터에서 멜로디 라인의 음표 정보를 추출하여 최고/최저 음역 계산3. 크롤링 및 데이터베이스 구축:장점:간단한 구현: 웹 크롤링 기술만 있으면 비교적 쉽게 구현 가능범용성: 다양한 음원 정보 사이트에서 데이터 수집 가능단점:저작권 문제: 음원 정보 사이트의 데이터를 무단으로 사용하는 것은 저작권 문제가 발생할 수 있습니다.데이터 정확성: 크롤링한 데이터의 정확성을 보장하기 어렵습니다.구현 방향:음원 정보 사이트 선정: 음역 정보를 제공하는 사이트 선정 (저작권 문제 고려)크롤링: BeautifulSoup, Scrapy 등의 라이브러리를 활용하여 음역 정보 크롤링데이터베이스 구축: 크롤링한 데이터를 정리하여 데이터베이스에 저장4. 기존 노래방 서비스 API 활용:장점:쉬운 구현: API만 연동하면 간편하게 음역 정보를 얻을 수 있습니다.단점:API 제약: 모든 노래방 서비스가 API를 제공하는 것은 아니며, 제약 사항이 있을 수 있습니다.비용: API 사용에 비용이 발생할 수 있습니다.구현 방향:API 제공 업체 조사: 음역 정보 API를 제공하는 노래방 서비스 업체 조사API 연동: 해당 업체의 API 문서를 참고하여 API 연동결론:어떤 방법이 가장 좋을지는 프로젝트의 목표, 예산, 기술 역량 등에 따라 달라질 수 있습니다.정확성과 자동화를 최우선으로 한다면: 오디오 분석 기반 접근 방식이나 악보 데이터 활용 방식을 고려해 볼 수 있습니다. 하지만 기술적인 난이도가 높다는 점을 염두에 두어야 합니다.빠르고 간단하게 구현하고 싶다면: 크롤링이나 기존 서비스 API 활용 방식을 고려해 볼 수 있습니다. 하지만 데이터 정확성이나 저작권 문제 등에 유의해야 합니다.각 방법의 장단점을 잘 비교하여 프로젝트에 가장 적합한 방식을 선택하시길 바랍니다. 궁금한 점이 있으면 언제든지 다시 질문해주세요!

노래방 멜로디에서 가장 높은 음과 낮은 음 추출

2개의 답변

Q&A 목록