Cyfrowy skryba

który naprawdę rozumie Twój charakter pisma muzycznego

Odczytujemy odręczne zadania z harmonii i automatycznie sprawdzamy je pod kątem błędów.

By musicians for musicians
Podaruj swojemu zeszytowi z harmonii drugie życiePomóż nam trenować model i zyskaj bezpłatny dostęp – do 12 miesięcy i więcej!
Uczennica zapisuje nuty ołówkiem, obok laptop z cyfrową transkrypcją i zaznaczonym błędem

Dlaczego odręczne nuty to informatyczny koszmar?

Programy muzyczne od lat świetnie radzą sobie ze sterylnym, generowanym komputerowo drukiem. Kiedy jednak widzą ołówek, skrzywioną pięciolinię i zamazaną główkę nuty – poddają się, uznając to za defekt. Tradycyjne algorytmy wymagają idealnych odstępów typograficznych, a ludzkie pismo łamie wszelkie zasady geometrii.

Odzyskać setki godzin.
Nasz cel

Nauczyciele harmonii w szkołach muzycznych spędzają setki godzin rocznie na żmudnym sprawdzaniu odręcznych prac. Chcemy stworzyć narzędzie, które wykona tę mechaniczną pracę za nich, zdejmując brzemię wprowadzania nut do edytorów cyfrowych. Zamiast marnować czas na rozszyfrowywanie grafitu, nauczyciele będą mogli skupić się na pracy twórczej z uczniem.

Jak to działa

Od pogniecionej kartki do MusicXML.

01

Zwykłe zdjęcie.

Nie potrzebujesz skanera. Wystarczy zwykłe zdjęcie z telefonu. Nasz system sam prostuje perspektywę i izoluje ślad ołówka.

Wejście · zdjęcie z telefonu
Zdjęcie kartki ze szkolnym czterogłosem pisanym ołówkiem
02

Klasyfikacja obiektów przez CNN.

Trenujemy głębokie sieci konwolucyjne do tego, aby rozpoznawały każdą nutę, klucz i krzywą laseczkę oddzielnie, radząc sobie z nakładającym się na siebie atramentem.

Detekcja · klasyfikacja obiektów
To samo zdjęcie z ramkami wokół wykrytych obiektów: nut, kluczy, kresek taktowych i łuków
03

Cyfrowy zapis i inteligentny asystent.

Pojedyncze znaki są łączone w logiczną strukturę na podstawie reguł gramatyki muzycznej. Następnie system bezstratnie transkoduje je do formatu cyfrowego i przepuszcza przez algorytmy sprawdzające poprawność kontrapunktu klasycznego.

Wynik · zapis cyfrowy i weryfikacja
Proof of concept

Zaczynamy od zadań z harmonii.

Dlaczego akurat harmonia? Czterogłos wokalny to idealne, zamknięte środowisko dla sztucznej inteligencji. Z góry znana tonacja, metrum i dokładnie cztery głosy drastycznie redukują przestrzeń błędów systemu. Budujemy na tym nasz fundament (Proof of Concept), aby z czasem skalować model na bardziej złożone, swobodne formy kompozytorskie. Obecnie zbieramy dane do uczenia – każdy dostarczony przez Was zeszyt z harmonii to krok w stronę lepszego algorytmu!

Uczennica przy biurku porównuje zadanie z harmonii w zeszycie z jego cyfrowym zapisem na tablecie, obok stos zeszytów

Chcesz pomóc nam rozwijać Copyisto?

Jesteś nauczycielem lub uczniem, który ma w szafie stare zeszyty z harmonii? Odezwij się do nas!

Za przekazane materiały zbierasz kredyty do wykorzystania w narzędziu. Im więcej przekażesz, tym więcej ich masz. Jak to działa

Napisz e-mail
Podaruj swojemu zeszytowi z harmonii drugie życiePrzez najbliższy miesiąc zbieramy zeszyty we Wrocławiu. W zamian bezpłatny wczesny dostęp – do 12 miesięcy i więcej od uruchomienia narzędzia!

Zespół Copyisto

Michał - zdjęcie

Michał

michalkulbacki.com ↗

Pianista i kompozytor, absolwent kompozycji Akademii Muzycznej we Wrocławiu, obecnie student matematyki. Od 2019 roku inżynier oprogramowania w DIVEINAI, gdzie odpowiada za architekturę i utrzymanie platformy produkcyjnej. Tworzy technologie dla muzyki na żywo, m.in. Agogica.app do synchronizacji muzyków podczas koncertu.

Oleś - zdjęcie

Oleś

kulczewicz.com ↗

Pierwszą aplikację do sprawdzania zadań z harmonii napisał jako pracę inżynierską z informatyki na Uniwersytecie Wrocławskim. Programuje zawodowo od 2017 roku w software house’ach i startupach – od interfejsu po chmurę. Studiuje kompozycję w Akademii Muzycznej we Wrocławiu i sam wykonuje swoje utwory – przy fortepianie i z elektroniką na żywo.

Jesteśmy dwójką inżynierów i muzyków, którzy postanowili rozwiązać problem, o który od lat potykają się największe komercyjne programy muzyczne.