Συντάχθηκε 14-10-2015 12:50
από Esthir Gelasaki
Email συντάκτη: egelasaki<στο>tuc.gr
Ενημερώθηκε:
-
Ιδιότητα: υπάλληλος.
ΠΟΛΥΤΕΧΝΕΙΟ ΚΡΗΤΗΣ
Σχολή Ηλεκτρονικών Μηχανικών και Μηχανικών Υπολογιστών
Πρόγραμμα Προπτυχιακών Σπουδών
ΠΑΡΟΥΣΙΑΣΗ ΔΙΠΛΩΜΑΤΙΚΗΣ ΕΡΓΑΣΙΑΣ
Σοφία Παπαδοπούλου
με θέμα
ΜΕΛΈΤΗ ΚΑΙ ΕΝΣΩΜΑΤΩΣΗ ΕΝΌΣ ΣΥΣΤΗΜΑΤΟΣ ΟΠΤΙΚΗΣ ΑΝΑΓΝΩΡΙΣΗΣ ΜΟΥΣΙΚΉΣ ΣΕ ΛΕΙΤΟΥΡΓΙΚΟ ΣΥΣΤΗΜΑ ANDROID
RESEARCH AND IMPLEMENTATION OF ANDROID BASED OPTICAL MUSIC RECOGNITION
Πέμπτη 15 Οκτωβρίου 2015, 10πμ
Αίθουσα Β1.003, Κτίριο Επιστημών, Πολυτεχνειούπολη
Εξεταστική Επιτροπή
Αναπληρωτής Καθηγητής Ιωάννης Παπαευσταθίου (επιβλέπων)
Καθηγητής Μιχάλης Ζερβάκης
Καθηγητής Απόστολος Δόλλας
Περίληψη
Το κίνητρο πίσω από αυτήν την εργασία ήταν να δώσει ζωή στην μουσική. Είναι μια μεγάλη ευκαιρία για να αναπτυχθεί ένα λογισμικό όπου να μπορεί να παράγει ένα τραγούδι από μια παρτιτούρα σε μία φορητή πλατφόρμα. Προς το παρών, τα αντίστοιχα διαθέσιμα λογισμικά απαιτούν έναν υπολογιστή υψηλής απόδοσης και ένα σαρωτή για να σαρωθούν οι παρτιτούρες. Σε αυτήν την εργασία εξερευνούμε τις τεχνικές που χρησιμοποιούνται για την οπτική αναγνώριση μουσικής από μια τυπωμένη παρτιτούρα και αναπτύσσεται μια εφαρμογή με το όνομα AOMR. Η εφαρμογή AOMR ανανεώνει αυτού του είδους το λογισμικό εφαρμόζοντας το σε μια κινητή πλατφόρμα. Η εφαρμογή αυτή, η οποία αφορά σε μεγάλο βαθμό τεχνικές επεξεργασίας εικόνας και εφαρμογές τεχνητής νοημοσύνης, μπορεί να αναγνωρίσει παρτιτούρες που πρέπει να ερμηνευτούν και να εξαχθούν ως μια μελωδία, ενώ παράλληλα χειρίζεται κατάλληλα τους πόρους μιας συσκευής Android. Μείζοντα ζητήματα όπως η περιορισμένη απόδοση του επεξεργαστή και η χωρητικότητα μνήμης, συμπεριλαμβανομένης και της έλλειψης σχετικών βιβλιοθηκών για την υποστηρίξη μιας τέτοιας επεξεργασίας, θέτουν μια διαφορετική από τις παραδοσιακές προσεγγίσεις που εφαρμόζονται στον τομέα του λογισμικού σε μία τοπική πλατφόρμα. Το εν λόγω πρόγραμμα έχει ως στόχο όχι μόνο να είναι μια απλή εφαρμογή OMR, αλλά και το σημείο εκκίνησης για μια μελλοντική εργασία ώστε να αποτελεί ένα διαδραστικό λογισμικό που απευθύνεται σε επαγγελματίες ως μέρος της δουλειάς τους.
Abstract
As stated on Gerd Castan’s page about OMR,
“Doing OMR is hard. Very hard. If you follow the OMR science links you will find much more theses about OMR than there are public available programs”.
The motivation behind this thesis was to bring music to life. It is a great opportunity to have the software that can instantly produce a song from a sheet music in a course book. Presently, the respective commercial software is mainly available on a desktop platform, which requires a high-performance computer and a scanner to scan a sheet music. This project will survey the different techniques that have been used to perform OMR on printed music scores and an application by the name of AOMR will be developed. AOMR project renovates this kind of software by applying it on a mobile platform instead. This application, which highly involves image processing techniques and artificial intelligence applications, can recognize a scanned image of sheet music to be interpreted and exported as an audible representation via MIDI synthesis while handling resource utilization on an Android mobile phone platform. Limited processing performance and memory capacity, including the lack of image processing and other related APIs, are major issues that cause the algorithms used in the application to be different from traditional approaches applied in software on a PC platform. Such program is meant not only to be a simple OMR application but also the starting point for a future work about specialists having an interactive software to rely on for both as a practical tool for work and educational purposes.
