Δημιουργήστε Μουσική και Ηχητικά Εφέ από μια Περιγραφή Κειμένου!

Κοινοποίηση:

Τον τελευταίο καιρό έχουμε δει πολλές Α.Ι. εφαρμογές που μας δίνουν την δυνατότητα να δημιουργήσουμε εικόνες από μια απλή περιγραφή κειμένου. 

Πλέον έχουμε την δυνατότητα να δημιουργήσουμε και μουσική ή ηχητικά εφέ από μια περιγραφή κειμένου!

Η Meta δημοσιοποίησε τα μοντέλα MusicGen και AudioGen για να δημιουργούμε μουσική και ήχους από κείμενο αντίστοιχα.

Τα MusicGen και AudioGen είναι προ-εκπαιδευμένα μοντέλα και ανήκουν στην βιβλιοθήκη AudioCraft την οποία η Meta διαθέτει ως λογισμικό ανοιχτού κώδικα.

Τα μοντέλα βασίζονται στην αρχιτεκτονική των transformers. Την ίδια αρχιτεκτονική δηλαδή που κρύβεται πίσω από τα μεγάλα γλωσσικά μοντέλα όπως το GPT-4.

Αυτό είναι ένα παράδειγμα ενός σύντομου hip hop beat από το MusicGen

MusicGen – Dark Emotional HipHop beat with strings and synth

Μπορείτε να δοκιμάσετε την εφαρμογή κατευθείαν από αυτή τη σελίδα:


Οδηγίες MusicGen:

  • Γράφετε την περιγραφή της μουσικής που θέλετε στο πεδίο “Describe your music”
  • Επιλέγετε την διάρκεια σε δευτερόλεπτα “Duration (s)”
  • Προαιρετικό: Μπορείτε να ανεβάσετε ένα αρχείο ήχου σαν οδηγό για την επιθυμητή μελωδία
  • Πατήστε το κουμπί “Generate”

Οδηγίες AudioGen:

  • Γράφετε την περιγραφή του ήχου στο πεδία “Input Text”
  • Επιλέγετε την διάρκεια σε δευτερόλεπτα “Duration”
  • Πατήστε το κουμπί “Submit”

Παραδείγματα MusicGen

Dark emotional Hip Hop beat with strings and synth

MusicGen – Dark emotional Hip Hop beat with strings and synth

Joyful background music with soft piano, 70 bpm

MusicGen – “Joyful background music with soft piano, 70 bpm”

Ambient space background music with strings

MusicGen – “Ambient space background music with strings”

Παραδείγματα AudioGen

Spaceship liftoff

AudioGen – “Spaceship liftoff”

A pig jumping into muddy paddles

AudioGen – “A pig jumping into muddy paddles”

A pencil writing on hard paper

AudioGen – “A pencil writing on hard paper”