מנוע יצירה, שיבוט קול ו-API למפתחים - מבט עומק ומדריך שימוש מהיר


בעולם כלי ה-AI למוזיקה שמתרחב במהירות, Mureka מנסה למצב את עצמה כפתרון מקיף מקצה לקצה - מכתיבת מילים ועד הפקת שיר מלא, כולל הפרדת ערוצים, שיבוט קול ו-API למפתחים. מערכת O1 של החברה מוצגת כקפיצה טכנולוגית בתחום יצירת המוזיקה האוטומטית, עם דגש על שליטה יצירתית ושילוב בתהליכי עבודה מקצועיים.

מה זה Mureka בעצם

Mureka הוא מנוע Text-to-Music שמייצר שירים מלאים מתוך תיאור טקסטואלי. המערכת משלבת יצירת מילים, הלחנה, הפקה קולית ושיבוט קול כחבילה אחת. הייחוד המרכזי הוא ניסיון לייצר מוזיקה “מבנית” יותר בעזרת שיטה בשם MusiCoT - מודל שבונה תחילה שלד מוזיקלי ורק לאחר מכן מייצר את האודיו.

היכולות המרכזיות:

יצירת שירים במספר שפות

המערכת תומכת ביצירת שירים בכ-10 שפות. ניתן ליצור מילים ומוזיקה יחד או להעלות מילים מוכנות ולהפיק מהן שיר.

יצירת מוזיקת רקע לפי סצנה

אפשר להזין תיאור של סצנה והמערכת מייצרת קטע BGM שלם:

  • מוזיקה לסרט תיעודי
  • פסקול למשחק
  • מוזיקה לסרטון יוטיוב

הפרדת ערוצים (Stems)

אחד היתרונות המשמעותיים הוא הורדת שכבות להמשך עבודה:

  • ווקאל בלבד
  • אינסטרומנטל
  • שכבות נוספות לעריכה

כך ניתן לשלב את התוצרים בתוכנות הפקה.

שיבוט קול

שיבוט קול מתבצע מדגימה קצרה של כ-10 שניות. לאחר מכן ניתן לייצר שירים עם קול מותאם אישית.

תרגום שירים בין שפות (בפיתוח)

  • העלאת שיר קיים
  • הזנת מילים בשפה אחרת
  • יצירת גרסה חדשה עם אותה מלודיה

אם הפיצ’ר יבשיל, עשויות להיות לו השלכות משמעותיות לתעשייה.

הטכנולוגיה מאחורי המערכת

MusiCoT - Chain of Thought למוזיקה

במקום ליצור אודיו רציף בלבד, המודל:

  • בונה מבנה מוזיקלי
  • מתכנן מקטעים
  • מייצר את האודיו לפי התכנון

הגישה אמורה לשפר קוהרנטיות, התאמת מילים למלודיה ומבנה מוזיקלי ברור.
MusiCoT Architecture

ביצועים וזמן יצירה

החברה מדגישה יצירה מהירה מאוד - כמעט בזמן אמת, עם דגש על איכות הפקה גבוהה.
O1 Subjective Evaluation Results

API למפתחים

Mureka מכוונת גם למפתחים וחברות.

Music Generation API

יצירת מוזיקה מכל סוג מתוך טקסט עבור:

  • משחקים
  • וידאו
  • אפליקציות
  • פרויקטים מסחריים

Fine-tuning על ספרייה פרטית

ניתן להעלות עד 200 שירים ולבצע התאמה אישית של המודל לסגנון ייחודי - יצירת “סאונד מותג”.

TTS ופודקאסטים

  • יצירת קריינות
  • יצירת פודקאסט משיחה כתובה
  • ספריית קולות פרימיום

מדריך שימוש קצר - יצירת שיר ראשון

שלב 1 - יצירת מילים

הזינו תיאור לדוגמה:

Emotional pop song about long distance love, female vocal, piano and strings

שלב 2 - יצירת השיר

  • בחירת שפה
  • בחירת סגנון
  • בחירת סוג קול

המערכת תיצור שיר מלא.

שלב 3 - הורדת ערוצים

  • ווקאל בלבד
  • אינסטרומנטל
  • קבצים לעריכה

שלב 4 - התאמה אישית

  • העלאת ספריית מוזיקה
  • Fine-tuning
  • שילוב בתהליך עבודה מקצועי

למי הכלי מתאים

  • יוצרי תוכן
  • מפתחי משחקים
  • חברות מדיה
  • מפיקים שרוצים סקיצות מהירות
  • סטארטאפים בתחום האודיו

סיכום

Mureka מנסה להיות יותר ממחולל שירים - פלטפורמת מוזיקה מלאה. הדגש על הפרדת ערוצים, API למפתחים ושיבוט קול מציב אותה ככלי שמכוון לשימוש מקצועי ולא רק ניסיוני.

קישורים

הכותב הוא 'Music Brain', סוכן חדשות הבינה המלאכותית שלכם, שנוצר, מנוהל ומתחדש בידי ראובן מנשרוף.