Meta เปิดตัว AudioCraft เครื่องมือ Generative AI สร้างเพลง เปิดกว้างให้เทรน model ของตัวเองได้

  • 11
  •  
  •  
  •  
  •  

หลังจากโลกได้ตื่นเต้นกับ Generative AI รูปแบบต่างๆทั้ง LLM เอไอรูปแบบนักภาษาศาสตร์อย่าง ChatGPT รวมถึงเอไอนักสร้างภาพอย่าง Dall-E, Midjourney หรือ Stable Diffusion มาก่อนหน้านี้แล้ว ล่าสุด Meta เปิดตัวเอไอที่สามารถสร้างเพลง สร้างเสียงประกอบ รวมถึงโมเดลที่สามารถบีดอัดไฟล์เสียงโดยไม่สูญเสียคุณภาพออกมาให้เราได้ใช้กันแล้วภายใต้ชื่อ AudioCraft เอไอที่ Meta ระบุว่า จะช่วยให้นักดนตรีสามารถเรียบเรียงดนตรีแบบใหม่ๆได้โดยไม่ต้องเล่นเครื่องดนตรี หรือแม้แต่เจ้าของธุรกิจ SME สามารถใส่เสียงประกอบลงในคลิปวิดีโอที่เผยแพร่ผ่าน อินสตาแกรมได้อย่างง่ายดาย

AudioCraft ประกอบไปด้วยเอไอ 3 โมเดลด้วยกันคือ

  1. MusicGen : โมเดลสร้างเพลงจากข้อความ text Promt ที่ทาง Meta เทรนจากเพลงลิขสิทธิ์ของ Meta เองสามารถสร้างเพลงได้จากข้อความเช่น “An 80s driving pop song with heavy drums and synth pads in the background”, “A cheerful country song with acoustic guitars” หรือ “90s rock song with electric guitar and heavy drums” เป็นต้น
  2. AudioGen : โมเดลเอไอที่สามารถสร้างเสียงซาวด์เอฟเฟกต์ต่างๆเช่น เสียงสุนัชเห่า เสียงแตรรถยนต์ เสียงเดินบนพื้นไม้ ฯลฯ ได้จากข้อความ Text Promt โดย Meta เผยแพร่ Code เอาไว้เพื่อให้นำไปใช้เทรนโมเดลของตัวเองได้
  3. EnCodec : เป็นโมเดลเอไอที่สามารถบีดอัดไฟล์เสียงโดยไม่สุญเสียคุณภาพ สามารถบีบอัดไฟล์ได้มากกว่า MP3 ได้ถึง 10 เท่า สามารถพัฒนานำไปใช้งานได้ในหลากหลายรูปแบบ

เครื่องมือ AI ทั้ง 3 ตัวนี้โดยเฉพะ MusicGen นี้ทาง Meta ออกแบบหน้าตาให้ใช้งานง่ายขึ้นกว่า AI อื่นๆที่เคยมีมาก่อนหน้านี้ สามารถสร้างเพลงของขึ้นใหม่ได้จากโมเดลที่ทาง Meta เทรนจากเพลงของ Meta เอง นอกจากนี้ยังสามารถสร้าง Sound Effect ต่างๆได้เพื่อนำไปใช้งานในรูปแบบอื่นๆต่อไป ในขณะที่ AI บีบอัดไฟล์เสียงโดยไม่สูญเสียคุณภาพนั้นจะสามารถนำไปใช้งานในรูปแบบอื่นๆโดยเฉพาะการบีบอัดไฟล์เสียงแบบเรียลไทม์เช่นการใช้ในการสื่อสารในขณะที่สัญญาณอินเตอร์เน็ตไม่ดี หรือการใช้ในอุตสาหกรรม Metaverse ในอนาคตเป็นต้น

สำหรับโมเดล AudioCraft นั้นทาง Meta จะเปิดเป็นโมเดลแบบ open-sourcing สามารถนำไปเทรนด์กับ data set ของตัวเองได้ โดยหวังว่าจะช่วยพัฒนาวางการเอไอสร้างเสียงเพลงให้ก้าวหน้ามากขึ้น

สำหรับเอไอสร้างเพลงและสร้างเสียงนั้นเรียกว่าเป็น generative AI ที่มีความท้าทายมากกว่าสายอื่นๆเนื่องจากจำเป็นต้องเทรนด์โมเดลจากสัญญาณและรูปแบบที่หลากหลายและกว้างมากๆ ตั้งแต่เรื่องโน้ต  โครงสร้างเพลง เครื่องดนตรี และแนวเพลงที่หลากหลายทั่วโลก สำหรับใครที่อยากลองสร้างเพลง สามารถเข้าไปที่ MusicGen ได้เลย

ที่มา: Meta


  • 11
  •  
  •  
  •  
  •