Hur skapar jag ett program som tar en mp3 fil och ett manus/lyrics till mp3 filen?

Permalänk
Medlem

Hur skapar jag ett program som tar en mp3 fil och ett manus/lyrics till mp3 filen?

Jag behöver ett program som tar en mp3 fil och ett manus/lyrics till mp3 filen. Och när programmet fått dessa två filer så ska det hitta tidsstämplarna för varje ord som sägs i filen samt matcha ihop orden till engelska fenomen som används i ett program som heter xlights.
Filen som produceras heter xtiming fil.
Det finns en hemsida som gör detta jätte bra men det funkar bara till engelska.

https://autolyrics.lightingfanatics.com/index.php?login=googl...

§ 3.4 / 9 - MOD
Permalänk
Medlem

Låter som ett Vibe code projekt under helgen? Iaf som en MVP.

Visa signatur

AMD Ryzen 9 9950X3D | ASUS ROG STRIX GeForce RTX 4090 | ASUS ROG Strix X870-F GAMING WIFI | Kingston 64GB (2x32GB) DDR5 6000MHz CL30 FURY Beast | Samsung 990 Pro 2TB M.2 | Samsung 970 EVO Plus 2TB M.2 | NZXT Kraken Elite V2 240mm | NZXT H5 Flow 2024 | NZXT C1200 1200W | ASUS 32" ROG Swift PG32UCDP OLED 4K 240/480

Permalänk
Medlem
Skrivet av alex20hz:

Låter som ett Vibe code projekt under helgen? Iaf som en MVP.

Jag har försökt med olika ai botar men har inte fått rätt på det antingen blir xtiming filen helt fel eller så är allt helt off när det kommer till var munrörelserna är jämfört med ljudet

Permalänk
Medlem

Kan rekommendera open ai's whisper för det här: https://github.com/openai/whisper

Då får du ut tidsstämplar för var ord, och fungerar bra med flera språk. Har använt det själv för möten. Går även bra att köra lokalt då det är relativt light weight. Kan dock inte svara på hur bra det hanterar musik.

Visa signatur

Intel i7 10700KF (Noctua NH-D15) | Asus RADEON RX 7900 XTX TUF | 32 GB DDR4 HyperX Fury | Corsair RM1000X | Zalman Z9 Iceberg MS | Arch Linux, Win11

Permalänk
Medlem
Skrivet av Ostbullen:

Kan rekommendera open ai's whisper för det här: https://github.com/openai/whisper

Då får du ut tidsstämplar för var ord, och fungerar bra med flera språk. Har använt det själv för möten. Går även bra att köra lokalt då det är relativt light weight. Kan dock inte svara på hur bra det hanterar musik.

Tur nog är det faktiskt inte någon musik utan ett manus inspelat av vår lokal radio till vår julshow vi har på huset