Dybio fideo AI sy'n dilyn y llun
Lleisiau, effeithiau sain a cherddoriaeth o un disgrifiad
Mae'r rhan fwyaf o offer llais AI yn darllen testun i wagle ac yn eich gadael i'w gyfateb â'r golygu eich hun. Mae Seed Audio 1.5 yn gwylio'r fideo. Disgrifiwch pwy sy'n siarad, beth maen nhw'n ei ddweud, sut mae'r ystafell yn swnio a beth mae'r gerddoriaeth yn ei wneud, a bydd yn rhoi un trac sain i chi sydd wedi'i amseru i'r hyn sydd ar y sgrin.
Chi sy'n ysgrifennu'r llinellau. Mae'r model yn eu perfformio, gydag effeithiau a cherddoriaeth, mewn amseriad sy'n cyd-fynd â'r llun.
Tair ffordd o ddybio
Mae ByteDance yn dogfennu tri dull fideo. Dewiswch yn ôl faint o reolaeth sydd ei hangen arnoch dros y llais.
Fideo a disgrifiad
Mae'r model yn darllen yr olygfa ac yn ei lleisio o'ch testun chi: y llinellau, y math o lais, yr effeithiau a'r gerddoriaeth gefndir.
Fideo, disgrifiad a llais
Ychwanegwch glip cyfeirio ac mae'r llinellau'n cael eu llefaru yn y llais hwnnw. Y fideo sy'n pennu'r amseru, y clip cyfeirio sy'n pennu'r timbre.
Cyfieithu'r hyn sydd yno eisoes
Os oes lleferydd Saesneg neu Tsieineeg yn y fideo eisoes, cyfieithwch ef yn lle hynny a chadwch lais y siaradwr ei hun.
Lle mae dybio'n profi ei werth
Deunydd wedi'i gynhyrchu gan AI
Yn aml mae clipiau o fodelau fideo yn dod yn fud neu gyda thrac sain wedi'i ddyfalu. Dybiwch nhw gyda'r deialog a'r awyrgylch sydd eu hangen ar yr olygfa mewn gwirionedd.
Sain wael ar leoliad
Mae ByteDance yn nodi gwella sain o ansawdd isel fel un defnydd: perfformiwch yr olygfa eto'n lân yn hytrach na brwydro yn erbyn y sŵn.
Dramâu byrion a chyfresi
Cadwch lais cymeriad yr un fath o bennod i bennod trwy ailddefnyddio'r un clip cyfeirio.
Hysbysebion a deunydd hyrwyddo
Amserwch y trosleisio, sain y cynnyrch a'r acen gerddorol i'r ffrâm, yna newidiwch yr iaith ar gyfer y farchnad nesaf.
Sut i ddybio fideo gyda Seed Audio 1.5
Paratowch y golygiad
MP4 neu MOV, 4 i 360 eiliad, 480p i 1080p, hyd at 200 MB. Dybiwch y golygiad terfynol: os bydd y golygiad yn newid, bydd yr amseru'n newid hefyd.
Ysgrifennwch yr hyn sydd i'w glywed
Llinellau mewn dyfynodau, disgrifiad byr o bob llais, yna'r effeithiau a'r gerddoriaeth. Nid yw'r model yn dyfeisio deialog, felly mae popeth sydd i'w ddweud yn mynd yn y prompt.
Gosodwch yr amseru lle mae'n bwysig
Defnyddiwch stampiau amser fel [2.0s:6.5s] ar gyfer llinellau ac effeithiau sy'n gorfod taro ar doriad. Gadewch y gweddill i'r model.
Ychwanegwch gyfeirnod llais os oes angen
Hyd at chwe chlip o 2 i 30 eiliad yr un. Defnyddiwch yr un clip bob tro y bydd cymeriad yn siarad.
Enghreifftiau o promptiau
Mae canllaw promptiau ByteDance yn argymell: beth sydd i'w glywed, sut mae'n swnio, a beth na ddylai fod yno. Mae'r promptiau'n aros yn Saesneg.
Dau berson ar stryd law
Outdoor street at night, steady rain on umbrellas and a passing car on wet asphalt. A young woman with a clear British voice, exasperated then laughing, says: “I cannot believe I let you talk me into this.” A man with a warm baritone, apologetic but smiling, answers: “I said it might rain. I did not say the sky would take it personally.” No music.
Mae pob siaradwr yn cael disgrifiad un llinell ac emosiwn cyn ei linell.
Ergyd cynnyrch gydag amseru manwl gywir
[0.0s:15.0s] Light electronic music under the whole clip. [0.4s:1.0s] A crisp click as the lid opens. [1.5s:5.0s] A confident adult male voice, General American accent, says: “Built for the days that do not end at five.” [12.0s:15.0s] The music lifts and resolves.
Mae'r stampiau amser yn cadw'r clic ar y ffrâm lle mae'r caead yn agor.
Cyn i chi ddechrau
- Nid yw'r model yn ysgrifennu'r sgript. Os nad oes disgrifiad yn y prompt, ni cheir deialog wedi'i chynllunio.
- Sain yn unig y mae'n ei chreu. Nid yw symudiad y genau ar y sgrin yn newid, felly mae deialog yn gweithio orau ar ergydion llydan, cefnau pennau, adrodd ac animeiddio.
- Mae un cais yn cynnwys hyd at 6 munud o sain; dybiwch ffilmiau hirach olygfa wrth olygfa.
- Defnyddiwch gyfeirnodau llais yn unig gyda chaniatâd y siaradwr.
Cwestiynau cyffredin am ddybio fideo AI
A all Seed Audio 1.5 gyfieithu neu ddybio fideo i'r Gymraeg?
Ddim eto. Nid yw'r Gymraeg ymhlith y 30 iaith y mae Seed Audio 1.5 yn eu siarad adeg ei lansio. Gellir cyfieithu fideos Saesneg neu Tsieineeg i ieithoedd fel Ffrangeg, Almaeneg, Sbaeneg ac Eidaleg.
Beth yw dybio fideo AI?
Cynhyrchu trac sain fideo gydag AI: deialog, trosleisio, effeithiau sain a cherddoriaeth, wedi'u hamseru i'r hyn sy'n digwydd ar y sgrin. Gyda Seed Audio 1.5 rydych chi'n disgrifio'r sain ac mae'r model yn ei chreu ar un tro.
A yw Seed Audio 1.5 yn ysgrifennu'r ddeialog i mi?
Nac ydy. Mae ByteDance yn glir nad yw'n dybio'n awtomatig. Chi sy'n darparu'r llinellau a disgrifiad o'r sain; mae'r model yn eu perfformio ac yn eu hamseru.
A all y dybio ddefnyddio llais penodol?
Gall. Ychwanegwch glip cyfeirio o 2 i 30 eiliad ac mae'r llinellau'n cael eu llefaru yn y llais hwnnw, tra bod y fideo yn rheoli'r amseru. Gellir defnyddio hyd at chwe chyfeirnod mewn un cais.
A allaf ddybio mewn ieithoedd heblaw Saesneg?
Gallwch. Mae Seed Audio 1.5 yn siarad 30 iaith, o Japaneg a Chorëeg i Bwyleg, Twrceg a Hindi.
Sut mae dybio'n wahanol i gyfieithu fideo?
Mae dybio yn creu trac sain newydd o'ch disgrifiad. Mae cyfieithu fideo yn cymryd lleferydd Saesneg neu Tsieineeg sydd eisoes yn bodoli ac yn ei ail-leisio mewn iaith arall gyda'r un llais.
Cysylltiedig
Rhowch y sain i'ch golygfa sydd ei hangen arni
Ysgrifennwch y llinellau, disgrifiwch yr ystafell, a gadewch i'r llun osod yr amseru.
Dybiwch fideo