Ingia
Bei Wabunifu Ushirika Anza Kuunda
Tafsiri ya video · Seed Audio 1.5

Tafsiri video na ubaki na sauti ileile

Msimulizi wako akizungumza Kijapani, Kijerumani au Kihindi

Manukuu yanamtaka mtazamaji asome. Sauti ya kawaida ya AI inasikika kama mtu mwingine. Seed Audio 1.5 inarudia hotuba kwa lugha nyingine huku ikibaki na sauti ya aliyezungumza, na wimbo uliotafsiriwa unarudi wenye urefu uleule wa asili, hivyo unaingia moja kwa moja kwenye picha.

Inafanya kazi kutoka Kiingereza au Kichina kwenda lugha 30.

Sikiliza kabla ya kujaribu

Filamu ya Kiingereza ya dakika 9, iliyotafsiriwa kwa lugha 12 kwa Seed Audio 1.5 na timu yetu. Icheze na ubadilishe lugha kwenye Mipangilio → Wimbo wa sauti. Sikiliza msimulizi yuleyule katika kila toleo.

Filamu ya Pompeii yenye simulizi iliyotafsiriwa kwa lugha 12
Kiingereza (asili)KirusiKijerumaniKifaransaKihispania (Uhispania)KiitalianoKijapaniKikoreaKiholanziKiswidiKidenmakiKinorweKifini
Lugha chanzi
Kiingereza
Lugha lengwa
12
Maombi
24
Tofauti ya urefu
< 0,03 s

Hii ni ya nani

Chaneli za YouTube

Video moja, nyimbo nyingi za sauti. Watazamaji wa Tokyo na Madrid wanasikia mwenyeji yuleyule kwa lugha zao bila kupakia video ya pili.

Ongeza nyimbo kwenye YouTube →

Kozi na video za kufafanua

Sauti ya mwalimu ni sehemu ya somo. Kuitafsiri kunabakiza mtu mwenyewe, si maneno tu.

Video za bidhaa na matangazo

Zindua onyesho la bidhaa katika soko jipya siku ileile, ukiwa na mwasilishaji ambaye wateja wako wanamfahamu tayari.

Makala za video na hadithi

Filamu zenye simulizi, kama jaribio letu la Pompeii, ndizo rahisi zaidi: sauti moja, vituo vya wazi vya kunyamaza, kasi thabiti.

Jinsi ya kutafsiri video kwa sauti ileile

Huu ndio mpangilio hasa tuliofuata kwa filamu iliyo hapo juu.

1

Angalia lugha chanzi

Tafsiri ya video huanzia Kiingereza au Kichina. Modeli inaweza kutambua ni ipi kati ya hizo, kwa hiyo wewe unachagua lugha lengwa tu.

2

Kata video ndefu kwenye vituo vya kunyamaza

Ombi moja linakubali video ya sekunde 4 hadi 360. Filamu yetu ya dakika 9 iliingia kwa sehemu mbili, 4:43 na 4:17, kila moja ikikatwa pale msimulizi anaposimama kuvuta pumzi. Ukikata katikati ya sentensi, kasoro hiyo inasikika kwenye tafsiri.

3

Orodhesha majina na maneno adimu

Majina ya watu na mahali, na maneno ya zamani au ya kitaalamu, ndiyo mahali ambapo tafsiri huteleza. Yaongeze kwenye faharasa ya ombi ili yatoke vilevile katika kila lugha.

4

Tafsiri lugha moja kwa wakati

Kila ombi hurudisha lugha moja. Kwenye majaribio yetu, sehemu ya takriban dakika nne na nusu ilichukua kati ya sekunde 157 na 200.

5

Sikiliza kabla ya kuchapisha

Cheza kila lugha angalau mara moja, hasa mwanzo na sehemu zenye majina. Kurekebisha neno kabla ya kupakia ni nafuu zaidi kuliko baada ya watazamaji kulikuta.

6

Rudisha nyimbo kwenye video

Wimbo uliotafsiriwa una urefu uleule wa asili, kwa hiyo unalingana na picha kama ulivyo. Chapisha video tofauti kwa kila lugha, au ongeza nyimbo zote kwenye video moja ya YouTube.

Kinachobadilika na kinachobaki

Tafsiri ya video kwa sauti ileile
Sehemu ya videoBaada ya tafsiri
Maneno yanayozungumzwaYanatafsiriwa kwenda lugha lengwa
Tabia ya sautiInabaki: ni mzungumzaji yuleyule, si sauti ya kawaida
Muziki wa nyumaUnabaki
Athari za sautiZinabaki
UrefuUleule wa asili (kwenye jaribio letu, tofauti ilikuwa chini ya sekunde 0,03)
Picha na mwendo wa midomoHavibadiliki: hii ni tafsiri ya sauti, si usawazishaji wa midomo

Muziki na athari za sauti vinabaki kulingana na nyaraka za ByteDance. Kwenye jaribio letu wenyewe, tulitafsiri simulizi peke yake kisha tukarudisha muziki kwa kuuchanganya sisi wenyewe.

Tafsiri kwenda lugha yoyote kati ya 30

Kutoka Kiingereza au Kichina kwenda:

Kiarabu (lafudhi ya Saudia)KichekiKichinaKidenmakiKifaransaKifilipinoKifiniKigirikiKihindiKihispania (Meksiko)Kihispania (Uhispania)KiholanziKihungariKiindonesiaKiingerezaKiitalianoKijapaniKijerumaniKikoreaKimalayKinorweKipolandiKireno (Brazil)Kireno (Ureno)KiromaniaKirusiKiswidiKithaiKiturukiKivietnamu

Kihispania na Kireno kila kimoja kina matoleo mawili. Chagua lile wanalozungumza hadhira yako: Kihispania cha Meksiko au cha Uhispania, Kireno cha Brazil au cha Ureno.

Mipaka ya kufahamu

  • Chanzo lazima kiwe Kiingereza au Kichina. Video ya Kihispania haiwezi kutafsiriwa moja kwa moja.
  • Ombi moja linahusu video ya sekunde 4 hadi 360, hadi MB 200, katika 480p, 720p au 1080p.
  • Majina yanaweza kubadilika umbo kati ya lugha isipokuwa ukiyaorodhesha kwenye faharasa.
  • Midomo ya watu kwenye skrini haichorwi upya. Kwenye picha za karibu za uso unaozungumza tofauti inaonekana; kwenye simulizi haionekani.
  • Tafsiri video na sauti ambazo una haki nazo tu.

Maswali kuhusu tafsiri kwa sauti ileile

Je, Seed Audio 1.5 inaweza kutafsiri au kudubu video kwa Kiswahili?

Bado hapana. Kiswahili si miongoni mwa lugha 30 ambazo Seed Audio 1.5 inazungumza wakati wa kutolewa. Video ya Kiingereza au Kichina inaweza kutafsiriwa kwenda Kiarabu, Kifaransa, Kihindi au Kireno.

Je, AI inaweza kutafsiri video na kubaki na sauti ya asili?

Ndiyo. Tafsiri ya video ya Seed Audio 1.5 inarudia hotuba kwa lugha lengwa huku ikibaki na tabia ya sauti ya mzungumzaji. Kwenye jaribio letu, msimulizi yuleyule alitambulika katika lugha zote 12.

Je, muziki wa nyuma utapotea?

Kulingana na ByteDance, tafsiri ya video huhifadhi muziki na athari za sauti za asili na kubadilisha hotuba tu. Kwenye jaribio letu wenyewe tulituma simulizi bila muziki kisha tukarudisha muziki wenyewe, njia ambayo pia ni salama kama faili za mradi wako zina muziki kwenye wimbo wake peke yake.

Je, sauti iliyotafsiriwa inalingana na urefu wa video?

Kwenye jaribio letu, ndiyo: kila sehemu ilirudi ikiwa fupi kuliko chanzo kwa chini ya sekunde 0,03, katika kila lugha, kwa hiyo hakukuwa na haja ya kurekebisha muda.

Je, naweza kutafsiri video ndefu kuliko dakika 6?

Ndiyo, kwa sehemu. Ombi moja linakubali hadi sekunde 360, kwa hiyo gawanya video kwenye vituo vya asili vya kunyamaza, tafsiri kila sehemu kisha uunganishe matokeo. Filamu yetu ya dakika 9 iliingia kwa sehemu mbili.

Je, huu ni usawazishaji wa midomo?

Hapana. Sauti ndiyo inayotafsiriwa; picha inabaki kama ilivyo. Kwa simulizi, rekodi za skrini na video za sauti ya juu, hicho ndicho unachohitaji tu.

Naweza kutafsiri kwenda lugha zipi?

Thelathini, zikiwemo Kihispania (Uhispania na Meksiko), Kireno (Brazil na Ureno), Kijapani, Kikorea, Kijerumani, Kifaransa, Kiitaliano, Kirusi, Kihindi, Kiarabu, Kituruki na Kivietnamu. Chanzo lazima kiwe Kiingereza au Kichina.

Sauti yako, katika lugha nyingine kati ya 30

Anza kwa kutafsiri klipu moja fupi na usikilize majina. Kisha tafsiri video nzima.

Tafsiri video