Hoe werkt de techniek ‘inpainting (beeldherstel)’ bij het vertalen van afbeeldingen?
“Bij eenvoudige vertaling van afbeeldingen worden alleen kleurvlakken over de oorspronkelijke afbeelding gelegd, met een zeer slecht visueel resultaat. Bij een hoogwaardige vertaling moet de tekst eruitzien alsof deze rechtstreeks op de afbeelding is gedrukt.”
Analyse hoofdoorzaak
Achtergrondtexturen genereren
Wanneer het systeem de oorspronkelijke anderstalige tekst uit de afbeelding verwijdert, analyseert het inpainting-model de kenmerken van de omliggende pixels (kleur, textuur, licht en schaduw). Het genereert op intelligente wijze de achtergrond voor het gewiste gebied en vult dit ermee op, zodat het er volkomen natuurlijk uitziet.
Gestileerde tekstrendering
Bij het invoegen van de vertaalde tekst analyseert het systeem de kleur, de omlijning, de hellingshoek en de lettertypestijl van de oorspronkelijke tekst en probeert het deze visuele eigenschappen in de doeltaal na te bootsen voor een perfecte vervanging op ‘pixelniveau’.
Samenvatting definitieve oplossing
Los visuele en esthetische uitdagingen bij het vertalen op met de tekenmogelijkheden van generatieve AI.