¿Cómo colorea manga la IA? Explicación sencilla

Un colorizador con IA funciona prediciendo un color para cada región de una página en blanco y negro, a partir de lo que aprendió de muchos pares de imágenes en blanco y negro y en color. Encuentra formas como el pelo, la piel y el cielo, adivina un color probable para cada una y las pinta debajo del dibujo lineal. El colorizador propio de RuneManga está en desarrollo; así funciona la técnica en general.

Qué ve el modelo

La entrada es una página en escala de grises: dibujo lineal negro, papel blanco y trama. El modelo no parte de ningún color, así que tiene que deducir qué es cada forma a partir de su contorno y de lo que la rodea. Una forma redonda en la parte superior de una figura, enmarcada por líneas largas, probablemente sea pelo. Una zona plana detrás de la figura probablemente sea una pared o el cielo.

Cómo elige los colores

Durante el entrenamiento se le muestra al modelo un número enorme de ejemplos: una imagen en color y la misma imagen convertida a blanco y negro. Aprende qué colores suelen ir con qué formas. Al usarlo, aplica esos hábitos a tu página. Es una predicción, no una búsqueda, así que el mismo personaje puede acabar con un tono ligeramente distinto cada vez.

Por qué importan el dibujo lineal y la trama

• El dibujo lineal le dice al modelo dónde termina una región y dónde empieza la siguiente. Las líneas limpias y cerradas dan zonas de color limpias, y las líneas rotas dejan que el color se escape.
• La trama es un patrón impreso de puntos o líneas que se usa para sombrear. Para un modelo puede parecer textura o ruido, y puede producir un color sucio o manchado. Algunos colorizadores quitan o suavizan las tramas antes.
• El texto estorba. Las letras de un bocadillo pueden colorearse como parte de la imagen, y por eso el orden previsto en RuneManga es borrar el rotulado antes de colorear.

Automático, con pistas y con referencias

• Automático: el modelo elige todo. Es rápido y el más fácil de equivocar.
• Con pistas: colocas unos trazos o puntos de color y el modelo los extiende por las formas. Te da control sobre el pelo y la ropa.
• Basado en referencias: aportas una imagen en color del personaje y el modelo intenta igualarla. Ayuda a mantener la coherencia.

Dónde falla

• Colores equivocados en detalles importantes, como los ojos de un personaje.
• Colores que cambian de una página a la siguiente, porque cada página se predice por separado.
• Derrames a través de huecos en el dibujo lineal.
• Zonas sucias o con ruido donde había trama.
• Colores que no encajan con la luz de la escena, por ejemplo una escena nocturna pintada con colores de día.

Lo que no puede saber

Un modelo no puede saber lo que pretendía el autor. Si en la historia el pelo de un personaje es plateado pero la página es en blanco y negro, el modelo no puede verlo. Solo puede adivinar a partir de los hábitos aprendidos en el entrenamiento, y por eso unas cuantas pistas o una imagen de referencia suelen marcar una gran diferencia.

Cómo encaja esto en un traductor

Traducir y colorear son trabajos distintos, y el orden importa. Leer el texto funciona mejor en la página original en blanco y negro, y colorear funciona mejor en una página sin el rotulado antiguo. Así que la secuencia es: leer, traducir, borrar y reconstruir, colorear y por último maquetar la traducción encima. RuneManga planea hacer todo esto de una sola vez cuando el coloreado esté listo.

Preguntas

• Cómo colorear manga: a mano y con IA
• Por qué los colores del manga con IA cambian
• Colorear manga con RuneManga (previsto)
• Glosario