ಓದಲು 3 ನಿಮಿಷ

Generative fill: ಫೋಟೋದಿಂದ ಒಂದು ವಸ್ತುವನ್ನು ಅಳಿಸಿದಾಗ ಎಐ (AI) ಅಲ್ಲಿ ಏನನ್ನು ತುಂಬುತ್ತದೆ?

ಪ್ರಕಟಿತ ನವೀಕರಿಸಿದ

30 ಸೆಕೆಂಡುಗಳಲ್ಲಿ ಅರ್ಥ

ಜನರೇಟಿವ್ ಫಿಲ್ ಎಂಬುದು ಕೃತಕ ಬುದ್ಧಿಮತ್ತೆ ಆಧಾರಿತ ಚಿತ್ರ ತಿದ್ದುಪಡಿ ತಂತ್ರಜ್ಞಾನವಾಗಿದ್ದು, ಛಾಯಾಚಿತ್ರದಿಂದ ಅಳಿಸಲಾದ ಭಾಗವನ್ನು ವಾಸ್ತವಕ್ಕೆ ಹತ್ತಿರವಾದ ಹೊಸ ಅಂಶಗಳಿಂದ ತುಂಬುತ್ತದೆ. ಹಿಂದಿನ ಸ್ಟಾಂಪ್ ಟೂಲ್‌ನಂತೆ ಕತ್ತರಿಸಿ ಅಂಟಿಸದೆ, ನೀರಿನ ಅಲೆಗಳು ಅಥವಾ ಹುಲ್ಲಿನ ಸಹಜ ಮುಂದುವರಿಕೆಯನ್ನು ಹೊಸದಾಗಿ ಚಿತ್ರಿಸುತ್ತದೆ.

ಫೋಟೋದಿಂದ ಬೇಡದ ವಸ್ತುಗಳನ್ನು ಕಂಪ್ಯೂಟರ್ ಕಲೆ ಉಳಿಯದಂತೆ ಹೇಗೆ ತೆಗೆದುಹಾಕುತ್ತದೆ?

ಕುಟುಂಬದೊಂದಿಗೆ ಪ್ರವಾಸಕ್ಕೆ ಹೋದಾಗ ಪ್ರಸಿದ್ಧ ಸ್ಮಾರಕದ ಮುಂದೆ ಅದ್ಭುತವಾದ ಫೋಟೋ ತೆಗೆಸಿಕೊಳ್ಳುತ್ತೀರಿ. ಆದರೆ ಫೋಟೋ ನೋಡಿದಾಗ ಹಿನ್ನೆಲೆಯಲ್ಲಿ ಯಾರೋ ಅಪರಿಚಿತರು ಹಾದುಹೋಗಿರುತ್ತಾರೆ ಅಥವಾ ಅಸಹ್ಯವಾದ ಕಸದಬುಟ್ಟಿಯೊಂದು ಕಾಣಿಸುತ್ತಿರುತ್ತದೆ. ಹಿಂದೆ ಇಂತಹ ಫೋಟೋಗಳನ್ನು ಸರಿಪಡಿಸಲು ಗಂಟೆಗಟ್ಟಲೆ ಶ್ರಮಪಡಬೇಕಿತ್ತು. ಆದರೆ ಇಂದು ನಿಮ್ಮ ಮೊಬೈಲ್‌ನಲ್ಲೇ ಆ ಕಸದಬುಟ್ಟಿಯ ಮೇಲೆ ಬೆರಳಾಡಿಸಿದರೆ ಸಾಕು, ಅದು ಮಾಯವಾಗಿ ಆ ಜಾಗದಲ್ಲಿ ನೈಜ ಹುಲ್ಲುಗಾವಲು ಅಥವಾ ನೆಲಹಾಸು ಪ್ರತ್ಯಕ್ಷವಾಗುತ್ತದೆ! ಈ ಕೌತುಕದ ತಂತ್ರಜ್ಞಾನವೇ ಚಿತ್ರದ ಖಾಲಿ ಜಾಗವನ್ನು ನೈಸರ್ಗಿಕವಾಗಿ ತುಂಬುವ ಎಐ ವಿಧಾನ (ಡಿಫ್ಯೂಷನ್ ಇನ್‌ಪೈಂಟಿಂಗ್ ಅಥವಾ Diffusion Inpainting).

ಹಳೆಯ ತಂತ್ರಜ್ಞಾನಗಳು ಸುತ್ತಮುತ್ತಲಿನ ಭಾಗವನ್ನು ನಕಲು ಮಾಡಿ ಅಂಟಿಸುವ ವಿಧಾನವನ್ನು (ಕಂಟೆಂಟ್-ಅವೇರ್ ಫಿಲ್ ಅಥವಾ Content-Aware Fill) ಬಳಸುತ್ತಿದ್ದವು; ಇದರಿಂದ ಚಿತ್ರದ ಅಂಚುಗಳು ಮಸುಕಾಗಿ ಅಥವಾ ಎಡಿಟ್ ಮಾಡಿರುವುದು ಸ್ಪಷ್ಟವಾಗಿ ಕಾಣುತ್ತಿತ್ತು. ಆದರೆ ಇಂದಿನ ಬಣ್ಣದ ಮಬ್ಬಿನಿಂದ ಹೊಸ ವಿವರಗಳನ್ನು ರೂಪಿಸುವ ಮಾದರಿಗಳು (ಲ್ಯಾಟೆಂಟ್ ಡಿಫ್ಯೂಷನ್ ಮಾಡೆಲ್‌ಗಳು ಅಥವಾ Latent Diffusion Models) ಬೆಳಕು, ನೆರಳು ಮತ್ತು ಕ್ಯಾಮೆರಾದ ಹಿನ್ನೆಲೆಯ ನೈಸರ್ಗಿಕ ಮಬ್ಬುತನವನ್ನು (ಬೊಕೆ ಅಥವಾ Bokeh) ಅರ್ಥಮಾಡಿಕೊಂಡು, ಮಬ್ಬನ್ನು ಹಂತಹಂತವಾಗಿ ಸ್ವಚ್ಛಗೊಳಿಸುವ (ಇಟರೇಟಿವ್ ಡಿನಾಯ್ಸಿಂಗ್ ಅಥವಾ Iterative Denoising) ಮೂಲಕ ಹೊಸ ವಿವರಗಳನ್ನು ರೂಪಿಸುತ್ತವೆ.

ಗೋಡೆಯ ಬಿರುಕಿಗೆ ಬಣ್ಣ ಬಳಿಯುವ ನುರಿತ ಕುಶಲಕರ್ಮಿಯ ಹೋಲಿಕೆ

ಇದನ್ನು ಅರಮನೆಯ ಸುಂದರ ಗೋಡೆಯ ಬಿರುಕನ್ನು ಮುಚ್ಚುವ ಒಬ್ಬ ನುರಿತ ಕುಶಲಕರ್ಮಿಗೆ ಹೋಲಿಸಬಹುದು. ಸಾಮಾನ್ಯ ಕೆಲಸಗಾರನಾದರೆ ಯಾವುದೋ ಸಿಮೆಂಟನ್ನು ತಂದು ತೇಪೆ ಹಾಕಿ ಹೋಗುತ್ತಾನೆ, ಅದು ಎದ್ದು ಕಾಣುತ್ತದೆ. ಆದರೆ ನುರಿತ ಕುಶಲಕರ್ಮಿ ಮೊದಲು ಆ ಗೋಡೆಯ ಪ್ರಾಚೀನ ವಿನ್ಯಾಸ, ಸೂರ್ಯನ ಬೆಳಕು ಬೀಳುವ ಕೋನ ಮತ್ತು ಸುಣ್ಣದ ಬಣ್ಣವನ್ನು ಸೂಕ್ಷ್ಮವಾಗಿ ಗಮನಿಸುತ್ತಾನೆ.

ಆತ ಅದೇ ಮಣ್ಣು ಮತ್ತು ಬಣ್ಣವನ್ನು ಬೆರೆಸಿ, ಆ ಬಿರುಕನ್ನು ಮುಚ್ಚಿ ಪಕ್ಕದ ಕೆತ್ತನೆಗೆ ಸಂಪೂರ್ಣವಾಗಿ ಹೊಂದಿಕೊಳ್ಳುವಂತೆ ಹೊಸದೊಂದು ಚಿತ್ತಾರವನ್ನು ಕೆತ್ತುತ್ತಾನೆ. ಯಾರೇ ಬಂದು ನೋಡಿದರೂ ಅಲ್ಲಿ ಈ ಹಿಂದೆ ಬಿರುಕಿತ್ತು ಎಂದು ಊಹಿಸಲೂ ಸಾಧ್ಯವಾಗುವುದಿಲ್ಲ. ಜನರೇಟಿವ್ ಫಿಲ್ ಸಾಫ್ಟ್‌ವೇರ್ ಕೂಡ ಚಿತ್ರದ ನೈಜ ಕೋನಗಳು ಮತ್ತು ದೃಷ್ಟಿ ರೇಖೆಗಳು (ಪರ್ಸ್ಪೆಕ್ಟಿವ್ ಲೈನ್ಸ್ ಅಥವಾ Perspective Lines) ಹಾಗೂ ಹೊಳಪಿನ ಮೇಲ್ಮೈಯಲ್ಲಿ ಬೆಳಕಿನ ತೀಕ್ಷ್ಣ ಪ್ರತಿಫಲನವನ್ನು (ಸ್ಪೆಕ್ಯುಲರ್ ಹೈಲೈಟ್ಸ್ ಅಥವಾ Specular Highlights) ಉಳಿಸಿಕೊಂಡು ನೈಸರ್ಗಿಕವಾಗಿ ಕೆಲಸ ಮಾಡುತ್ತದೆ.

ಇಷ್ಟೇ ಅಲ್ಲದೆ, ಕ್ಯಾಮೆರಾ ಸೆನ್ಸರ್‌ನ ಸೂಕ್ಷ್ಮ ಕಣಗಳ ಮಬ್ಬನ್ನು (ಸೆನ್ಸರ್ ನಾಯ್ಸ್ ಅಥವಾ Sensor Noise) ಕೂಡ ಎಐ ಹೊಸ ಜಾಗದಲ್ಲಿ ಸೇರಿಸುತ್ತದೆ. ಚಿತ್ರದ ಗಡಿಯಾಚೆಗೆ ಹೊಸ ದೃಶ್ಯವನ್ನು ವಿಸ್ತರಿಸಲು (ಔಟ್‌ಪೈಂಟಿಂಗ್ ಅಥವಾ Outpainting) ಮತ್ತು ಹೊಸ ವಸ್ತುವನ್ನು ಸೇರಿಸಲು ನೀಡುವ ಲಿಖಿತ ಸೂಚನೆಯನ್ನು (ಟೆಕ್ಸ್ಟ್ ಪ್ರಾಂಪ್ಟ್ ಅಥವಾ Text Prompt) ಇದು ಸುಲಭವಾಗಿ ಪಾಲಿಸುತ್ತದೆ.

ದೈನಂದಿನ ಜೀವನದಲ್ಲಿ ಜನರೇಟಿವ್ ಫಿಲ್ ಎಲ್ಲಿ ನೆರವಾಗುತ್ತದೆ?

ಈ ತಂತ್ರಜ್ಞಾನವು ಕೇವಲ ವೃತ್ತಿಪರ ಛಾಯಾಗ್ರಾಹಕರಿಗೆ ಮಾತ್ರವಲ್ಲದೆ ಸಾಮಾನ್ಯ ಮೊಬೈಲ್ ಬಳಕೆದಾರರಿಗೂ ವರದಾನವಾಗಿದೆ:

  • ಪ್ರವಾಸದ ಫೋಟೋಗಳ ನವೀಕರಣ: ಸುಂದರ ತಾಣಗಳಲ್ಲಿ ತೆಗೆದ ಫೋಟೋಗಳ ಹಿನ್ನೆಲೆಯಲ್ಲಿರುವ ವಿದ್ಯುತ್ ತಂತಿಗಳು, ವಾಹನಗಳು ಅಥವಾ ಅಪರಿಚಿತರನ್ನು ಕಲೆ ಉಳಿಯದಂತೆ ತೆಗೆದುಹಾಕುವುದು.
  • ಹಳೆಯ ಕೌಟುಂಬಿಕ ಭಾವಚಿತ್ರಗಳ ಪುನರುಜ್ಜೀವನ: ಕಾಲಕ್ರಮೇಣ ಹರಿದುಹೋದ ಅಥವಾ ಗೆದ್ದಲು ತಿಂದ ಹಳೆಯ ಫೋಟೋಗಳ ಬಿರುಕುಗಳನ್ನು ಗುರುತಿಸಿ ನೈಸರ್ಗಿಕವಾಗಿ ಮರುನಿರ್ಮಿಸುವುದು.
  • ಸಾಮಾಜಿಕ ಜಾಲತಾಣಗಳ ಪೋಸ್ಟ್‌ಗಳು: ನಿಮ್ಮ ಉತ್ಪನ್ನ ಅಥವಾ ಭಾವಚಿತ್ರದ ಹಿನ್ನೆಲೆಯನ್ನು ಬದಲಾಯಿಸಿ ಕಚೇರಿ ಅಥವಾ ಪ್ರಕೃತಿಯ ಸುಂದರ ಹಿನ್ನೆಲೆಯನ್ನು ಕ್ಷಣಾರ್ಧದಲ್ಲಿ ಅಳವಡಿಸುವುದು.
  • ಚಿತ್ರದ ಚೌಕಟ್ಟು ವಿಸ್ತರಣೆ: ಲಂಬವಾಗಿ ತೆಗೆದ ಮೊಬೈಲ್ ಫೋಟೋವನ್ನು ಅಡ್ಡಲಾಗಿ ವಿಸ್ತರಿಸಿ ಕಂಪ್ಯೂಟರ್ ವಾಲ್‌ಪೇಪರ್ ಅಥವಾ ಬ್ಯಾನರ್‌ಗಳಿಗೆ ಸರಿಹೊಂದುವಂತೆ ಮಾಡುವುದು.

ಚಿತ್ರಗಳನ್ನು ತಿದ್ದುವಾಗ ನೆನಪಿನಲ್ಲಿಡಬೇಕಾದ ನೈತಿಕ ಅಂಶಗಳು

ತಂತ್ರಜ್ಞಾನವು ಚಿತ್ರವನ್ನು ಸುಂದರವಾಗಿಸಲು ಶಕ್ತಿ ನೀಡಿದ್ದರೂ, ಸತ್ಯಾಸತ್ಯತೆಯನ್ನು ಕಾಪಾಡಿಕೊಳ್ಳುವುದು ನಮ್ಮ ಜವಾಬ್ದಾರಿಯಾಗಿದೆ. ಚಿತ್ರದ ಜನನ ಮತ್ತು ತಿದ್ದುಪಡಿ ದಾಖಲಿಸುವ ಡಿಜಿಟಲ್ ಮಾಹಿತಿ (ಪ್ರೊವೆನೆನ್ಸ್ ಮೆಟಾಡೇಟಾ ಅಥವಾ Provenance Metadata) ನೈಜತೆಯನ್ನು ಕಾಪಾಡಲು ನೆರವಾಗುತ್ತದೆ. ಈ ನಿಯಮಗಳನ್ನು ಪಾಲಿಸಿ:

  • ಕಾನೂನು ಮತ್ತು ಪತ್ರಿಕೋದ್ಯಮದ ದಾಖಲೆಗಳನ್ನು ತಿದ್ದಬೇಡಿ: ಅಪಘಾತ, ನ್ಯಾಯಾಲಯದ ಪುರಾವೆ ಅಥವಾ ಸುದ್ದಿ ವರದಿಗಳ ಚಿತ್ರಗಳಲ್ಲಿನ ವಸ್ತುಗಳನ್ನು ಅಳಿಸುವುದು ಕಾನೂನುಬಾಹಿರ ಅಪರಾಧವಾಗಿದೆ.
  • ಅಧಿಕೃತ ಗುರುತಿನ ಚೀಟಿಗಳಿಗೆ ಬಳಸಬೇಡಿ: ಆಧಾರ್, ಪಾಸ್‌ಪೋರ್ಟ್ ಅಥವಾ ಚಾಲನಾ ಪರವಾನಗಿಯ ಭಾವಚಿತ್ರಗಳಲ್ಲಿ ಮುಖದ ನೈಜ ಗುರುತುಗಳನ್ನು ಯಾವುದೇ ಕಾರಣಕ್ಕೂ ಬದಲಿಸಬೇಡಿ.
  • ಮಾರಾಟದ ವಸ್ತುಗಳಲ್ಲಿ ಪ್ರಾಮಾಣಿಕತೆ ಇರಲಿ: ಆನ್‌ಲೈನ್‌ನಲ್ಲಿ ನಿಮ್ಮ ಕಾರು ಅಥವಾ ಮನೆಯನ್ನು ಮಾರಾಟ ಮಾಡುವಾಗ ಅವುಗಳಲ್ಲಿರುವ ನೈಜ ದೋಷಗಳನ್ನು ಮುಚ್ಚಿಡಲು ಈ ತಂತ್ರಜ್ಞಾನವನ್ನು ದುರುಪಯೋಗಪಡಿಸಬೇಡಿ.

ಜನರೇಟಿವ್ ಫಿಲ್ ನಮ್ಮ ನೆನಪುಗಳನ್ನು ಅಚ್ಚುಕಟ್ಟಾಗಿ ಸಂರಕ್ಷಿಸಲು ಸಿಕ್ಕಿರುವ ಅದ್ಭುತ ಸಾಧನ. ಸೌಂದರ್ಯ ಮತ್ತು ಪ್ರಾಮಾಣಿಕತೆಯ ನಡುವೆ ಸಮತೋಲನ ಕಾಯ್ದುಕೊಂಡಾಗ ಈ ತಂತ್ರಜ್ಞಾನವು ನಮ್ಮ ಸೃಜನಶೀಲತೆಗೆ ಹೊಸ ಮೆರುಗು ನೀಡುತ್ತದೆ.

ಮೂಲಗಳು
  1. Generative Fill and Inpainting in Adobe FireflyAdobe
  2. High-Resolution Image Synthesis with Latent Diffusion ModelsComputer Vision and Pattern Recognition (CVPR)