කෘතීම බුද්ධිය එහෙමත් නැත්නම් Artificial Intelegence මේ වන විට සමාජය තුළ වැඩි කතාබහට ළක් වන මාතෘකාවක් බවට පත් වී තිබෙනවා. තාක්ෂණික සමාගම් අතර දැවැන්තයෙක් වෙන Google සමාගමද ඔවුන්ගේ AI තාක්ෂණය අතරට නැවුම් ඇරඹුමක් එක් කිරීමට නවතම නිර්මාණයක් ගෙන ඒමට කටයුතු කර තිබෙනවා.
Lumiere නැමැති කෘතීම බුද්ධි වැඩසටහන හරහා prompt එකක් භාවිතා කරමින් realistic videos නිර්මාණය කර ගැනීමේ හැකියාව AI ලෝකය වෙත ගෙන ඒමට Google සමාගම කටයුතු කර තිබෙනවා. Space-Time-U-Net මෙන්ම STUNet යන diffusion models භාවිතා කරමින් නිමැවී ඇති Lumiere, කුඩා frames ගණනාවක් එක් කරමින් චලනයන්ද සමඟින් realistic videos නිර්මාණය කිරීමට සමත් වෙනවා.
අප විසින් ලබාදෙන prompt එක පාදක කරගනිමින් නිර්මාණය කෙරෙන based frame එක තුළ සිට STUNet framework එක භාවිතා කරමින් විවිධ වර්ගයේ කුඩා obejcts සහ frames සාදමින් මෙම Lumiere මඟින් seamless motion එකක් නිර්මාණය කෙරෙනවා. Stable Video Diffusion හි frames 25 හා සසඳන විටදී Lumiere මඟින් frames 80කට ආසන්න ප්‍රමාණයක් නිර්මාණය කරනු ලබනවා.
Omer Bar-Tal*,1,2
Lumiere Google Research Page
Text-to-Video නැතහොත් ලබාදෙන prompt එකක් හරහා video නිර්මාණය කිරීමේ තාක්ෂණයට එහා ගොසින්, Image-to-Video, Stylized Generation, Cinemagraphs, Video Inpainting ඇතුළු විශේෂාංග ගණනාවකින් මෙම Lumiere කෘතීම බුද්ධි වැඩසටහන සමන්විත වන අතර මේ වන විට පවතින Video Generating AI පරදවමින් ඉදිරියට පැමිණීමටද සමත් වෙනවා.
මේ පිළිබඳව වැඩිදුර විස්තර දැනගැනීම සඳහා The Verge වෙබ් අඩවිය සහ Toms Guide වෙබ් අඩවිය භාවිතා කළ හැක.