近期，Facebook旗下Instagram的科研人員發(fā)表了一篇關于AR美妝濾鏡的論文，該論文描述了一種可為不同膚色人種實時渲染彩妝的智能手機濾鏡，該濾鏡可模擬彩妝師化妝技巧，將AR彩妝自然疊加在人臉上。

濾鏡實際應用效果圖

據了解，這款濾鏡技術可精準模擬五種市面常見的化妝品質地：啞光、絲絨、釉面、亮片和金屬光澤，同時它還支持均勻膚色的皮膚平滑技術和用于進一步融合紋理的色階重建技術。

濾鏡渲染流程圖

該濾鏡的原理是，通過手機攝像頭實時追蹤用戶面部，為實時創(chuàng)建用戶面部的網格模型，區(qū)分嘴唇、眼睛、臉頰等區(qū)域，然后使用GPU渲染，將光敏的化妝品濾鏡加在用戶面部，最后使用皮膚平滑和色階重建來融合和合成自然的皮膚。

該濾鏡在渲染妝容陰影時，將環(huán)境光遮蔽因素考慮在內，也就是說妝容的顏色也會因為光線變化而改變。反射顏色采用RGB，而陰影色彩來自于LAB色彩空間。

此外，該濾鏡還支持對睫毛的渲染，利用具有節(jié)點和紋理的條狀網格來實現，它還能夠根據用戶面部表情來進行調節(jié)。

經過測試，這款濾鏡在2013年的Nexus 5上運行時，需要20毫秒;在2014年Galaxy S5上為14毫秒，2015年Pixel手機上需要16毫秒，而2017年Pixel 2上需要7毫秒。

這項濾鏡技術可幫助彩妝師展示常用妝容，此外，為了讓消費者試用市面上彩妝產品，這組科研人員還開發(fā)了一款免費平臺。