- 由于本人沉迷青你无法自拔,pick谢可寅跟安崎,想通过AI各种手段,包括NLP、CV等,看看我pick的选手是不是既有实力又有观众缘
- 说到实力,我打算使用关键点检测的模型,跟踪两位选手的骨骼走向,以安崎为标准,谢可寅为测试者,通过对比舞蹈得出实力评估值0-1
- 然后观众缘,主要通过微博的评论,经过统计与情感分析获得选手的主要关注内容以及大众对她的好感度
- 最后,据说风格迁移模型搞出来挺炫酷的,我也掺一脚
主要以安崎小甜心的主题曲直拍视频作为标准视频,谢可寅shaking的主题曲直拍视频作为测试视频
- 将标准视频进行爬取,将视频逐帧读取成图片;
- 由于图片背景光线不太利于关键点捕抓,利用deeplabv3p_xception65_humanseg进行抠图处理;
- 基于pose_resnet50_mpii模型进行关键点检测并存储检测结果;
- 然后对测试视频作同样处理存储检测结果;
- 基于单通道的直方图对标准检测结果集以及测试检测结果集进行图片相似度计算,取结果均值作为选手的主题曲实力值;
- 将获取的实力值合成到选手图片并输出
- 爬取微博测试选手相关评论,统计高频词输出图
- 对评论进行情感分析,输出总体评论积极与消极的对比饼图
实现原视频画面风格转换成水墨风格,对视频的每一帧画面进行风格迁移处理,然后重新合成视频加上原视频音频后,重新输出
成片