活动3:自主研发软件发布
主题
国内第一款自主研发的AI电影计量软件CCKS-Cinemetrics发布
内容
CCKS-Cinemetrics (又名:PyCinemetrics)是国内第一款专用计量电影研究工具,功能包括利用深度学习和PySide2 来解析电影视觉风格。使用TransNetV2将电影分割成镜头帧,探索平均镜头长度(Average Shot Length)和节奏。利用 K-Means 从镜头帧中提取主要颜色。使用EasyOcr提取电影字幕以获取影片对白。基于VGG19的目标检测来识别隐喻性道具和物体。通过 OpenPose检测骨骼点的比例以及在画面的占比,间接确定拍摄景别。基于PySide2集成PyCinemetrics 的各个功能并提供良好的扩展性。目前,已测试使用CCKS-Cinemetrics对经典电影进行计量分析,证明了软件的准确性和效率。
本款软件研发团队负责人中国传媒大学计算机与网络空间安全学院李春芳副教授已基于此项研究发表SCI期刊学术论文PyCinemetrics: Computational film studies tool based on deep learning and PySide2。届时,李春芳副教授将向与会嘉宾详细阐述本款软件的研究成果和对电影史研究的巨大价值。本软件可有效促进电影与电影史的研究方法创新和路径拓展,并为影视作品的创作和创新开辟新的可能。
时间
5月23日10:35-10:50
地点
北京大学艺术学院均斋报告厅
发布人
李道新
北京大学艺术学院副院长、教授、博士生导师,教育部“长江学者”特聘教授
李春芳
中国传媒大学计算机与网络空间安全学院副教授
评议人
朱本军
北京大学图书馆研究馆员
北京大学出版研究院副院长
需下载软件包括:CCKS-Cinemetrics、VLC。
1. 打开软件,选取播放本地视频文件,视频的基本信息会显示在左侧的信息栏。
2. 点击【ShotCut】,启动镜头边界探测模块,生成分镜,于此同时img文档內会生成与视频同名称的文件夹,储存所生成分镜。
3. 点击【colors】提取每帧镜头中的颜色(默认5种),同时会生成csv文件储存到img文档中。
4.点击【objects】读取每帧镜头中出现的物件,同时会生成csv文件储存到img文档中。
5. 点击【subtitles】读取电影中的字幕,同时会生成csv以及srt文件储存到img文档中。
6. 点击【ShotScale】读取每一帧的动作关键点,同时读取空镜、特写、中近景、中景、长镜头、全景的镜头数量与占比,同时会生成csv文件储存到img文档中。
PyCinemetrics: Computational film studies tool based on deep learning and PySide2主要图表:
图片来源:Li, C., Lu, J., Pei, Y., Shen, Y., Hu, Y., Fan, Y., Tian, Y., Linghu, X., Wang, K., Shi, Z. and Sun, J., 2024. PyCinemetrics: Computational film studies tool based on deep learning and PySide2. SoftwareX, 26, p.101686.
声明:Cinemetrics软件仅用于学术研究或社会公益,严禁商业用途。
幕后故事
有关CCKS-Cinemetrics研发以及计量电影相关的幕后故事,已由该软件顾问李道新教授发布于公众号“光影绵长李道新”中。
2021年8月1日
2022年6月9日
李道新 | 影·知(3):小智小智,数字平台如何“众包群智”?
2022年7月12日
2023年10月25日
李道新 | CCKS-Cinemetrics(1):李春芳副教授团队为中国电影知识体系平台(CCKS)开发原创性计量电影研究工具
2024年3月29日
李道新 | CCKS-Cinemetrics(2):李春芳团队在SoftwareX发文,即将发布国内第一款专用计量电影研究工具
“确实,人是星空之尘,恒河之沙,风中之烛。研究工具承载着我们的思想,在人类一触即发的毁灭性危机中,每一行代码都能彰显芦草的尊严”。
——“光影绵长李道新”
主办单位
北京大学艺术学院
中国电影知识体系平台(CCKS)
CCKS-Cinemetrics开发单位
中国传媒大学计算机与网络空间安全学院
智能影视团队
文字|格根
海报|陈都
主编|李道新
审核|李春芳 易婧
北京大学艺术学院
微信号|artpku
中国电影知识体系平台(CCKS)
https://movie.yingshinet.com/#/
CCKS电影知识体系
微信号|CCKS-PKU
国家社科基金艺术学重大项目
“中国特色电影知识体系研究”
中期成果展示系列活动
组委会
负责人 | 李道新
统 筹 | 易 婧 陈 都
事务部 | 格 根 周丹丹
技术部 | 李明杰 徐之波
宣传部 | 齐劲沣 陈墨非
联络部 | 李诗语 从金华