Video_HE

感谢你参与本研究。


在本问卷中,你将评估由不同隐藏方法生成的多镜头视频序列。每个故事包含一个故事 prompt、若干按顺序排列的镜头级 prompt,以及六个匿名生成的视频序列,分别标记为 Sequence ASequence F

你将评估完整的多镜头长视频序列,而不是单独的一帧或单个短片段。

对于每个故事,你会看到:

  •  一个故事 prompt
  •  若干按顺序排列的镜头级 prompt
  •  六个匿名生成的视频序列,标记为 Sequence A 到 Sequence F

每个视频序列都包含多个按时间顺序排列的生成镜头。

请先观看全部六个视频序列,再回答排序题。

对于每个评价维度,请将 Sequence A–F 从 Rank 1Rank 6 排序:

  •  Rank 1 = 最好的序列
  •  Rank 6 = 最差的序列

每个名次只能分配给一个序列;在同一个维度中,每个序列也应该只获得一个名次。

五个评价维度定义如下:

1. Prompt 与视频的一致性: 视频序列是否符合故事 prompt 和镜头级 prompt,包括指定事件、角色、动作、物体、情绪、场景和电影意图是否正确呈现。

2. 叙事推进: 多个镜头是否形成清晰、连贯的故事推进,包括事件顺序、状态变化和镜头到镜头之间的连续性。

3. 角色一致性: 反复出现的角色是否在不同镜头中保持稳定的身份和外观,包括脸部、体型、服装、配色、配饰和角色身份。

4. 风格一致性: 视频序列是否在不同镜头之间保持统一的视觉风格,包括渲染风格、色调、光照、细节程度和整体氛围。

5. 美学质量: 视频整体是否清晰、美观、时间上稳定,并且没有明显的视觉缺陷。

请打开并观看全部六个视频序列,然后再进行排序。


Sequence A:

Sequence B:

Sequence C:

Sequence D:

Sequence E:

Sequence F:

方法名称是隐藏的。请不要猜测方法身份,只根据可见的视频内容进行评价。


故事提示词:
温暖的儿童动画风格,柔和的电影感光线,暖色调,角色设计保持一致。

 第 1 幕:炎热的夏日午后,一只口渴的乌鸦飞过安静的乡间小路,四处寻找水。
 第 2 幕:乌鸦发现路边有一个旧水罐,立刻落在水罐旁,低头往里面看。
 第 3 幕:水罐里只有一点水,水位太低,乌鸦伸长嘴巴也喝不到。
 第 4 幕:乌鸦焦急地绕着水罐走动,发现地上散落着许多小石子,像是想到了办法。
 第 5 幕:乌鸦一颗接一颗地把小石子叼进水罐里,水位慢慢升高。

 第 6 幕:水终于升到罐口附近,乌鸦低头喝到了清凉的水,满足地站在阳光下。
1.

提示词与视频的一致性:请根据每个视频序列与故事 prompt 和镜头级 prompt 的匹配程度,将 Sequence A–F 从最好到最差排序。

请考虑指定事件、角色、动作、物体、情绪、场景和电影意图是否被正确呈现。

Rank 1 = 最匹配。Rank 6 = 最不匹配。

2.

叙事推进:请根据多个镜头是否清晰、连贯地形成完整故事推进,将 Sequence A–F 从最好到最差排序。请考虑事件顺序、状态变化、因果发展和镜头到镜头之间的连续性。各个镜头内、镜头到镜头之间的视觉推进不应该显得突兀跳跃。

Rank 1 = 叙事推进最好。Rank 6 = 叙事推进最差。

3.

角色一致性:重复出现的角色在身份、外观、服饰和行为角色上是否保持一致。没有外部角色参考图,只需要考虑视频推进中、镜头与镜头之间的角色形象是否保持一致性。请考虑脸部、体型、服装、配色、配饰和角色身份是否稳定。本题角色为:乌鸦。将 Sequence A–F 从最好到最差排序。

Rank 1 = 角色最一致。Rank 6 = 角色最不一致。

4.

风格一致性:视频是否符合故事提示词要求的风格(若提示词有相关要求),以及整个视频是否保持统一的渲染风格、色调、光照、色彩、细节程度和整体氛围。请根据不同镜头是否保持统一视觉风格,将 Sequence A–F 从最好到最差排序。

Rank 1 = 风格最一致。Rank 6 = 风格最不一致。

5.

美学质量:请根据整体视觉质量和视觉吸引力,将 Sequence A–F 从最好到最差排序。

请考虑清晰度、构图、光照、物体摆放、时间稳定性,以及是否存在明显视觉缺陷。

Rank 1 = 视觉质量最高。Rank 6 = 视觉质量最低。

请打开并观看全部六个视频序列,然后再进行排序。


Sequence A:

Sequence B:

Sequence C:

Sequence D:

Sequence E:

Sequence F:

方法名称是隐藏的。请不要猜测方法身份,只根据可见的视频内容进行评价。


故事提示词:
温暖的儿童动画风格,柔和的电影感光线,暖色调,角色设计保持一致。

第 1 幕:秋雨后的小公寓庭院温馨安静。一个小女孩和一位老人坐在小厨房的桌边,桌上放着月饼和一盏还没点亮的纸兔灯笼。
第 2 幕:小女孩和老人一起动手修补兔子灯笼,厨房和湿润庭院都透着温暖气息。
第 3 幕:她们修好灯笼,小心地点亮它,然后带着发光的兔子灯笼走出厨房,穿过被雨水映亮的地面。
第 4 幕:小女孩和老人一起穿过湿润的庭院,小女孩手里的兔子灯笼轻轻摇晃,散发柔和光芒。
第 5 幕:一阵秋风吹来,兔子灯笼的火光微微晃动,红色流苏缠在石凳边。小女孩有些慌张,老人耐心帮她解开流苏,并把灯笼轻轻放在月饼旁边。
第 6 幕:修好的兔子灯笼在庭院夜色中稳定发光,小女孩和老人坐在一旁分享月饼,画面温暖而圆满。
6.

提示词与视频的一致性:请根据每个视频序列与故事 prompt 和镜头级 prompt 的匹配程度,将 Sequence A–F 从最好到最差排序。

请考虑指定事件、角色、动作、物体、情绪、场景和电影意图是否被正确呈现。

Rank 1 = 最匹配。Rank 6 = 最不匹配。

7.

叙事推进:请根据多个镜头是否清晰、连贯地形成完整故事推进,将 Sequence A–F 从最好到最差排序。请考虑事件顺序、状态变化、因果发展和镜头到镜头之间的连续性。各个镜头内、镜头到镜头之间的视觉推进不应该显得突兀跳跃。

Rank 1 = 叙事推进最好。Rank 6 = 叙事推进最差。

8.

角色一致性:重复出现的角色在身份、外观、服饰和行为角色上是否保持一致。没有外部角色参考图,只需要考虑视频推进中、镜头与镜头之间的角色形象是否保持一致性。请考虑脸部、体型、服装、配色、配饰和角色身份是否稳定。本题角色为:小女孩,老奶奶。
将 Sequence A–F 从最好到最差排序。

Rank 1 = 角色最一致。Rank 6 = 角色最不一致。

9.

风格一致性:视频是否符合故事提示词要求的风格(若提示词有相关要求),以及整个视频是否保持统一的渲染风格、色调、光照、色彩、细节程度和整体氛围。请根据不同镜头是否保持统一视觉风格,将 Sequence A–F 从最好到最差排序。

Rank 1 = 风格最一致。Rank 6 = 风格最不一致。

10.

美学质量:请根据整体视觉质量和视觉吸引力,将 Sequence A–F 从最好到最差排序。

请考虑清晰度、构图、光照、物体摆放、时间稳定性,以及是否存在明显视觉缺陷。

Rank 1 = 视觉质量最高。Rank 6 = 视觉质量最低。

请打开并观看全部六个视频序列,然后再进行排序。


Sequence A:

Sequence B:

Sequence C:

Sequence D:

Sequence E:

Sequence F:

方法名称是隐藏的。请不要猜测方法身份,只根据可见的视频内容进行评价。


故事提示词:
温暖色系风格,画面安静、怀旧、略带奇幻感,电影感镜头。角色设计保持一致。
第 1 幕:黄昏时分,一座安静荒废的山间火车站里,一个害羞的女孩抱着旧音乐盒,独自站在空站台上等待。
第 2 幕:一位年轻的男性车站管理员注意到女孩手中的音乐盒正在微微发光,露出惊讶的神情。
第 3 幕:两个人一起拧动音乐盒,柔和的光和旋律带动着记忆在空气中缓缓流动。
第 4 幕:两个人跟随着流动的光和旋律,慢慢穿过空荡荡的站台。
第 5 幕:一列发光的幽灵列车缓缓驶入车站,并短暂停靠。
第 6 幕:小女孩轻轻把带着记忆的音乐盒放回列车,让列车将音乐盒和其中的记忆一起带走。
11.

提示词与视频的一致性:请根据每个视频序列与故事 prompt 和镜头级 prompt 的匹配程度,将 Sequence A–F 从最好到最差排序。

请考虑指定事件、角色、动作、物体、情绪、场景和电影意图是否被正确呈现。

Rank 1 = 最匹配。Rank 6 = 最不匹配。

12.

叙事推进:请根据多个镜头是否清晰、连贯地形成完整故事推进,将 Sequence A–F 从最好到最差排序。请考虑事件顺序、状态变化、因果发展和镜头到镜头之间的连续性。各个镜头内、镜头到镜头之间的视觉推进不应该显得突兀跳跃。

Rank 1 = 叙事推进最好。Rank 6 = 叙事推进最差。

13.

角色一致性:重复出现的角色在身份、外观、服饰和行为角色上是否保持一致。没有外部角色参考图,只需要考虑视频推进中、镜头与镜头之间的角色形象是否保持一致性。请考虑脸部、体型、服装、配色、配饰和角色身份是否稳定。本题角色为:小女孩,男车站管理员。
将 Sequence A–F 从最好到最差排序。

Rank 1 = 角色最一致。Rank 6 = 角色最不一致。

14.

风格一致性:视频是否符合故事提示词要求的风格(若提示词有相关要求),以及整个视频是否保持统一的渲染风格、色调、光照、色彩、细节程度和整体氛围。请根据不同镜头是否保持统一视觉风格,将 Sequence A–F 从最好到最差排序。

Rank 1 = 风格最一致。Rank 6 = 风格最不一致。

15.

美学质量:请根据整体视觉质量和视觉吸引力,将 Sequence A–F 从最好到最差排序。

请考虑清晰度、构图、光照、物体摆放、时间稳定性,以及是否存在明显视觉缺陷。

Rank 1 = 视觉质量最高。Rank 6 = 视觉质量最低。

更多问卷 复制此问卷