一道有关实验设计的题目，有点长……

某生试图研究英语学习动机和认知风格对英语单词记忆效果的影响。首先，他选用了一套具有一定信，效度的应用需诶写动机量表，并对200名在校大学生进行了测试。接着，他又选出在英语学习动机量表中得分最高以及最低的大学生更30人，共计60人，并用认知风格问卷测量了这60名大学生在场独立-场依存维度上的得分。再接着，他又依据这60名大学生在场独立-场依存维度上的得分，以中位数将剩下的60名被试划分为场独立性高和场独立性低的两组。
于是，该研究的剩余被试最终被分为四组：高动机独立性（15人），高动机低独立性（20人），低动机高独立性（9人），低动机低独立性（16人）。
为了测量被试记忆单词的能力，该生选择了GRE单词中的生僻词20个，要求被试在20分钟内记住。20分钟后，给出所有20个英文单词，要求被试写出中文意思，写对中文意思的个数算做记住单词的数量。
结果发现，四组被试在记忆单词的数量上没有显著差异。该生于是作出结论，英语学习动机和认知风格对英语单词记忆效果影响不大。他还猜测，真正影响单词计息效果的因素应该是被试的一般智力水平，而非动机和人格因素。

其中几问：
实验后该生告知其室友因变量（记住单词数目）的均数是18.7，其室友立刻直言其实验操纵存在问题。你认为问题在哪里？

有人认为由于该实验自变量都是被试变量，因此该研究极度缺乏控制。你如何看待此问题？

有人认为，在“英语学习动机和认知风格对英语单词记忆效果的影响”这个研究命题中，对因变量的操作定义决定了研究的方法和思路，而该研究实际上选择了一个不恰当的操作定义。你如何看待此问题？

大家怎么看？[s:10]

1.实验后该生告知其室友因变量（记住单词数目）的均数是18.7，其室友立刻直言其实验操纵存在问题。你认为问题在哪里？

由于任务过于简单，出现天花板效应，导致因变量不敏感，得分拉不开，本来可能显著的结果变得不显著了。
这个我觉得也可以联系一下 测量里的 难度与区分度的关系解释。


2.有人认为由于该实验自变量都是被试变量，因此该研究极度缺乏控制。你如何看待此问题？

我觉得这个人的想法有道理，此实验根本就没有对自变量进行任何操作,所以严格来说算不得一个真实验,不能做因果推论.
套用我一个师兄说的话\"现在的好多所谓的心理学研究,就是拿着心理问卷做市场调查\"我觉得这个实验也有嫌疑.
再看看自变量 认知风格我们不好操纵 但是其实动机水平我们是可以操作的


3.有人认为，在“英语学习动机和认知风格对英语单词记忆效果的影响”这个研究命题中，对因变量的操作定义决定了研究的方法和思路，
  而该研究实际上选择了一个不恰当的操作定义。你如何看待此问题？

这个问题太开放了啊，对变量的操作100个研究者可能就有100种操作方法。这个研究者对记忆效果的操作显得任务过于简单，出现天花板效应，
使得其效度大大降低。所以这个操作是不恰当的。我觉得可以增加难度，或者干脆考虑记忆研究中的其它范式。
这个课题可以完全颠覆研究者原来的框架，采用比较成熟的记忆研究范式（EG：GO-NO GO ，TNT等等）来做。也就是说
这个实验完全可以设计成一个认知实验，因变量指标可以说反应时 可以是正确率 甚至可以是ERP。可以是内隐记忆也可以是外显的（根据研究目的定）。


还有就是 “英语学习动机和认知风格对英语单词记忆效果的影响” 看题目是一个2因素设计，也就是应该有2个因素，每个因素2个水平。
而研究者貌似是将这两个自变量合二为一，搞成了一个因素 四个水平，这样导致动机和认知风格分不开。
我们不知道动机的主效应显著否，风格的主效应也不知道，更不用说交换效应。
所以感觉很别扭。

原帖由 天界乌托邦 于 2009-12-14 18:12 发表
还有就是 “英语学习动机和认知风格对英语单词记忆效果的影响” 看题目是一个2因素设计，也就是应该有2个因素，每个因素2个水平。
而研究者貌似是将这两个自变量合二为一，搞成了一个因素四个水平，这样导致动机和认知风格分不开。

不同意这句话。从楼主的叙述来看，如果研究者把天花板效应给控制住的话，用两因素方差分析还是可以分析出两个主效应和交互作用的。

看题干： “结果发现，四组被试在记忆单词的数量上没有显著差异。”

这个也就是说，研究者已经把2个因素（风格和动机）揉成了一个笼统的因素（姑且叫作因素A）。
因素A有4个水平（双高 双低 高低 低高）。
只有这样，才能说“四组被试在记忆单词的数量上没有显著差异” 只有单因素4水平的数据才能这样比

如果研究者是把它看成2个各自有2水平的因素的话，那么4组数据根本就不能直接比较。而是比较主效应（不管是哪个主效应都只有2组数据啊），和交互效应。

所以我才说 研究者已经把 本来应该是一个双因素的东西 在做统计处理时 搞成了单因素。

原帖由 天界乌托邦 于 2009-12-14 18:56 发表
看题干： “结果发现，四组被试在记忆单词的数量上没有显著差异。”

这个也就是说，研究者已经把2个因素（风格和动机）揉成了一个笼统的因素（姑且叫作因素A）。
因素A有4个水平（双高 双低 高低 低高）。
...

这个……有可能方差分析过程没问题，但最后解释的时候当成一个因素了……

还有 补充一下
笔版出手比anson大方多了
80考元啊……大款都这样
不过在这个论坛混了这么久 也没弄明白
考元有什么用

55555555555~我只能给30，最多了- -

呵呵  努力升级  争做大款

原帖由 天界乌托邦 于 2009-12-14 19:01 发表
还有 补充一下
笔版出手比anson大方多了
80考元啊……大款都这样
不过在这个论坛混了这么久 也没弄明白
考元有什么用

考元是下载资料用的。每下载一个附件就扣一个考元，考元为0就不能下载附件了。
但当一个人的考元已经用不完的时候，考元就只是一种荣誉的象征了。

我看这道题的叙述本身就存在问题...