做个自动判断作文coherence的程序有希望吗？
- 主题发起人 uqcaven
- 时间
Haiyang Ai
Administrator
回复: 做个自动判断作文coherence的程序有希望吗？
我认为这个想法挺好。大致的思路是怎么样的呢？
如果出 beta 版，我愿意做测试。
我认为这个想法挺好。大致的思路是怎么样的呢？
如果出 beta 版，我愿意做测试。
回复: 做个自动判断作文coherence的程序有希望吗？
我想最好是不需语料库训练的那种软件。 ETS有类似的软件， 可是必须有人工打分的大量语料进行训练， 而且每个不同的写作任务有不同的训练语料。 这样对于实际教学太麻烦， 平时教学哪里去找这么多人力资源呀。
所以思路第一点，不需训练语料。
我想最好是不需语料库训练的那种软件。 ETS有类似的软件， 可是必须有人工打分的大量语料进行训练， 而且每个不同的写作任务有不同的训练语料。 这样对于实际教学太麻烦， 平时教学哪里去找这么多人力资源呀。
所以思路第一点，不需训练语料。
清风出袖
高级会员
回复: 做个自动判断作文coherence的程序有希望吗？
1. 利用现成的考试作文语料库来验证：因为coherence在一定程度上能够指针作文总的质量 （ETS有类似研究），这个软件的分析结果也应该能够反映作文的整体质量。 在CLEC中的CET4，CET6都有得分的；即将出版的专业英语4，8级的语料库也是包含有成绩的； 国家考试中心也有高考英语作文的一个小语料库； 这些语料库应该能够代表不同水平层次。
2. 实际课堂教学：应用到实际课堂写作教学， 看这个软件产生的Feedback能否帮助学生提高coherence。
暂时想到这么多。 我的’砖头‘抛了， 等‘玉’了。。。 ^_^
1. 利用现成的考试作文语料库来验证：因为coherence在一定程度上能够指针作文总的质量 （ETS有类似研究），这个软件的分析结果也应该能够反映作文的整体质量。 在CLEC中的CET4，CET6都有得分的；即将出版的专业英语4，8级的语料库也是包含有成绩的； 国家考试中心也有高考英语作文的一个小语料库； 这些语料库应该能够代表不同水平层次。
2. 实际课堂教学：应用到实际课堂写作教学， 看这个软件产生的Feedback能否帮助学生提高coherence。
暂时想到这么多。 我的’砖头‘抛了， 等‘玉’了。。。 ^_^
清风出袖
高级会员
回复: 做个自动判断作文coherence的程序有希望吗？
可是怎么来界定coherence 呢？其实高考，还有四六级作文一般采取global scoring的办法，总以为语料库似乎帮不了什么忙。
可是怎么来界定coherence 呢？其实高考，还有四六级作文一般采取global scoring的办法，总以为语料库似乎帮不了什么忙。
回复: 做个自动判断作文coherence的程序有希望吗？
秦始皇出巡，哪里想到路边种田的老乡在议论说：可取而代之也。不过，有过这个想法或说过这话的老乡也许成千成万，真的动手干的也许有几十、几百个，最后终于成功的也许只有一个，或者根本没有。
秦始皇出巡，哪里想到路边种田的老乡在议论说：可取而代之也。不过，有过这个想法或说过这话的老乡也许成千成万，真的动手干的也许有几十、几百个，最后终于成功的也许只有一个，或者根本没有。
Haiyang Ai
Administrator
清风出袖
高级会员
回复: 做个自动判断作文coherence的程序有希望吗？
wow wow
I'm glad to hear that.
I guess you must have read a lot of papers by Daniel Marcu. And also the patent files by Burnstein et al. for the ETS e-rater.
Kindly please keep me informed
如果我说我已经完成了这个软件及其Pilot study， 有人相信吗？
完成ethical clearance, 就要投入classroom－based evaluation.
wow wow
I'm glad to hear that.I guess you must have read a lot of papers by Daniel Marcu. And also the patent files by Burnstein et al. for the ETS e-rater.
Kindly please keep me informed