想了解一下紫光选用词库的顺序对输出词频有什么影响

cenfit

1）想了解一下紫光选用词库的顺序对输出词频有什么影响，是否存在优先级？例如，用户词库放在最上面是否有助于打字的流畅性和首位命中率？
2）紫光默认语言模型库是否有单独文件包，想保存备用一份。


谢谢！

sanwsw

用户词库必在最上面，无法下调。
候选词是根据各词库词频大小排序，词库排序不影响候选词先后。
重复词条自动去重，以词频高者为准。

richardfsw

词库排序对候选排序的影响，貌似有过争议

默认的语言模型路径为：C:\ProgramData\unispim6\wordlib\bigram.dat
（Win7系统）

cenfit

谢谢sanwsw。
但是，我还是有一点儿不明白。
比如，我选用风版17万，你的7.4，系统默认地名词库，假如这三个词库中都有“北京”这个词语，是否以三个词库中该词最靠前的为准，然后屏蔽另外两个词库中的这两个词？例如，“北京”在三个词库在txt中显示的行数分别为10， 15， 20， 则选中10对应词库中的“北京”，屏蔽另外两个词库中的“北京”？

cenfit

词库排序对候选排序的影响，貌似有过争议

默认的语言模型路径为：C:\ProgramData\unispim6\wordlib\bigr ...
richardfsw 发表于 2012-10-7 11:36

=====
是的，路径我知道。
不过，如果用大语言模型库替换后，它就不在这个路径中了。
我是想保存备份一份。

richardfsw

=====
是的，路径我知道。
不过，如果用大语言模型库替换后，它就不在这个路径中了。
我是想保存备份一 ...
cenfit 发表于 2012-10-7 11:44

    我在替换之前就备份了^_^

san管的意思，应该是以各词库中该词词频最高的那个为准。各个候选词之间只考虑词频，不考虑词库排序和行数


刚又去看了一下，除了kingdick版主认为词库排序会影响候选排序以外，其他人多认为，仅有词频影响最终的排序结果

参见4-8楼：http://bbs.unispim.com/viewthrea ... amp;page=1#pid99971

cenfit

感谢。

野风

cenfit兄，这里是一个输入法标配的语言模型文件，请查收。

cenfit

感谢风管，刚吃完饭，下载了。

kingdick

回复 6# richardfsw


    刚刚试了一下，sanwsw的说法是对的～那么，那几个按钮就是多余了——如果不影响词条的排序，那么调整词库的上下次序就没有意义了。

krsun

看来调整词库顺序只是为了便于查看选择了那些词库。对输入没有什么实质意义。

cenfit

今天又想了一下，如果我选用两个词库，两个词库都比较喜欢，词条数量大抵相当，将它们同时添加后，还是应该让上下顺序影响一下它们结合后的词序，毕竟两个词库侧重点不同，词序和词条也不一样。
不过，这样是否影响翻译速度和输入体验呢？

紫光蓝天

不应该用两个系统词库，如果两个词库词频不同，将造成换乱

wangyanhan

cenfit 发表于 2012-10-28 11:56
今天又想了一下，如果我选用两个词库，两个词库都比较喜欢，词条数量大抵相当，将它们同时添加后，还是应该 ...

词库的词频数据，这是一个初始数据。

勾选词频、字频快速调整后，如果你始终用相同的拼音串，这个拼音串所对应的词条词频，是在随时变化的。

紫光我用的不多，发现叠加使用综合词库（总词条数120万以上，肯定重复词条多多），对响应速度没多大影响啊！你自己亲自一试，就知道了。

cenfit

谢谢两位，明白了。
如果第2个词库的“高频词”（序号10）在第1个词库属于“低频词”（序号100）时，在混合词库中，这个词相对第1个词库的词频就会提前，影响了反应速度。