搜索结果: 1-1 共查到“信息与通信工程 文本数据”相关记录1条 . 查询时间(0.128 秒)
中国科学院计算机网络信息中心专利：一种高效的文本数据挖掘方法
中国科学院计算机网络信息中心 专利 文本数据 挖掘方法
2023/8/24
本发明公开了一种高效的文本数据挖掘方法，属于信息技术领域。本方法为：1)文件预处理阶段将内容经分词后的原文件合并为若干新文件；2)数据映射阶段计算每一词语在新文件中的总频数、在其中每一原文件中的频数及相对频率pr等，并将结果发送到重定向模块中；3)重定向阶段计算每一Reduce任务的负载量payload，并为每一Reduce任务设置一负载指示器payi；4)判断当前词语是否已分配了Reduce任务...