公共文化服务平台

共 1 条记录，以下是 1-1

全选清除导出

排序方式：

一种基于MapReduce的改进文本输入方式的并行分词方法研究: 2016年; 中文分词方法都属于串行分词方法，不能处理海量数据。提出一种基于M印Reduce的并行分词方法。Mapreduce程模型默认使用TextI印utFomat文本输入方式，该方式不适合处理大量文本文件。首先基于CombineFilelnputFormat类，自定义文本输入方式MylnputFormat，并在实现createRecordReader方法过程中返回RecordReader对象。其次自定义MyReeordReader类来说明读取文本〈key，value〉键值对的具体逻辑。最后自定义MapReduce函数实现不同类别文本的分词结果。实验证明，基于改进后的MylnputFormat文本输入方式比默认的TextlnputFormat输入方式，更能处理大量文本文件。; 徐宏博赵文涛孟令军

全选清除导出

共1页<1>

徐宏博