专利基本信息
| 专利名称 | 一种基于Spark大数据平台的并行CRF算法 | ||
|---|---|---|---|
| 专利状态 | 专利权维持 | 专利号(申请号) | 2018105000167 |
| 专利申请日期 | 2018-05-23 | 专利类型 | 发明专利 |
| 申请公布号 | 201810500016 | 申请公布日 | 2018-05-23 |
| 授权公告号 | - | 授权公告日 | - |
| 发明人 | - | ||
| 专利权人 | 重庆邮电大学 | ||
| 专利摘要 | 本发明请求保护一种基于Spark大数据平台的并行CRF算法,涉及数据挖掘技术和自然语言处理技术。首先,读取大规模数据集,进行数据初始化处理,将数据集划分为训练集和测试集。其次,获取特征模板,创建分布式训练数据集RDD和分布式特征模型RDD。再次,利用flatMap特征模型将训练数据转换成特征,通过整合相同的特征得到特征RDD,从而生成并行特征。然后,通过梯度计算更新特征权值,直到所有训练数据RDD更新完成,得到特征权值向量。最后,从HDFS上读取训练好的模型数据和测试数据,将测试数据执行特征抽取操作,利用特征权值向量计算得到最优预测标记序列,将输出存在HDFS中。本发明提高了CRF算法的高迭代效率。 | ||
专利价值评估分析
专利价值评估分析
样例
相关推荐
一种洗鞋机
专利号:202520654594.1
实用新型专利
一种晾衣架
专利号:CN224140552U
实用新型专利
一般用于涂层的复合材料及其制备方法
专利号:ZL201910941808.2
发明专利
感应加热干化物料装置及其干化方法
专利号:201910337366.0
发明专利
一种拖拉机悬挂限位装置
专利号:ZL2025 2 1607929.0
实用新型专利
一种锂电池用硫酸乙烯酯的制备方法
专利号:ZL202111304960.3
发明专利
一种浅碟型串珠状波浪式排土场截排水系统
本发明公开了一种浅碟型串珠状波浪式排土场截排水系统,包括:坡面降雨防溅击治理区、坡面降雨防溅击治理区...
行业:环境治理业
一株嗜热链球菌菌株及其用途
本发明涉及一种嗜热链球菌(Streptococcus#thermophilus)IMAU80841及...
行业:研究和试验发展
富产胞外多糖的嗜热链球菌的快速筛选方法及实现所述方法的联合基因核酸序列
本发明提供含有嗜热链球菌的功能基因epsA、epsC和epsD的联合基因核酸序列在筛选富产胞外多糖的...
行业:其他农副食品加工
一种干酪乳杆菌及其在固态发酵中的应用
本发明涉及一种干酪乳杆菌及其在固态发酵中的应用。所述干酪乳杆菌(Lactobacillus case...
行业:食品制造业
一种提高光伏架下牧草种子产量的方法
本发明公开了一种提高光伏架下牧草种子产量的方法,其特征是:对光伏架下种植牧草的土壤施以微生物菌肥。本...
行业:研究和试验发展
一种捕食线虫性真菌的培养方法
本发明属于微生物学领域,提出一种捕食线虫性真菌的培养方法,包括步骤:1)在无菌条件下,将生长在玉米粉...
行业:生物药品制品制造


资源加工
产业分析服务
科技招商
评估评价
经纪赋能
科技活动
智能制造
企业服务
专业经纪服务