arrow
返回

A Decision Tree Classification Algorithm Based on Two-Term RS-Entropy

delete2025-10-14
delete0
delete
OA
AI
R
R.S. Mao
X
Xiaoyang Shi
Z
Zhiyan Shi *
DOI:10.3390/e27101069delete
delete原文链接
delete分享
delete收藏
查看原文
摘要

摘要

En 中文
分类是机器学习领域的一个重要任务。决策树算法因其高精度、简单的算法过程和良好的可解释性,成为处理分类任务的流行选择。传统决策树算法,如ID3、C4.5和CART,主要区别在于其划分树的准则。香农熵、基尼指数和均方误差都是可作为划分准则的度量示例。然而,它们在不同数据集上的性能各不相同,使得确定最优划分准则变得困难,从而导致算法缺乏灵活性。因此,本文引入了信息论中的广义熵概念,该概念通过一个自由参数将多种划分准则统一起来,并将其作为决策树的划分准则。我们提出了一种新的决策树算法,称为RSE(RS-熵决策树)。此外,我们通过在划分准则中引入惩罚项和系数,改进了一种两项信息度量方法,从而得到一种新的决策树算法,称为RSEIM(RS-熵信息方法)。理论上,改进后的RSE和RSEIM算法由于存在多个自由参数而更具灵活性。在多个数据集上进行实验,并使用遗传算法优化参数后,我们提出的RSE和RSEIM方法在分类精度上显著优于传统决策树方法,且未增加生成树的复杂度。
Keyword:
classification
decision tree
generalized entropy
split criteria
AI总结

AI总结

对已上传原文的论文进行重点信息的提取,主要内容包括:简要概述、研究摘要、背景介绍、关键亮点、图文解析、展望与总结。

期刊

Entropy 封面图
Entropy
IF:
2
论文数:
956
被引数:
2.4W

机构

J
Jiangsu University
学者数:
4.0W
论文数: 2.8W
被引数: 5.5W
引用论文

引用论文

Boolean feature discovery in empirical learning
err1990-03-01
err0
errOAAI
errGiulia Bagallo; David Haussler
err分享
err收藏
Public transport user's perception and decision assessment using tactic-based guidelines
err2016-07-01
err21
PREAI
errNesheli, Mahmood Mahmoodi; Ceder, Avishai (Avi); Estines, Simon
err分享
err收藏
Binary multi-layer classifier
err2021-07-01
err0
PREAI
errHuanze Zeng; Argon Chen
err分享
err收藏
Machine learning identifies experimental brain metastasis subtypes based on their influence on neural circuits
err2023-09-01
err0
errOAAI
errAlberto Sanchez-Aguilera; Mariam Masmudi-Martín; Andrea Navas-Olive; Patricia Baena; Carolina Hernández-Oliver; Neibla Priego; Lluís Cordón-Barris; Laura Alvaro-Espinosa; Santiago García; Sonia Martínez; Miguel Lafarga; Michael Z Lin; Fátima Al-Shahrour; Liset Menendez de la Prida; Manuel Valiente; Cecilia Sobrino; Nuria Ajenjo; Maria-Jesus Artiga; Eva Ortega-Paino; Virginia García-Calvo; Angel Pérez-Núñez; Pedro González-León; Luis Jiménez-Roldán; Luis Miguel Moreno; Olga Esteban; Juan Manuel Sepúlveda; Oscar Toldos; Aurelio Hernández-Laín; Alicia Arenas; Guillermo Blasco; José Fernández Alén; Adolfo de la Lama Zaragoza; Antía Domínguez Núñez; Lourdes Calero; Concepción Fiaño Valverde; Ana González Piñeiro; Pedro David Delgado López; Mar Pascual; Gerard Plans Ahicart; Begoña Escolano Otín
err分享
err收藏
err分享
err收藏
err分享
err收藏
Development of a machine learning-based multimode diagnosis system for lung cancer基于机器学习的肺癌多模式诊断系统的研制
err2020-05-23
err14
errOAAI
errDuan, Shuyin; Cao, Huimin; Liu, Hong; Miao, Lijun; Wang, Jing; Zhou, Xiaolei; Wang, Wei; Hu, Pingzhao; Qu, Lingbo; Wu, Yongjun
err分享
err收藏
err分享
err收藏
A hybrid SVM based decision tree
err2010-12-01
err61
PREAI
errKumar, M. Arun; Gopal, M.
err分享
err收藏
Unified (r, s)-entropy and its bivariate measures
err1991-03-01
err0
PREAI
errPushpa N. Rathie; Inder Jeet Taneja
err分享
err收藏
学者 查看更多内容