网易首页 > 网易号 > 正文 申请入驻

ML:无监督学习数据集的基本结构

0
分享至

从机器学习建模角度看,一个无监督学习数据集(unsupervised learning dataset)通常只包含样本的特征信息,而不包含用于训练的标签信息。其核心数据结构通常是特征矩阵(feature matrix)。

与监督学习不同,无监督学习的数据集中通常不包含标签数组(target array)。模型需要仅根据数据本身的结构去发现潜在规律,例如:

• 样本之间的相似关系

• 数据的聚类结构

• 数据的低维表示

• 异常或离群样本

为了便于理解数据含义,数据集仍可能提供一些附加说明信息,例如:

• 特征名称(feature names)

• 数据说明(dataset description)

下面分别介绍这些概念,并使用 Scikit-Learn 自带的葡萄酒数据集(Wine dataset) 进行说明。

一、特征矩阵

1、基本概念

在无监督学习中,数据通常以特征矩阵(feature matrix)的形式提供。

每个样本由多个特征(feature)描述。例如,一个样本可能包含:

• 长度

• 宽度

• 密度

• 温度

如果一个数据集中有 n 个样本,每个样本有 m 个特征,那么这些特征就会组成一个二维矩阵:

]

其中:

• 每一行表示一个样本

• 每一列表示一个特征

因此矩阵维度为:

(n_samples, n_features)

即:

(样本数, 特征数)

特征矩阵通常记为 X,它是无监督学习算法的输入数据。

在实际应用中,特征矩阵通常来自:

• 数据表(CSV、Excel 等)

• 数据库查询结果

• 传感器采集数据

• 从原始数据中通过特征工程提取出的数值特征

2、葡萄酒数据集示例

Scikit-Learn 提供了葡萄酒数据集,其中包含 178 个样本,每个样本包含 13 个化学特征。

需要说明的是,Wine 数据集本身是一个监督学习分类数据集,但在无监督学习示例中,我们通常只使用其特征矩阵 data,忽略 target。

查看特征矩阵:

print(wine.data[:3])     # 前三个样本

示例输出:

 [13.16  2.36  2.67 ...]]

wine.data 就是特征矩阵(二维 ndarray 数组),形状 (178, 13) 表示样本数为 178,每个样本的特征数为 13。

二、无监督学习中没有标签

1、基本概念

在监督学习中,每个样本都对应一个标签:

y

例如:

y = [0,0,1,1,2,...]

但在无监督学习中,数据通常没有预先标注的标签。算法需要仅根据特征矩阵 X 去发现数据的内部结构,例如:

• 自动将样本分成若干组(聚类)

• 找到主要变化方向(降维)

• 识别异常样本(异常检测)

在无监督学习任务中,模型训练通常只使用特征矩阵 X,而不会使用标签 y。

2、Scikit-Learn 数据集中的情况

需要注意的是,Scikit-Learn 的一些数据集仍然提供 target 字段,这是为了方便进行:

• 数据分析

• 可视化验证

• 算法评估

例如:

print(wine.target[:10])

示例输出:

[0 0 0 0 0 0 0 0 0 0]

但在真正的无监督学习任务中,这些标签通常不会参与模型训练。

例如 KMeans、PCA 、DBSCAN 等算法通常只使用 X,而不会使用 y。

三、特征名称

1、基本概念

特征矩阵中的每一列表示一个特征,但这些特征通常具有具体含义。

例如:

• 酒精含量(alcohol)

• 苹果酸(malic acid)

• 灰分(ash)

为了说明这些特征的含义,数据集通常提供特征名称(feature names)。

其结构通常是一个字符串列表(或字符串数组):

['feature1', 'feature2', ...]

特征名称可以帮助我们理解每一列数据所表示的实际意义。

2、葡萄酒数据集示例

查看特征名称:

print(wine.feature_names)

输出示例:

 ...]

wine.feature_names 给出了每个特征的名称(共 13 个),并与 wine.data 的列顺序一一对应。例如:

data[:,1] → malic_acid

四、数据说明

1、基本概念

很多机器学习数据集还会提供背景说明信息,例如:

• 数据来源

• 数据收集方式

• 样本数量

• 特征解释

这些信息对于理解数据背景非常重要。因此,数据集通常会提供数据说明(dataset description)。

2、葡萄酒数据集示例

查看数据说明:

print(wine.DESCR[:200])

wine.DESCR 是一个字符串(str),包含数据集的完整说明文档,内容通常较长,因此只显示前 200 个字符。其中通常包括:

• 数据来源

• 数据集规模

• 特征说明

五、无监督学习数据集结构关系

一个典型的无监督学习数据集通常可以表示为:

      └── 解释数据来源与结构

在 Scikit-Learn 的数据集中,这些内容通常分别对应:

数据说明    → DESCR

需要注意的是,一些数据集仍然包含:

target_names

但在无监督学习任务中,这些信息通常不会参与模型训练。

小结

在无监督学习数据集中,最核心的数据结构是特征矩阵 X,它描述了每个样本的多个特征。与监督学习不同,无监督学习在训练过程中通常不使用标签数组 y,而是通过分析 X 的内部结构发现潜在模式,例如聚类结构或低维表示。为了帮助理解数据含义,数据集还可能提供特征名称和数据说明。在 Scikit-Learn 中,这些信息通常对应 data、feature_names 和 DESCR 等字段。


点赞有美意,赞赏是鼓励

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
一个国家能蠢到什么程度?看看法国就明白了:法国黑人接近800万,巴黎新生儿里70%是黑人

一个国家能蠢到什么程度?看看法国就明白了:法国黑人接近800万,巴黎新生儿里70%是黑人

怪味历史连连看
2026-09-08 01:55:32
【美股盘前】美联储凌晨公布利率决议;英特尔涨超5%,SK海力士涨超3%,双方据称拟首次在美合产存储芯片;光通信股普涨,Lumentum涨超2%;扎克伯格公开反对“AI减速论”

【美股盘前】美联储凌晨公布利率决议;英特尔涨超5%,SK海力士涨超3%,双方据称拟首次在美合产存储芯片;光通信股普涨,Lumentum涨超2%;扎克伯格公开反对“AI减速论”

每日经济新闻
2026-09-16 17:33:09
这些人要发抖了!中纪委再次出动,剑指这些歪风和腐败问题!

这些人要发抖了!中纪委再次出动,剑指这些歪风和腐败问题!

细说职场
2026-09-16 16:03:59
23次触球0射门:曼联新援66分钟灾难表现,红魔联赛杯出局

23次触球0射门:曼联新援66分钟灾难表现,红魔联赛杯出局

晚风知我意21
2026-09-17 05:16:55
中方访美前夕,特朗普公开表态,台当局不敢相信是真的:听听就好

中方访美前夕,特朗普公开表态,台当局不敢相信是真的:听听就好

有范又有料
2026-09-15 21:30:25
太反常!沉寂8年的33亿小盘股,竟被陈发树和外资巨头重仓

太反常!沉寂8年的33亿小盘股,竟被陈发树和外资巨头重仓

慧眼看世界哈哈
2026-07-12 10:01:59
赵丽颖和缅甸导演be了!富贵花的和解金3000W!

赵丽颖和缅甸导演be了!富贵花的和解金3000W!

八卦疯叔
2026-08-29 10:00:07
直到今天美国才发现,当年冻结俄罗斯3000亿外汇,竟成了本世纪最臭的一步棋

直到今天美国才发现,当年冻结俄罗斯3000亿外汇,竟成了本世纪最臭的一步棋

坠入二次元的海洋
2026-09-02 09:20:36
网购电动车为啥比线下便宜一半?内行人:一半是省钱,一半是坑

网购电动车为啥比线下便宜一半?内行人:一半是省钱,一半是坑

电动车的那些事儿
2026-09-14 07:52:36
“还不分床,等着看德国骨科?”家长晒姐弟俩午睡一幕,让过来人直言:你会后悔的

“还不分床,等着看德国骨科?”家长晒姐弟俩午睡一幕,让过来人直言:你会后悔的

妍妍教育日记
2026-09-14 21:18:41
陪睡陪玩只是开胃菜,舔手指塞拳头、集体嫖娼、背后的事藏不住了

陪睡陪玩只是开胃菜,舔手指塞拳头、集体嫖娼、背后的事藏不住了

北海史记
2026-08-12 19:57:54
211毕业生卖二手机,团队年营业额2000万,坦言存储涨价成本走高,但当前线上客源未受影响

211毕业生卖二手机,团队年营业额2000万,坦言存储涨价成本走高,但当前线上客源未受影响

大风新闻
2026-09-15 20:04:06
5天两大重磅信号!祖国统一,已经迈入落地实操阶段

5天两大重磅信号!祖国统一,已经迈入落地实操阶段

再战五百回合
2026-09-16 14:26:05
华为宣布AI助理小艺Work开启内测!办公、代码、设计样样精通

华为宣布AI助理小艺Work开启内测!办公、代码、设计样样精通

快科技
2026-09-16 10:51:10
欧美挖的比特币大坑,中国绕着走过去了,回头一看坑里都是自己人

欧美挖的比特币大坑,中国绕着走过去了,回头一看坑里都是自己人

尘世闲云
2026-09-01 05:12:01
醒醒吧 明年大批燃油车将迎来全面大换新,谁说油车要被电车取代?

醒醒吧 明年大批燃油车将迎来全面大换新,谁说油车要被电车取代?

三农老历
2026-09-14 11:55:01
深一度|在世界最难超长越野赛创纪录夺冠的赵家驹,到底是谁

深一度|在世界最难超长越野赛创纪录夺冠的赵家驹,到底是谁

澎湃新闻
2026-09-16 13:31:05
广东男子发现“爬行界大熊猫”,野外种群不足1400只!网友却说他经常遇到?

广东男子发现“爬行界大熊猫”,野外种群不足1400只!网友却说他经常遇到?

狸猫之一的动物圈
2026-09-16 09:54:49
紫牛热点|广东珠海长隆虎鲸多次用头撞击玻璃?工作人员:已接到游客反映,具体原因有待专业人士回复

紫牛热点|广东珠海长隆虎鲸多次用头撞击玻璃?工作人员:已接到游客反映,具体原因有待专业人士回复

扬子晚报
2026-09-16 21:24:43
5球2助攻,巴萨中场用6场把自己踢回西班牙队

5球2助攻,巴萨中场用6场把自己踢回西班牙队

赛场速报局
2026-09-17 02:46:06
2026-09-17 05:39:00
MediaTea
MediaTea
专业的数字媒体、新媒体技术
2180文章数 86关注度
往期回顾 全部

科技要闻

赛力斯接管问界,撑得住华为给的身价吗?

头条要闻

3000万房产要拆迁 女子意外发现丈夫有16岁私生子

头条要闻

3000万房产要拆迁 女子意外发现丈夫有16岁私生子

体育要闻

对话西甲联盟高管:西班牙足球到底强在哪?

娱乐要闻

乔任梁去世十周年,陈乔恩悼念

财经要闻

邢自强:中美AI决胜点不在算力

汽车要闻

激光雷达+EVA机器人+爆胎稳行 星瑞L PLUS预售限时价11.57万起

态度原创

家居
游戏
数码
手机
公开课

家居要闻

2026建博会(广州) 公装联探展交流活动

《暗黑4》新赛季正式上线 此前因服务器问题短暂延期

数码要闻

实测iPhone 18 Pro 15分钟充至57% SPR AVS快充首次落地

手机要闻

iPhone Duo不支持平板微信:网友被劝退

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版