十一月上旬更新速递丨 数据与 AI 技术深耕、场景应用拓展与开发进阶实战

秋意正浓时,智能征程不止步!十一月上旬欢度14周年,聚焦数据与AI领域的知识深化、场景化应用落地、技术开发进阶,从理论到实战的全链路能力提升!

一、14周年活动

《14周年·探索乐章 | 寻藏宝图,挖掘社区金矿(已更新1-9关卡)开启一场知识寻宝探险之旅,重温与思迈特并肩成长的温暖时光!

《14周年·温情乐章|写下专属祝福,传递温暖情谊为思迈特14周年注入一份温度,也为这份同行之谊添上一抹亮色!

《14周年·荣誉乐章 | 星光致敬,表彰贡献榜样→回馈大家对社区生态的倾心建设,感谢每一位共建者的热忱与坚守!

二、场景应用

《构建“战略-业务-数据”三层指标体系(体系篇)》→“战略-业务-数据”三层指标体系是AIChat听懂的坚实的底层支撑。

三、术经验分享

《【专家分享】用Smartbi快速搞定数据刷新,老板看了都说好!》→掌握了数据刷新“提速”秘籍:告别滞后,让数据“实时在线”!

《【专家分享】数据排序的“权力游戏”:优先级规则决定谁先谁后》→提供了数据排序指南:破解多指令冲突,明确 “谁先生效”!

四、二次开发视频

扩展包开发前端改造了解前端改造的基本方法与实现流程、如何在Smartbi扩展包中修改CSS样式、扩展JS组件。

、任务持续上线

《【场景实战】数据驱动决策全流程实战:dws层数据处理》→深入数据决策,提升数据整合与维度设计能力,挑战成功即可获得麦豆奖励!

《【AIChat入门闯关计划】-随机掉落小测试》→快速检验AIChat知识漏洞,巩固核心概念。接受挑战即可获得麦豆奖励。

为进一步提升认证服务的质量与体验,我们对认证业务进行全面优化升级。更多详情请看Smartbi认证考试优化升级公告

麦粉社区
>
帖子详情

【AI每日一学】什么是训练集?什么是验证集?什么是测试集?

AIChat 发表于 2025-7-21 11:02
发表于 2025-7-21 11:02:01

麦粉集合!AI实战落地系列第十七弹极速启航!


         上回我们深入剖析了机器学习的四大"驾驶模式"——监督、无监督、半监督与自监督学习,就像掌握了不同路况的通行法则。而今天要揭秘的是"训练赛道"的黄金分割术——当模型踏上学习之旅,如何科学划分数据资源才能跑出最佳成绩?答案就在训练集、验证集与测试集的战略分工中!


         按照老规矩,先来一场知识巩固小测试,还有小福利哦:一周内答对的前三名的麦粉,奖励20麦豆!答案藏在上期神帖【简单总结一下机器学习中的几种常见的学习方式与区别】中~


AI知识问答(知识巩固)


1、监督学习的核心痛点是什么?


A. 模型结构复杂


B. 需大量人工标记数据


C. 无法发现数据隐藏规律


D. 仅支持分类任务


2、无监督学习最适合处理哪类任务?


A. 房价预测


B. 客户群体聚类


C. 图像分类


D. 股票涨跌预测


3、自监督学习如何减少对标注数据的依赖?


A. 通过数据自身生成监督信号


B. 融合半监督学习框架


C. 增加模型参数量


D. 采用强化学习机制


       


         通过这场测试,相信大家对"学习方式"的战略选择已了然于心!现在,我们直击模型训练的核心战场——如何用三大数据集为AI打造"训练-调试-终测"的全流程闭环?今日干货再度拉满,系好安全带,出发!


什么是训练集?什么是验证集?什么是测试集?(今日学习)


在机器学习和深度学习中,训练集、验证集和测试集是用于模型训练、评估和调优的不同数据集,以下是它们的具体介绍:


训练集


-定义:


是用于训练机器学习模型的数据集,包含了大量的输入特征和对应的目标输出,模型通过学习训练集中的数据来调整自身的参数,以尽可能准确地预测目标输出。


 


-作用:


让模型学习数据中的模式和规律,例如在一个预测房价的模型中,训练集包含了房屋的各种特征(面积、房间数等)以及对应的实际房价,模型通过对训练集的学习,建立起房屋特征与房价之间的关系。


 


验证集


-定义:


在模型训练过程中,用于评估模型性能和调整超参数的数据集。它不参与模型的训练过程,而是在训练过程中定期用来验证模型的泛化能力。


 


-作用:


帮助选择最优的模型超参数,防止模型过拟合。例如,在选择神经网络的层数、学习率等超参数时,可以通过观察模型在验证集上的性能表现来确定最佳的取值。


 


测试集


-定义:


在模型训练和调优完成后,用于最终评估模型性能的数据集。它是模型在训练过程中从未见过的数据,能够真实地反映模型在实际应用中的泛化能力。


 


-作用:


提供一个客观的评估指标,如准确率、召回率、均方误差等,来衡量模型的优劣。例如,一个图像分类模型在测试集上的准确率为90%,就表示该模型在对新的、未见过的图像进行分类时,预计有90%的图像能够被正确分类。


 


注解说明


超参数



  • 定义:模型训练前设定的参数,如学习率、网络层数,影响模型学习效果和速度。

  • 作用:超参数是机器学习模型中的“控制旋钮”,它们通过调整模型的复杂度、训练过程和泛化能力,直接影响模型的性能和效率。


过拟合



  • 定义:指的是模型在训练集表现好,但在新数据上差,即过度适应训练数据,泛化能力弱。过拟合通常是由于模型过于复杂或者训练数据量过少导致的。


 


特大消息!AIChat体验环境正式上线!


在这里,你可以尽情体验Smartbi 白泽 AIChat产品的强大功能,感受智能交互带来的便捷与乐趣。


体验中心入口:


AIChat体验环境(点击即可开启奇妙之旅)


帮助中心入口:


AIChat帮助中心遇到问题随时查阅)


相关学习视频:



欢迎大家前来体验~


 

发表于 2025-7-22 08:37:07
B,B,A
打赏人数1麦豆 +20 收起 理由
Smartbi社区管理员 + 20

查看全部打赏


回复

使用道具 1 举报

发表于 2025-7-22 08:55:27

賺點積分

回复

使用道具 举报

发表于 2025-7-22 13:55:17
B、B、A
打赏人数1麦豆 +20 收起 理由
Smartbi社区管理员 + 20

查看全部打赏


回复

使用道具 1 举报

发表于 2025-7-22 13:57:15
答案是 BBA
打赏人数1麦豆 +20 收起 理由
Smartbi社区管理员 + 20

查看全部打赏


回复

使用道具 举报

发表于 2025-7-28 09:00:06

BBA


回复

使用道具 举报

发表于 2025-8-2 15:05:02
答案是
BBA
回复

使用道具 举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

10回帖数 0关注人数 1403浏览人数
最后回复于:2025-8-2 15:05
快速回复 返回顶部 返回列表