资讯 社区 文档

零代码产线

模型产线介绍

零代码产线是AI Studio星河社区为开发者提供的基于图形用户界面(GUI)的全流程高效模型训练与部署工具。开发者无需代码开发经验,只需要准备符合产线要求的数据集即可快速启动模型训练。

创建产线

模型产线创建入口:https://aistudio.baidu.com/pipeline/mine ,可通过点击一级导航栏「模型」快速进入,点击右上角「创建产线」 image.png

1. 选择产线

我们以目标检测任务场景为例,为产线命名后进入选择产线页面。场景内提供两条产线选择:通用目标检测 与 大模型半监督学习-目标检测,大模型半监督学习是飞桨特色的模型训练方式,支持引入无标签数据,得到精度更高的模型权重,该训练方式需要消耗更多算力和时间,适合对精度要求较高的用户。

image.png

在线体验

为了对模型方案的效果有更直观的体验,产线内支持用户呼起弹窗,上传测试样例体验模型效果。如果对模型方案的效果满意,可以选择点击「直接部署」按钮,使用官方模型权重部署与使用;如果想要在自己的数据集上进行训练/微调,可点击下一步进行数据准备。

image.png

2. 数据准备

用户首先需要选择本产线要训练的模型,当前模型产线仅支持单模型训练。模型选型可以参考右侧的操作须知-模型选择说明。 image.png

接下来需要按照数据集格式要求准备训练数据,支持用户上传数据包,或导入已经通过校验的数据集。

image.png

请注意,为确保模型可以正确读取数据集进行训练,只有通过数据校验的数据集才能进入下一步,同时会保存为结构化的数据集,支持在其他产线中导入。

3. 参数准备

正确设置训练参数对于模型训练至关重要,产线支持两种参数设置方式:修改表单和修改配置文件,常见训练参数推荐使用表单修改,可展开高级设置修改更多参数,对飞桨套件参数较熟悉的用户可以通过表单修改全部训练参数。训练模型的基础配置和高级配置参数如下:

基础配置

  • 轮次(Epochs):模型对训练数据的重复学习次数,一般来说,轮次越大,模型训练时间越长,模型精度越高,但是如果设置特别大,可能会导致模型过拟合。如果对轮次没有特别的要求,可以使用默认值进行训练。
  • 批大小(Batch Size):由于训练数据量一般较大,模型每轮次的训练是分批读取数据的,批大小是每一批数据的数据量,和显存直接相关,批大小越大模型训练的速度越快,显存占用越高。为确保训练不会因为显存溢出而终止,我们将 V100 32G 单卡可以运行的最大值作为批大小的可设置最大值。
  • 类别数量(Class Num):数据集中检测结果的类别数,由于类别数量和数据集直接相关,我们无法填充默认值,请根据数据校验的结果进行填写,类别数量需要准确,否则可能引起训练失败。
  • 学习率(Learning Rate):模型训练过程中梯度调整的步长,通常与批大小成正比例关系,学习率设置过大可能会导致模型训练不收敛,设置过小可能会导致模型收敛速度过慢。在不同的数据集上学习率可能不同,对结果影响较大,需要不断调试。

高级配置

  • 断点训练权重:在模型训练过程中发生人为或意外终止的情况时,加载训练中断之前保存的断点权重路径,完成继续训练,避免算力资源浪费。
  • 预训练权重:基于已经在大数据集上训练好的模型权重进行微调训练,可提高模型训练开始前的初始经验,提高训练效率。
  • 热启动步数(WarmUp Steps):在训练初始阶段以较小学习率缓慢增加到设置学习率的批次数量,该值的设置可以避免模型在初始阶段以较大学习率迭代模型最终破坏预训练权重,一定程度上提升模型的精度。
  • log 打印间隔(Log Interval) / step:训练日志中打印日志信息的批次数量间隔。
  • 评估、保存间隔(Eval Interval) / epoch:训练过程中对验证集进行评估以及保存权重的轮数间隔。

4. 提交训练

训练套餐包括:

  • V100 32G 1卡 3算力点/小时
  • V100 32G 1卡 30A币/小时
  • V100 32G 4卡 120A币/小时
  • V100 32G 8卡 240A币/小时

支持用户选择算力点或 A 币支付 GPU 使用花费。您可以根据自己的需求和平台 GPU 占用情况选择合适的训练套餐。

为鼓励更多用户体验模型产线新功能,每个账户赠送 3 张限时免费卡,前三次使用 V100 32G 1卡 30A币/小时训练套餐免费,之后将按对应训练时长计费,此外,训练过程中主动停止或因配置信息有误导致的训练失败,限免卡不返还。

产线详情页

提交训练后,页面会刷新为产线详情页,展示用户设置的全部训练配置信息,包括:产线模板、微调模型、训练参数配置、数据集、输出路径、资源选择和任务状态。

当 GPU 集群可以执行训练任务时,任务状态显示为运行中,日志详情实时打印当前训练 log;当 GPU 集群暂无资源执行训练任务时,任务状态显示为排队中,此时可选择取消排队,返回配置中状态,如使用限免卡,限免卡会原路返还。

image.png

产线评估

产线状态为完成态(含运行成功、已停止、运行失败)时,产线内通常有结果产出,支持用户对产出的模型权重进行评估。训练中使用验证集评估的结果被提前保存,以表单的形式展示在评估页面,方便用户查看和标记模型权重。

注:直接部署的产线无产出结果,仅提供官方权重,不支持评估。大模型半监督学习的特点是引入用户的无标签数据集进行训练,因此不提供官方模型权重,不支持直接部署,需训练后评估模型权重。

标记模型权重

每条产线产出的模型权重通常不止一个,为方便用户查找和管理,您可以在这里对满意的模型权重做个标记,并为它取一个昵称(例如:数据集A评估最佳)。标记过的模型权重支持跨产线导入,也就是说,您可以在其他产线的同模型名选择权重(如模型部署、断点训练)的下拉菜单中,找到在本产线标记过的权重。当然,权重也可以取消标记,以减少选择成本。

image.png

创建评估任务

除了在验证集上评估模型权重外,如果您还有一批新的测试数据,可以选择自定义测试集的方式,上传测试数据并进行评估。请注意数据集的格式要求与训练数据集相同,但此处不会进行数据校验,如果数据格式存在问题,可能会引发评估任务失败。

历史评估任务的设置信息与日志会完整保留,可以通过历史记录查看详细情况。

产线部署

本产线支持两种部署方式:在线服务化部署和导出离线部署包。您可以根据自己的实际需求选择合适的部署方式,使用您满意的模型方案。

在线服务化部署

服务化部署指的是将模型方案部署为一个云端可调用 API,服务成功运行后,您可以使用自己的访问令牌鉴权后调用 API。此外,在线体验的应用中也可以找到这个 API 进行小样本可视化测试哦。

注:这种方式适用于数据不敏感且无部署机器的用户使用,API 为用户私有,仅能通过用户个人的访问令牌鉴权后调用。

image.png

导出离线部署包

如果您有离线部署的需求,产线也支持用户导出离线部署包。与在线服务化部署不同的是,您需要选择本地运行环境,产线会依据运行环境的不同导出相应的部署包,支持用户下载后本地运行。

image.png

此外,特色产线的离线部署包需付费使用,请在产线内购买部署包序列号,本地激活后使用。购买注意事项及商务对接,可点击产线内对应的咨询入口。

上一篇
快速开始
下一篇
自定义代码

相关内容推荐

制作导航网站多少钱医学网站制作美食一不留神电影网站制作宁波网站制作在哪里扬中企业网站制作公司app制作网站搭建是什么可以制作铃声的网站湖州一个预约体检网站怎么制作心跳设计师网站制作制作传奇版本补丁挑选网站淄博网站制作高端定制ppt能制作网站吗微信头像设计制作网站网站制作公司负债率制作美食网站哪个好代码网站怎么制作张家港网站制作服务制作网站可以卖东西吗游戏界面制作网站商丘怎么制作网站头像制作网站软件html电影网站制作代码美美家具网站制作制作网站例子用ps制作一个网站首页界面宣传部网站制作贴纸青岛网站制作有限公司网站制作10条建议情人网站制作小玩具ps网站首页图片制作vs2005网站制作制作公司网站需要注意哪些法律报价网站制作商城网站制作大概多少钱情侣图片在线制作网站关于济南旅游的网站制作湘西微网站制作幻灯片制作怎么超链接到网站沈阳承接网站制作恶魔网站制作冰淇淋国外制作网站q版卡通头像制作网站巴盟网站制作哪家好二级单位网站制作自学能学会网站制作吗华容区网站制作企业哪里有卖网站操作指南如何制作中注协网站制作起泡头像制作网站哪个好用网站制作选超速云建站效果好景德镇制作网站价格怎么样制作音乐网站简阳网站制作优化费用恩平外贸营销型网站制作网站制作需要哪些人建立网站的一般制作顺序将相和教案网站制作昆明网站制作首选互维义乌纹身网站制作需要多少钱抚州制作网站设计一般多少钱网站怎么制作文字框网站制作图片导航公众号动态图制作网站宝安百科网站制作都有哪些长治企业网站制作设计邛崃专业网站制作绍兴网站制作多少钱滨州网站制作企业潞城企业网站制作怎么拿python制作网站揭阳怎么制作网站规划网站制作清溪网站制作价格黄华简历制作网站桐乡有什么网站可以制作python制作网站的编译器鞋网站制作哪正规食物网站制作flash网站制作成app软件CNKI翻译网站制作海盐信息网站制作哪里好宿迁外贸网站制作推广山东机票网站制作长春网站制作有名吉网传媒优易经网站制作镇沅网站制作米尔图库网站制作哈医大一院网站制作壁纸英皇网站制作手工道歉信模板网站制作经验丰富的网站制作联系方式诺亚舟网站制作美食网站制作 转发微信湖北商城网站制作网站制作css字体放大宁波鄞州区高端网站制作河南定制网站制作多少钱如何制作网站数据白坭企业网站制作IC网站制作小玩具项目实战 制作门户网站洮南响应式网站制作闪艺制作工具网站html5制作网站代码网站制作新闻图片轮播代码移动单页网站制作流程图APPLE网站制作美食制作诗歌网站快闪 制作 网站丁香网站制作雪糕贴图库网站制作南京高端网站制作公司哪家好制作网站显示不出图片大全宿松网站优化制作公司邹平外贸英文网站推广制作井冈山外贸网站制作高清视频制作的网站ASP网站制作美食如何制作营销型网站图片彩票网站好制作吗唐山民宿行业网站制作用手机制作网站视频教程洛宁网站外包门头制作WWE网站制作贴纸制作手工网站泰州姜堰手机网站制作恶gif制作网站制作结婚证的网站鹤山网站建设制作价格网站制作博彩天津制作企业网站的公司辉县微网站制作东营电商网站制作海尔集团网站制作奶茶微信网站表白制作个人简历制作网站免费下载龙陵网站制作东森网站制作教程简述个人网站制作的流程简易电子商务网站制作网站首图制作养老网站制作表格红警网站制作表格怎么制作资源网站仁怀营销网站制作公司山西网站设计制作lolita制作网站银川外贸网站制作自适应网站制作过程网页制作教程免费学习网站奇奇动漫网站制作淄博网站制作公司服务网站制作csdn黄石微信公众号网站制作孝义织梦双语网站怎么制作网站制作培训费用多少钱山西模板网站制作衡水专业网站制作架设网站视频制作单页广告网站制作制作电影网站源码上传图纸网站制作恋爱制作人日文网站都江堰网站制作定做可以自己制作壁纸的网站网站制作公网站制作贺州网站制作推广湖北免费网站制作秦皇岛网站制作ppt软件瑞安重庆网站制作多少钱淄博网站制作托管推广拍卖系统网站制作制作买车网站模板江门外贸网站制作公司地址保存在哪制作网站北京建委网站制作不会写代码如何制作网站2019新年贺卡制作网站恶gif制作网站磐安网站制作案例涟水网站建设制作测绘网站制作干花姚乐怡电影网站制作都匀网站制作哪家费用低娄底公司网站制作网站建设工程制作平台锡林浩特公司网站如何制作react制作门户网站响应网站设计制作自己怎么制作企业网站上石艺术怎么制作网站国际网站制作招标四川模板网站制作公司怎样用dw制作网站呢綦江网站制作公司需要多少钱宝安有效网站制作怎么样英语听力网站制作美食嘉兴制作网站购物网站制作素材北郊网站制作

合作伙伴

深圳网站优化推广公司

龙岗网络公司
深圳网站优化
龙岗网站建设
坪山网站建设
百度标王推广
天下网标王
SEO优化按天计费
SEO按天计费系统