图片-精准获客

快手磁力引擎广告后台之「联合建模平台」使用指引

一、建模平台的登录方式

当下,建模平台提供了三种登录途径,分别是快手广告账号密码、手机验证码以及快手/快手极速版 App 扫码。

1. 登录方式一:快手广告账号密码登录

(1)快手广告账号:即注册时所提供的与快手 ID 绑定的邮箱或手机号码。

(2)密码:对应绑定邮箱或手机号的快手 APP 端账号的登录密码。

2. 登录方式二:手机号验证码登录

(1)手机号码:注册快手广告账号时所提供的手机号码。

(2)验证码:输入对应手机号码接收到的验证码。

3. 登录方式三:扫码登录

通过已登录的快手 APP 或快手极速版 APP 进行扫码即可登录。

图片[1]-快手磁力引擎广告后台之「联合建模平台」使用指引-精准获客

二、使用指南

1. 整体流程概述

上传正负样本集

成功

→→

创建定制化模型

→→→→→→

精准人群挖掘

(基于快手大盘人群)

目标人群提取

人群推送&快手广告投放

失败↓↑重试

客户一方人群包上传

高意向人群预测

(基于客户一方人群包)

排查原因

2. 建模操作流程概览

事项

预计耗时周期

备注

创建样本集(即上传正/负样本)

①输入样本集名称

②选择样本来源

③选择匹配类型

④上传样本文件

⑤选择特征计算基准日期

时间受文件大小影响,10 万条数据约 1 – 2 分钟

务必严格遵循样本规范上传,避免失败。若显示“计算失败”,请根据样本创建失败情况排查处理。

创建训练集

①输入训练集名称

②选择正样本集

③选择负样本集

④选择是否开启特征评估

约 3 个小时

范围:正、负样本要结合建模目标选定,且必须是已浅度转化人群,正、负例的区别只在于是否深度转化。

足量:正、负样本量级起始各至少 50 万人,与快手人群撞库后不少于 20 万人(撞库后通常为原量级的 20% – 30%)。

均衡:正、负样本量级需 1:1 均衡,且窗口期对应(窗口期即转化时间,比如某用户在 6 月发生转化购买,窗口期就是 6 月)。

独立:二分类模型中,正、负样本通常不应有交集,否则算法会自动剔除同时存在于正、负样本中的人群。

确认训练集校验是否通过

若显示“已失效/计算失败”,请联系与您沟通的销售

创建模型

30 分钟 – 1 小时

/

确认模型是否训练成功

若显示“训练失败”,请联系与您沟通的销售

创建预测任务

约 2 天

/

确认人群预测是否成功

若显示“已失效”,联系建模产运处理

查看模型 AUC 值需>0.6,KS 需>0.2

/

若模型 AUC<0.6,请依照模型不可用怎么办中的描述排查处理

圈选并生成人群包

约 2 – 3 小时

若显示“已失效”,联系建模产运处理

推送人群包至快手广告账户

/

暂不支持跨主体推送,若有需求请联系建模产运处理

3. 功能使用介绍

(1)样本管理

①样本的定义

样本是模型训练的数据来源,建议将全域平台中的目标人群作为训练样本,丰富的样本有助于构建高精度预测模型。

②样本准备

请确保样本文件的编码为正确格式,即 UTF – 8 编码的 csv 文件并压缩成 zip 格式。

③具体功能使用步骤

Step1:登录快手广告平台,打开「数据准备 – 样本管理」页面,点击「新建样本」,进入新建样本页面。

Step2:在新建页面输入样本名称,并上传样本数据,支持上传客户一方用户数据、磁力万象 DMP 人群包作为样本数据(UID 原值上传仅面向快手内部用户开放)。

快手广告后台支持自定义选择特征计算基准时间,可结合正负样本定义的时间口径,选择合理日期版本的特征来拼接样本和训练模型。若同一批样本的特征存在多个日期版本,请分批上传训练集并选择对应的特征计算基准日期,创建模型时添加多个训练集合并进行训练。

Step3:点击右下角「创建」按钮,生成样本集,样本集将进入计算状态。

①覆盖人数:样本集总人数与快手全量人数的重合数。

②覆盖率:覆盖人数/样本集总人数。

③状态:创建中/计算完成/计算失败。

(2)训练集管理

①训练集的定义

训练集是用于模型训练的种子样本数据,由「正样本」「负样本」共同构成,根据快手广告建模目标合理选定正负样本,有利于构建高精度预测模型。所有客户均支持自行上传一方用户数据作为样本数据。

②训练集正负样本口径设置建议

a.正负样本应参照建模目标、考核目标进行合理配置,不合理的配置将无法获得准确的测试结果。例如,某教育客户希望通过联合建模优化「付费成本」,其建模目标为「降低付费成本」,对应的正负样本设置:

正确样本口径示范

错误样本口径示范

客户考核目标

降低付费成本

客户在快手广告投放转化链路

曝光–>点击–>表单提交–>试听课付费

正样本口径

已付费试听课的付费转化人群

已提交表单的表单转化人群

负样本口径

曝光未点击人群

点击但未提交表单人群

解释

训练出「付费模型」,帮助广告主找到更易发生付费转化的高价值人群

该口径训练出的是「提交表单模型」,帮助广告主找到更易发生表单提交转化的人群,而非更易发生付费转化的人群

b.若对正负样本的口径需要更详细的定制化建议,请联系客运建立 1v1 服务群,产研同学会与您深入沟通需求并提供最佳样本口径方案。

(3)快手联合建模平台具体功能使用步骤

Step1:进入「建模流程 – 训练集管理」页面,点击「新建训练集」,进入新建页面。

Step2:在快手联合建模平台的训练集新建页面输入训练集名称,选择正样本及负样本,支持添加多个正负样本,若没有合适样本可点击“新建正/负样本”进入样本管理页面上传。

正负样本选取要求(直接影响建模效果):

○正负样本量级起始各至少 50 万,与快手人群撞库后不少于 20 万(通常与快手人群撞库后为原量级的 20% – 30%)

○正负样本量级需 1:1 均衡,且窗口期一一对应(窗口期即转化时间,如某用户于 6 月发生转化购买,则窗口期为 6 月)

○二分类模型中,正负样本不能有交集,若有交集,算法将会自动剔除同时存在于正样本及负样本中的人群

○选取范围:正负样本选择需结合建模目标进行选定。样本的正例与负例必须是已经浅度转化,正负例区别仅限于是否深度转化

Step3:点击快手联合建模平台「创建快手广告」后,训练集将进入计算状态,计算成功后可进行“特征评估”或“创建模型”。

快手联合建模平台训练集规模:该训练集正负样本取并集去重后与快手月活用户求交后的人群规模。

快手联合建模平台正样本规模:该训练集所选择的正样本与快手月活用户求交后的人群规模。

快手联合建模平台负样本规模:该训练集所选择的负样本与快手月活用户求交后的人群规模。

状态:计算中、计算完成、计算失败。

a.计算中:新建完训练集后展示计算中的状态。

b.计算完成:训练集计算成功的状态。

追加样本状态:更新中、更新完成、更新失败。

a.更新中:追加完样本后展示训练集更新中的状态。

b.更新完成:追加样本后训练集计算成功的状态。

创建时间:回显创建训练集的时间。

更新时间:回显训练集最近一次更新成功的时间。

(4)快手联合建模平台训练集特征评估

训练集特征评估是评估该训练集的覆盖度和重要性 TOP100 的特征情况。

点击「特征评估」,进入训练集特征评估页面:

①特征覆盖度:计算某特征在样本中的覆盖度。快手联合建模平台特征覆盖度越大,能影响的样本量越多。新建模型时可选择覆盖度较高的特征加入训练。

②特征 IV 值:计算某特征在样本中的重要性排序。快手联合建模平台 IV 值越大,表明该变量的预测能力越强。新建模型时可选择 IV 值较高的特征加入训练。

(5)训练集追加样本

追加样本功能用于已创建好的训练集,可提升建模效率,有效避免快手广告模型效果衰减,保证快手广告投放中的人群包更新和精排策略预估分的更新。支持追加样本全链路自动更新,包括更新模型、更新预测任务、更新人群包,减少客户操作成本。

点击「追加样本」进入训练集追加样本页面。

●训练集名称:默认回显相应训练集的名称。

●正样本:默认回显该训练集当前的正样本,不可取消选择和删除该样本。

○添加正样本按钮:可点击选择已计算完成的样本,作为想追加的正样本,最多可选 10 条。

●负样本:默认回显该训练集当前的负样本,不可取消选择和删除该样本。

○添加负样本按钮:可点击选择已计算完成的样本,作为想追加的负样本,最多可选 10 条。

●模型更新:默认开启。

○模型名称:回显使用该训练集的所有模型名称 list。

○模型 ID:回显使用该训练集的所有模型名称及对应的模型 ID。

○创建时间:该模型的创建时间。

○是否更新模型:默认勾选第一条模型,被勾选的模型将用更新后的训练集自动更新。

●预测任务更新:默认开启。若所勾选的模型没有关联预测任务,则不展示该模块。

○模型名称:默认回显已勾选模型所关联的预测任务名称。

○模型 ID:回显已勾选自动更新模型所关联的预测任务 ID。

○创建时间:该预测任务的创建时间。

○是否更新预测任务:默认勾选第一条预测任务,被勾选的预测任务将用更新后的模型自动更新。

●人群包更新:默认开启。若所勾选的预测任务没有圈选人群包,则不展示该模块。

○人群包名称:默认回显已勾选预测任务所关联的人群包名称。

○人群包 ID:回显已勾选预测任务所关联的人群包 ID。

○圈选时间:该人群包的圈选创建时间。

○是否更新人群包:默认勾选第一条人群包,被勾选的人群包将用更新后的预测任务自动更新。

点击「详情」,右侧会出现相应训练集的详情弹窗。

点击「追加样本更新」Tab,快手广告展示本次所追加样本的最新进展情况。

●节点明细:展示在追加样本中所选择需要自动更新任务节点的进展情况,例如:追加样本只勾选了训练集更新和模型更新,那更新时间线节点只展示训练集更新和模型更新节点。

●父节点进展状态

○待进行:追加样本中所选择的任务等待计算中。

○进行中:追加样本中所选任务正在进行计算中。

○已完成:追加样本中所选择全部任务已经完成计算。

○已终止:追加样本中所选择任务因前置任务计算失败导致当前任务计算终止。

●子任务详情进展状态:

○待更新:追加样本所选任务下的子任务等待更新计算中。

○更新中:追加样本所选任务下的子任务正在计算中。

○更新完成:追加样本所选任务下的子任务计算成功。

○更新失败:追加样本所选任务下的子任务计算失败。

○任务

© 版权声明
THE END
喜欢就支持一下吧
点赞9 分享
评论 抢沙发

请登录后发表评论

    暂无评论内容