DOCUMENTATION

贝叶斯学习 Auto-Tuner 指南

本文详细介绍 EXAWin 中 Auto-Tuner 功能的各个阶段 — 包括执行分析、结果界面结构 (摘要、Signal Lift、Impact、T/k、Dampening、Silence、Prior、AUC 与交叉验证),MCMC 后验分布、Particle Storm 可视化动画、模拟架构面板,以及参数的应用流程。

Auto-Tuner 使用指南

Auto-Tuner 是一项利用过去赢得 (Won) 与丢失 (Lost) 的项目结果数据,学习并推荐最佳参数值 给贝叶斯引擎的功能。管理员可以在确认数据依据与推荐值之后,决定是否直接应用到系统中。

导航路径: 侧边栏 → Bayesian → Auto-Tune

⚠️ 使用 Auto-Tuner 功能需要具备 adminsuper_user 权限。


1. 运行分析

步骤1:进入 Auto-Tune 界面

在侧边栏中点击 Bayesian → Auto-Tune 菜单。初次进入时,中央将显示该功能的介绍界面;如果有先前保存的分析记录,则会自动从 sessionStorage 恢复。

步骤2:开始分析

点击界面顶部或中央的 开始分析 (Start Analysis) 按钮。

在分析开始后,进度条 将实时显示 11 个阶段的分析进展状况:

分析组件预计耗时备注
Ruby Grid Search (覆盖 Impact, T, k, Dampening, Silence)< 1 秒瞬间完成
Cross Validation (5-fold, 交叉验证)< 1 秒检测模型过拟合风险
Emcee MCMC Sampling (马尔可夫链蒙特卡洛抽样)15~30 秒仅在 Phase 3 及以上的阶段运行

💡 在分析过程中,您可以使用 Cancel 按钮取消任务。取消操作绝不会影响您现有的数据。

⚠️ 如果分析环节包含了 MCMC 计算,那么整个分析大约需要 15~40 秒。进度条旁边将会一起展示具体的累计耗时。


2. 结果界面构成

分析完成后,结果将按照由上至下的顺序分为以下几个板块呈现:

① 摘要卡片 (4列)

屏幕上方会最先展现 4 张摘要信息卡片。

卡片内容
闭环数据量 (Completed Data)参与分析的项目总数 (分 Won / Lost 标签细列) + 当前评定 Phase 级别标章
当前分离度 (Current Separation)使用当前现有参数计算得出的区分度得分 (划分为 A~D 四个层级)
预期分离度 (Projected Separation)假定采纳所有调整推荐值情况下的模拟区分度层级评定
Won 与 Lost 期望均值对比赢得 (Won) 案例的平均 P(Win) 对比 衰退 (Lost) 案例的平均 P(Win)

层级划定标准依据:

层级分离度意义解析
A≥ 0.40Excellent — 参数拟合程度出色,高度反映现实
B0.25 ~ 0.40Good — 表现优良,但仍保留有一丝优化的空间
C0.10 ~ 0.25Needs Improvement — 目前参数存在偏差,强烈建议调适
D< 0.10Urgent — 十万火急!应当机立断执行基础参数重装修正

② 模拟架构纵览面板

处于摘要数据的正下方是名为 🔬 Auto-Tuner Simulation Structure 的可折叠隐藏式面板。展开后在此能尽览 Auto-Tuner 刚刚走完的全局推演流程架构和累计演算次数。

架构归总卡片 (4列):
卡片涵盖内容
PROJECTS投入深度解析的总项目集合 (区分 Won / Lost)
RUBY ENGINERuby 纯净版网格检索 (Grid Search) 计算执行动作次
MCMC ENGINE由于 Emcee 多轨迹抽样导致的 simulate_project() 后台唤起估算次数
GRAND TOTALRuby 与 MCMC 的综合总和呼叫数

算力分配占比条 (Computation Distribution): 将前两者 Ruby 和 MCMC 间运算次数的比值可视化。常规情况下 MCMC 势必会吞噬超过总体 99% 去上的运算带宽资源。

分析管道层 (Analysis Pipeline / 3列分流):
  1. GRID SEARCH: 在当前基准参数值 ± 上下浮动阈值内测试 10 个数据节点,借此逼出区分性极致。
  2. CROSS VALIDATION: 使用经典的 5-fold 交叉拆分验证法则剔除模型过拟合的假性指标。
  3. MCMC Emcee: 调用 32 个追踪器 (walkers) × (500 warmup 试运行 + 1,500 draws 正式投点描绘) 的综合群像模拟。
阶段拆解详情 (Step-by-Step Breakdown, 划分 11步):
阶段标号分析模块预期调用次数
1current_separationP次
2signal_lift_analysis0次 (纯粹的数据库层聚合计算)
3impact_grid_searchI × G × P
4optimal_thresholds0次 (查表寻值)
5k_recommendations0次 (基于数理统计得出)
6dampening_searchD × P
7silence_penalty_searchS × P
8projected_separationP次
9calculate_auc0次 (读取 P(Win) 映射直接产出)
10cross_validateF × P
11mcmc_ensemble_samplingW × Steps × P

数学代号阐明: P=项目数,I=Impact 类别总数,G=网格触头点 (10个),D=Dampening 测试步进数,S=Silence 探索周期数,F=5 (执行切割圈数fold),W=32只探测狗 (walkers),Steps=2,000次采点循环 (warmup+draws)。

③ Signal Lift 信号抬升分析

在此板块分析每一个信号标签真实的 效用与判别能力 (Lift / 区分度)

字段列说明
SIGNAL信号标识符名称
WON%于成功收尾的 Won 系列专案中的覆盖几率
LOST%于铩羽而归的 Lost 残局中的出现频次比重
LIFTWon 侧覆盖几率 / Lost 侧覆盖率
GRADE基于实际判决反馈回传的能力评价等级 + 专属 Emoji 图标
  • Lift > 1: 愈发倾向现身于顺利闭环的赢单(Won)当中 → 其存在实质系正面 (Positive) 效标
  • Lift < 1: 过半数出没于失利折戟的(Lost)中 → 本质是负面阻力 (Negative) 象征
  • ⚠ MISMATCH (定性偏离): 若该记录原本已被设定为正面或负面,但此处的真实算法得出结论却与其现有属性严重背离,系统会悬挂醒目的全红警告横幅。

某些信号在预置分类 (Impact) 建档时被标错了极性,此处便化身为最严苛的打假照妖镜。如若确实检出极值 Mismatch(不相吻合),还请您移步 Signal Master 配置列表重新斟酌修定它的属性方向。

④ Prior α, β 先验值优化推荐

运用沉淀的完单史料数据库 精准重塑系统最科学的先验基准值 (Prior)

项目说明
Method回溯估计手段选用 (定采用矩估计法—Method of Moments,或极大似然估计法—MLE)
α (积极成功动能)今时值 → 推荐采用值 (一并附列 95% 置信区间 CI 范围)
β (消极阻挡重力)现存值 → 拟应用替代值 (附 95% 范围)
Evidence Maturity根据平均各件的有效收集量裁定的信源定级:🌱 初芽态 (Early) / 🌿 蓬勃延展 (Growing) / 🌳 枝叶成荫 (Mature)

机制下 Phase 3 将激活经典的定矩法 (Method of Moments) 处理运算,一旦系统进阶 Phase 4+ 高等境界后,将会切入手法更高明的 MLE (牛顿-拉弗森求解 — Newton-Raphson法) 固定不动点循环模式深究求极准确答卷。

⑤ Impact 量级调整

对于各类的 Impact Type (影响类型),系统借由 Grid Search (网格探寻) 试错反馈了最优参数解。此区域只会收录并展列那些真正触发了调整警告 (adjust 指出需变更) 的类别作为卡片。

每一块卡片的内容皆囊括:

  • Impact Type 名讳
  • 当前录入数值 → 拟推荐使用数值
  • 若听取劝告变更后所能博取的总区分度纯增益额度 (+%p)
  • 选取用勾选框 — 供操作员点击授权进行单件抑或是通盘替换 (具备 Select All 键)

💡 雷达的试探广度将与您系统的成熟度做直接捆绑: 于 Phase 3 环境探索带宽限定为 ±30%,升满至 Phase 4 则扩胸到 ±40%,至于满级的 Phase 5 即解锁全域 ±50% 大范围筛查权。

⑥ Threshold (T) & Velocity (k) (门槛临界值 与 冲刺斜率极速)

系统以并肩双并表格模式陈列这两项要员数据。

Threshold (T) 前进阈值临界位:
字段列阐释
STAGE业务销售阶段落点名
CURRENT您目前设定应用的破壁临界值
OPTIMAL依托 于登 J (Youden's J) 指标算计得出的金门槛值
J 约登系数衡量判断性能的 Youden J 综合得分 (< 0.20 一律拒绝做任何瞎推测并封杀推荐输出)
Velocity (k) 速度动差调节器:
字段列阐释
STAGE具体商机运转的业务段名
CURRENT旧有的驱动参数 k
OPTIMALGrid Search 计算得来的极限最优解(但绝不可能越界超过 12上限)
AVG α+β专为该阶段提炼积累到的单案所有举证能量均标

对于那些被系统认为无懈可击无须变动的表项横条,末端的授权勾选框会予以撤出隐藏。

⑦ Impedance Impact (阻抗折损测算)

当 T/k 的最新参数推荐组遭遇实测导入后,系统会进行了一次 影响当前阻抗衰减机制 表现结果推演实验。

字段栏解析
STAGE商业所处特定环节
P(WIN)该节点下的案件期望达成率平均分
如今境地配上当前未改款 T/k 时展现出的实际阻尼滞后量 (%)
推荐套件实测改用推荐值 T/k 所反馈出的预估新阻抗滞后值 (%)
上下波动差↑ / ↓ 附带的上下变更比差纯值 %p
n 号样本数取材来源包含到的 Won / Lost 总母体数量
BU于该环节生成打上的 BayesianUpdate 更新指令次数累计

如若替换 T/k 数值依然不伤大局也不增加分毫阻抗消耗量时,“完美继承,更替无损迹象 ✅” 的友好提示将予以张榜。

⑧ Dampening & Silence Penalty

这是一对被肩并肩排放在一起的信息面板卡。

参数类型本质用途阐释系统初始缺省值
Dampening (平顺消音机制)同一周期被塞入了一堆杂项信号导致分值虚胖情况下的挤水衰减率。0=只认领第一名的那一个绝对强音;1=众生皆平等系数均全吃进0.25
Silence Penalty (死寂空白定点加收罚账)商单进入失联宕机状态按时长逐步蚕食好感的抽打加减比例0.30

两张卡都呈现一览直白的 : 老值 → 新最优荐言 + 预期拔高额。假若旧有已做到无懈可击,一张硕大的 "✅ Optimal 完美!" 将占据中央。

⚠️ 如果系统综合素质还在处于 Phase 4 之下阶梯摸爬,两者的勾选用选钮将被上锁 限制激活 (disabled),同时悬挂一块写明 "🟢 此套功夫还需修炼破镜至 良好级 方允开放" 的劝规免战牌。


3. MCMC 后验分布 演算解题报表

假设您的系统积累业已推开 Phase 3 阶段大门,那么在上面的 Grid Search 网络雷达板块底下将被准许开启神秘的 MCMC 后验推断估值解析结果

MCMC 头部看板

面板解义
Samples × Walkers系统试探采样总数 × 多线程并击打点探头组合 (如:1500 趟采样点 × 32路蒙地卡罗寻犬追踪器)
整体全局所斩获的最大值 R-hat + 随附收敛达标结案声明 (是顺利绿 ✅ 或是摇摆黄 ⚠️)
Runtime (跑机成本)本场超大型 MCMC 开机吞噬掉运算处理的实体历程秒数
Projects加入作大决战用料的完结封底项目总量核定

Particle Storm 粒子风暴沙盘全息再现动画

点击显目的 ▶ Play Particle Storm 向导 播放钮,所有被锁入分析框的各独立变量项,均能被实体构建出一幕 动态实景的后验形态全息影像展出流程图:

  • 聚能波段图块 (密度直方图): MCMC 每一次试水样都会被投射为粒子跌落进槽中并逐级落山,随着沙池蓄满后,完美的推演形状将拔地浮现!
  • 苍翠绿刻线: 代指经过 MCMC 测后的中轴平均准星点 (Mean)。
  • 夺目血红虚空线: 代表现在机体正设着在跑的固有旧参数 (Current)。
  • 暗黑紫云箱包边界: 划定出的高达 95% 全高光置信密实大本营 (HDI - Highest Density Interval)。

此时这股酷炫华丽的 Particle Storm 狂飙仅是帮作你直觉性解读参数大成的一项高级动画赋能特效加码,这并不是真实的实时 MCMC 回写操作再播(毕竟早就运算终了)。它是将后台那些艰深晦涩的海量 Trace 数据按批号搬运砸进图表桶中做具化展列。

MCMC 解析报表桌子

竖列定义
打卡签入框 — 请划中打算启航替换落库的目标 (一键 Select All 包举通吃)
Parameter 名字变量头衔名 (辅印 ⚙️ 齿轮者属 Dampening,绘着 🔇 消音图标为 Silence 罚分件)
Current时下您系统吃住绑定的值配号 (红色预警底)
MCMC脱胎于沙盘模型后的新中央推荐大调值 (绿莹色包覆)
±SD 标准错位估值这是一种估值标准偏差 —— 彰显它背后潜藏有多大的漂移误差危机
HDI 95%打出的紫色外披围墙 95% 极端紧实聚能领地边界
R̂ 收敛指纹标记评定此次算法结界有没有成型的神圣准线 (一抹翠绿意味 <1.05 功成圆满,微黄警报 <1.10,至于见红飙高 ≥1.10 则预示崩塌报表全毁)
Δ 价差跳表新 MCMC 与您原有设定的撕裂差距缩值 (上跳 ↑ / 俯冲 ↓ / 及毫无波澜基本等同的约等号 ≈)

⚠️ 一旦侦测出某位选手的 R̂ > 1.05 它会朝您掷出 尚未彻底完美闭合 的告警牌。倘若 R̂ 野蛮增长至 > 1.10 高点则它就是块 烂泥散沙 (完全未收敛) 的废铁,禁止将其接收入库。

💡 为啥有些行是光秃秃的没选框: 若最终推验出 MCMC 中轴准星跟现用旧值它仅有着连 0.02 以下差距 (也就是触碰了设定的 ε 过滤低阈警报线),我们视这点皮毛之差纯属脱裤子放屁——不具有实质扭矩价值并拒发修改批文。该行的 Δ 区位将印发一枚 。比拟说现在您的 dampening 是在 0.25 但是天书般跑出来的 MCMC 回告要用 0.259 ,这点连0.009之距都到不了,请让程序安好,就别费周折执行库修改指令了去了,此行自然从候选更迭列表名单中除名剥去。

一堂 HDI 图经理解速成课

出土 HDI 界碑是 [3.5, 6.2], 现在你设定的大盘是 5.0 的点位。
→ 因为当前的基准点完美落入这包裹里,所以证明这个选项依旧合乎天道。免谈动刀变革。

新批下来的 HDI[2.0, 3.5], 但系统目前挂着的是 5.0这是在发出预警现在已远远超界飞出领空外边去了,它已经身患极端的虚胖超标 (过大自大盲断)。请接受它的换心术大修提议。

HDI 幅员广阔达到了个离奇的 [0.8, 8.0] 空荡荡山谷之间。
→ 数据基料储备库太少导致的模型严重推算法盲眼症。结果非常飘忽。建议作为旁注参考就罢。

4. 落地应用系统新法则安排

固化于底侧的行动部署司令台 (Apply Bar)

当你拉拉滑轨下界到底会看到牢牢钉上的一块 核心常驻黑底按键长条

  • 它左翼部位: 回执正在确认您点中的项数统计总计
  • 处于大局观的靠右黄金侧: 鲜艳饱满的一发式 Apply Selected 指令落实发动总开关 (应用项全部确立注入)

Phase 分级特许的权限范围解限

前当级位 Phase您手持握管的生杀换帅令箭
1~2 界外天灵全线冻结操作应用化 — 一口闷死 Apply 开关连边都不叫碰
3 试斩期仅解绑 Impact, T, k 等三连基础核弹 + 附增 MCMC 系权值运用 (而 Dampening/Silence 还捆仙锁禁锢无法解套)
4+ 高级殿堂满状态全武装出战:系统百无禁忌随便您落库所有一切改调建议项

落脚更名改命实施的对象表

测验基床目标参数生效点位与落差去处
Grid Search (常规雷达)直接向 Impact, T, k, Dampening, Silence 开枪调整暴力更新入主体配置数据库里层
MCMC (天书奇阵)直接替名代打为 Impact (对应入表层名: mcmc_impact),Dampening (进: mcmc_dampening),Silence (进: mcmc_silence_ratio)一举穿心录入更新

⚠️ 假设您不听劝,左右互搏强行把 Grid Search 和 MCMC 最右侧的那个选择按钮 两者通杀全圈圆给按中 后一并派发执行动作库,不好意思:数据库本着后者居上方针,只有最后一层推递者会盖印成章活剥留存下去。对弈着同一名号指标的参赛位上只需也是必须请推举一名得道代表就行。

扣下操作扳机前那必须默背在胸的铁律核审

  1. Grade 跨级比拼: 对证目前与更新版带来的段位提升增益能否构成回响对拼?
  2. Overfitting Risk (警惕自嗨式过熟拟合病): 注意查收交叉网试雷达有没有传呼告急防伪红铃警报。
  3. MCMC 稳盘基准线 R̂: 对待冒出了 R̂ > 1.05 红线者敬而远之,或者只留做侧写观察簿备忘档案即可!
  4. HDI 海拔落差探底量: 当出现横向撕拽大张口奇妙景观的宽泛空域包图情况,这是它含泪诉苦项目养分严重馈乏断流停机了。
  5. Phase 等阶禁行规条: 牢记 Dampening/Silence 等高等级秘仪的按钮激活与权限赐予唯独对 Phase >=4 者方且亮起绿灯通行解禁密码。

在操作确落并收服之后的系统更迭流向

  • 一个 最终回确认警告小卡片 (Dialog) 跳上中置桌案并索要指纹,首肯将立刻引动 DB 底层表单爆表更迭写死。
  • 执行重写大业闭环完毕,浏览器里那些存留的 sessionStorage 暂放内存会强制作挥手离场全部撕碎清除掉。故必将重新来一场彻底的复查推盘校验开篇任务。
  • 您今日成功更替参数兵书斩将功绩,均归结化于一发浮动式快报飘逸提示牌(Toast)呈现作为了结告终之礼了。

5. 数据修养与沉淀的定海神针阶梯 (Phase 权限及封禁解说集)

所谓 Auto-Tuner 会自动计算去拿您已沉底关闭专案池内 Won/Lost 这双方人马里 处于惨弱之势,数量位列在后座的成员数字 (用 min值做主裁标尺) 并套用五梯晋级机制给定认证资质。

尊称 Phase触发临界给号标徽特赐权力释放
1 白丁弱方< 5全案无权批阅 — 数据穷兵黩武到令人发指
2 书童弱方排5~9🟠只能瞧一眼 Signal Lift 的天星指南图作为闲参
3 秀才弱方满10~19🟡大权初步赋予 Impact, T, k,以及激活 MCMC 发声权
4 举人夹缝满至20~49🟢喜得附赠高阶暗器 Dampening, Silence 开库之权
5 进士高光位两岸兵源各自均超 ≥ 50🔵全门派开禁授印 + 绝对高枕无忧级的稳定 MCMC 定论天书解禁权授受

💡 让系统急速飞仙跃入高层境界突破 Phase 唯一最佳天阶密码:多拉活马或死马项目进入完结大一统的关闭锁库结局地带(即宣告判官令盖棺定论 Closed 为 Won 亦或 Lost 的闭卷局)。那些还苟延在活跃战斗沙地(Active的半拉子账)是不被提上推算大榜法器作为引料做运算推测用的人士身份的。


6. 全局十万个为什么疑难集 (FAQ 客服接待室)

Q. 把大分析机器连开个一百遍会玩出火让数据崩溃吗?

放一百个心去浪。 Auto-Tuner 它自始而终是一头 完全绝缘独立且根本不会拿手去搞毁你半点 DB 实底的计算巨兽。 只有一通无害的虚拟脑部测算风潮罢了,只须只要您这位长官的手没往终极审判席那个叫 "Apply Selected(采用被勾点人员)" 的神赐黑键那里扣去,它哪怕转断了齿轮都掀不起数据底层半滴涟漪和泥沙来。

Q. 万般无奈走到中间忽然我要取消并截断怎么办?

看见进度大屏走条隔壁挨着的那个 Cancel(强制停机) 紧急红按钮吗?当它被你猛力一掌拍下,底层正发送传输运货的 AJAX 链接会被立即就地处分咔嚓斩断并切腹,而你那金库中的私货同样没任何动静损毁发生。

Q. 分析这大机器它转动的让我打了个大哈欠这是为哪般呀?

如果一旦系统挂挡冲入了需要开算天机盘的 MCMC 秘境 (跨界过 Phase 3+门槛),那一般都是在苦撑等 15 到 40 记秒的时计漏斗沙滑。那皆因为是深藏于后台 Python 重核发动机 MCMC (别称:Emcee 尊主) 正背负这近乎数十万量级的穷尽极数大阵仗硬耗测试推敲呀!假若不叫他来参阵而只动用本身土炮型计算器 Ruby Grid Search 引擎发功办差 (好比掉级在 Phase 2 的光景下执行),不足 1 记瞬息之间就直接封案回签毕事。

Q. 当 Grid Search 推的单和 MCMC 写出卦词南辕北辙,教我该当何方大印?

相冲之局卦象解读行事药方引言
完全步调齐平的兄弟联弹表态拥有绝对信任之源的坚固磐石铁判大可放心打勾批准放行 ✅
两边大概其意相似但就是 MCMC 投弹偏差有些阔落(HDI范围虚长)心之所向一致奈何脚下步履漂浮拿不住根底可小心尝试酌情引入试吃
两头神仙打架指的路彻底反转偏离十万八千米此为 Grid Search 把自己做死卡在一个没法回旋破局的地方了,成了它的死角盲区 (局部最优短视病)跳过雷达推介,改奉为主观性更神准的 MCMC 大区 HDI 作最高神兵宝器法典看待去调拨

Q. 满屏挂了个 R̂ 指标冒高的报警牌照让我好没安全感!

只要你瞧到了这头 R̂ 攀爬翻越过了 1.05 的围栏墙。代表说那堆负责抓数字干活儿的 MCMC 手底下的猴群还没集结并排满队列站好等长官检阅呢,也就是还未抵达收拢的绝对稳定大圆寂境界状态里。那就暂时当它是信口开河莫去认真当一件事落案就好,乖乖退一步先拿了粗浅版的 Grid Search 的推案交差补用着,去,把业务库里养肥添厚一点资料储备再去烧柴唤醒 MCMC 仙尊重来推局就行啦。

Q. MCMC 那一块儿的神奇功能怎么从桌面上凭空消失了不见影踪了呢?

当身处这等悲催两难险境任一种的时侯,自然 MCMC 不会驾到开场了:

  • 身为连 Phase 3 新手入门考核证都没取到的低层练手阶段 (即双方落败军阀数连低标 10 位线都达不齐)
  • 给这服务器配建机房的运维小工给漏了忘安上那台叫 Python Emcee 的大铁马装载环境架构组件设施!

但这不妨大事成行。无论是天塌了上面哪套,那个基础底气版的老大爷网机 Grid Search 依然是不受撼动稳如一条铁塔照样将雷达大屏信息扫图画给你,并不耽搁阁下操作运用主轴的 Auto-Tuner 这项兵法神器的推进。

Q. Particle Storm 那五光十色的闪烁动画究竟是图个啥乐子呀?

那是为了能把抽象成天书奇谈的 MCMC 那抓回来点数据落位结果给化腐朽为神奇一般转换为能动的有神韵生命之气 即时动画影片 (实景重现版) 呈上眼球。能辅佐你凭个直觉得一眼就能够猜透你参数推到最终散形是个什么样的一张皮相脸框!轻轻一扣 Play 开演神键 给通通各项目打板发落,逐个参数它就像拍连环大戏接踵而至登场演绎放光采了。

Q. 纳了闷了,上一场玩过的结果怎么还大辣辣赖在报审图板上招摇呀

它是被临时被安插写在了那本名叫 sessionStorage 的网页即时备忘随手拿册子里头去而已嘛。所以你便是去了个茅庐兜回场上它也还是维持给你保留了一派没动的痕迹。但若你狠心扣下来一个决断神罚说按了 Apply (收押改换它用新参数) 抑或是按键重新发起洗盘决议 Re-run (推倒天机重起头算) 它当场会直接触发抹除粉碎全撕完重启一切新净界底色去哦。


编外扩展知识附卷连通库参书谱