RoboPrep
  • 面试
  • 知识库
  • Coding
  • 公司
登录

搜索

搜索面试经历、知识题和 Coding 题。

至少输入两个字符。结果覆盖知识库、面试、Coding、公司和主题。

RoboPrep

一次一题,准备具身智能面试。

产品

  • 面试
  • 知识库
  • Coding

探索

  • 公司
  • 主题

账户

  • 登录
  • 创建账户

RoboPrep — 面向具身智能岗位的面试准备平台。内容来自社区分享,使用前请自行核实。

知识库

为具身智能面试中反复出现的概念提供标准答案。

全部清除

当前主题:imitation-learning

问题

共 4 个问题

  • 知识中等

    什么是 ACT?它的核心思想是什么?相比传统的模仿学习方法有哪些改进?

    ACT 用 CVAE 从示范中采样风格隐变量、Transformer 解码器一次输出一整段动作块,配合时间集成执行,缓解模仿学习的多模态与累积误差问题。

    • Action Chunking
    • 模仿学习
  • 知识中等

    请讲一下 DAgger 的基本思想?它解决了什么问题?在具身智能中如何应用?

    DAgger 迭代地用当前策略滚动、让专家在策略访问的状态上标注,聚合数据重训,解决行为克隆的分布偏移(covariate shift)。

    • RL
    • 模仿学习

浏览主题

  • Action Chunking3
  • Attention4
  • Diffusion Policy2
  • DQN2
  • Flow Matching3
  • GRPO6
  • KV Cache3
  • PPO10
  • QKV1
  • RL37
  • SAC5
  • SE(3)
知识中等

在什么情况下,模仿学习或 SFT 已经足够,什么情况下值得引入强化学习?如何判断进入 RL 阶段的时机,并评估 SFT 对后续训练的影响?

示范覆盖充分、奖励难定义时留在模仿;当成功率被示范质量封顶、存在可靠可验证奖励、且 SFT 已到数据边际收益平台期时引入 RL。

  • RL
  • 模仿学习
  • 知识中等

    强化学习与模仿学习分别需要什么样的数据?如何挖掘场景、划分数据,并确定两类训练数据的配比?

    IL 要覆盖任务分布的高质量(观测,专家动作)对;RL 需要带奖励/成败信号的交互经验且欢迎失败;配比按阶段定——SFT 打底为主,按成功率瓶颈递增加码 RL 并混入示范防遗忘。

    • RL
    • 机器人数据
    • 模仿学习
  • 1
  • Sim2Real2
  • Transformer6
  • VLA16
  • π 系列24
  • 世界模型2
  • 具身智能5