Skip to content

Model Arithmetic的使用 #26

Description

@hiymf

非常感谢您分享好的作品,目前已经成功跑通Model Arithmetic,但在Model Arithmetic的使用上面还存在疑惑,想请教下。

1:是否Model Arithmetic可以在人形机器人上的使用,因为看到您使用的数据都是在桌面级的上的操作,不存在高度上的变化,并且使用的都是二指,对于灵巧手是否同适配呢

2:如果可以使用在人形机器人上的话,那目前我在两个任务上的组合存在一定的问题想请教下。场景描述,A和B是不同的物体,并且抓取手势不同。pick A在场景一高度1.5m下操作,pick B在场景一高度1m下操作,分别采集两个任务下训练,单独训练都取得了好的效果,当使用Model Arithmetic去合并两个模型权重的时候,训练出来的模型权重在推理过程中会出现pick A和pick B相似又不像的动作,比如操作高度类似跑到1.25m左右,并且灵巧手的手势状态也是间于A和B手势之间的,比如A操作为10度,B操作为30度,当推理后为20度Z左右(tip:A和B任务的操作方式不同)。

3:如果是我在Model Arithmetic过程中操作失误的话,我单独只使用一个pickA模型权重去Model Arithmetic,是不会影响到我原来的模型效果的

4:想请教下我这样操作是否合理,或者看看是否中间环节出现错误,还是说目前还不支持此类操作,如果可以我将不胜感激

Metadata

Metadata

Assignees

No one assigned

    Labels

    No labels
    No labels

    Type

    No type

    Projects

    No projects

    Milestone

    No milestone

    Relationships

    None yet

    Development

    No branches or pull requests

    Issue actions