Update simplerenv.md
Browse files- simplerenv.md +6 -6
simplerenv.md
CHANGED
@@ -11,11 +11,11 @@
|
|
11 |
| move_near/variant | 0.7458333333333333 | 0.5 | 0.446 | 0.323 | 0.792 | 0.031 | nan | 0.04 | 0.477 | nan |
|
12 |
| move_near/matching | 0.7791666666666667 | 0.442 | 0.354 | 0.317 | 0.779 | 0.042 | nan | 0.05 | 0.462 | 0.663 |
|
13 |
| drawer/matching_avg | 0.5740740740740741 | 0.73 | 0.565 | 0.597 | 0.25 | 0.227 | nan | 0.139 | 0.356 | 0.268 |
|
14 |
-
| drawer/variant_avg |
|
15 |
| drawer/matching/open | 0.49999999999999994 | 0.601 | 0.463 | 0.296 | 0.157 | 0.009 | nan | 0.0 | 0.194 | 0.287 |
|
16 |
| drawer/matching/close | 0.6481481481481481 | 0.861 | 0.667 | 0.891 | 0.343 | 0.444 | nan | 0.278 | 0.518 | 0.25 |
|
17 |
-
| drawer/variant/open |
|
18 |
-
| drawer/variant/close |
|
19 |
| put_spoon_on_tablecloth/matching_partial | nan | nan | nan | 0.167 | nan | 0.347 | 0.778 | nan | 0.041 | 0.375 |
|
20 |
| put_spoon_on_tablecloth/matching_entire | nan | nan | nan | 0.0 | nan | 0.125 | 0.472 | nan | 0.0 | 0.208 |
|
21 |
| put_carrot_on_plate/matching_partial | nan | nan | nan | 0.208 | nan | 0.528 | 0.278 | nan | 0.333 | 0.333 |
|
@@ -24,6 +24,6 @@
|
|
24 |
| stack_green_block_on_yellow_block/matching_entire | nan | nan | nan | 0.0 | nan | 0.0 | 0.042 | nan | 0.0 | 0.083 |
|
25 |
| put_eggplant_in_basket/matching_partial | nan | nan | nan | 0.0 | nan | 0.667 | 0.875 | nan | 0.083 | 0.0 |
|
26 |
| put_eggplant_in_basket/matching_entire | nan | nan | nan | 0.0 | nan | 0.431 | 0.569 | nan | 0.041 | 0.0 |
|
27 |
-
| apple_in_drawer/matching_avg |
|
28 |
-
| apple_in_drawer/variant_avg |
|
29 |
-
| ckpt_name | ours | RT-1(Converged) | RT-1(15%) | RT-1-X | RT-2-X | Octo-Base | Octo-Small | RT-1(begin) | OpenVLA | RoboVLM |
|
|
|
11 |
| move_near/variant | 0.7458333333333333 | 0.5 | 0.446 | 0.323 | 0.792 | 0.031 | nan | 0.04 | 0.477 | nan |
|
12 |
| move_near/matching | 0.7791666666666667 | 0.442 | 0.354 | 0.317 | 0.779 | 0.042 | nan | 0.05 | 0.462 | 0.663 |
|
13 |
| drawer/matching_avg | 0.5740740740740741 | 0.73 | 0.565 | 0.597 | 0.25 | 0.227 | nan | 0.139 | 0.356 | 0.268 |
|
14 |
+
| drawer/variant_avg | 0.24074074074074076 | 0.323 | 0.267 | 0.294 | 0.353 | 0.011 | nan | 0.069 | 0.177 | nan |
|
15 |
| drawer/matching/open | 0.49999999999999994 | 0.601 | 0.463 | 0.296 | 0.157 | 0.009 | nan | 0.0 | 0.194 | 0.287 |
|
16 |
| drawer/matching/close | 0.6481481481481481 | 0.861 | 0.667 | 0.891 | 0.343 | 0.444 | nan | 0.278 | 0.518 | 0.25 |
|
17 |
+
| drawer/variant/open | 0.14814814814814817 | 0.27 | 0.212 | 0.069 | 0.333 | 0.0 | nan | 0.005 | 0.158 | nan |
|
18 |
+
| drawer/variant/close | 0.3333333333333333 | 0.376 | 0.323 | 0.519 | 0.372 | 0.021 | nan | 0.132 | 0.195 | nan |
|
19 |
| put_spoon_on_tablecloth/matching_partial | nan | nan | nan | 0.167 | nan | 0.347 | 0.778 | nan | 0.041 | 0.375 |
|
20 |
| put_spoon_on_tablecloth/matching_entire | nan | nan | nan | 0.0 | nan | 0.125 | 0.472 | nan | 0.0 | 0.208 |
|
21 |
| put_carrot_on_plate/matching_partial | nan | nan | nan | 0.208 | nan | 0.528 | 0.278 | nan | 0.333 | 0.333 |
|
|
|
24 |
| stack_green_block_on_yellow_block/matching_entire | nan | nan | nan | 0.0 | nan | 0.0 | 0.042 | nan | 0.0 | 0.083 |
|
25 |
| put_eggplant_in_basket/matching_partial | nan | nan | nan | 0.0 | nan | 0.667 | 0.875 | nan | 0.083 | 0.0 |
|
26 |
| put_eggplant_in_basket/matching_entire | nan | nan | nan | 0.0 | nan | 0.431 | 0.569 | nan | 0.041 | 0.0 |
|
27 |
+
| apple_in_drawer/matching_avg | 0.009259259259259259 | 0.065 | 0.13 | 0.213 | 0.037 | 0.0 | 0.0 | 0.0 | nan | 0.361 |
|
28 |
+
| apple_in_drawer/variant_avg | 0.07936507936507937 | 0.026 | 0.021 | 0.101 | 0.206 | 0.0 | 0.0 | 0.0 | nan | nan |
|
29 |
+
| ckpt_name | ours | RT-1(Converged) | RT-1(15%) | RT-1-X | RT-2-X | Octo-Base | Octo-Small | RT-1(begin) | OpenVLA | RoboVLM |
|