#戒断# 希望取得进展的第一天…

呜呜呜呜呜。

今天上午的计划是,写一些对module的看法,大致把代码搞出来。下午和晚上的计划,我会同步更新在这里的。

昨天的失策主要在于,下午状态垮掉去摸鱼,晚上一摸鱼就停不下来。(叹)

  • 5
  • +7番茄
  • 790只自习生围观
  • 2022年2月5日 08:45打卡
  • 2 年,2 月前有动静
  • 引用
  • 举报

早上真是美好的时段啊,上午9点坐在电脑前,窗外阳光清朗+鸟叫,感觉一天时间很充裕,一切皆有可能。

接下来打算,对着代码+文档,看stable-baseline对HER和DDPG的实现。

我终于有点明白了,TD3它是有两套DDQN式的target+predict网络(为了避免追移动靶),为了防止估计过高,又每次取两套网络里的最小,作为两套网络去拟合的数据……?

目前可能的要求:obs action space 继承自 gym 的一些 space (goalSpace,for HER)
真希望可以直接调用啊。

感觉可能把 kinematic 的部分,放到最基础的 setting 里更好?明天再说…

作者的近日打卡

猜你喜欢

希望取得进展的…第三天? - 目前的思路是 ppo curriculum,但 sac 感觉会比 td3 更wo
今天是戒断第一天 - 昨天摸了一些时间,虽然时间不是很长。很大程度上因为昨天状态不好。然后昨天晚上睡的
希望取得进展的第四天 - 啊呀,昨天忘打卡了。
希望取得进展的第一天 - 昨天是一点进展都没有…… 逃避现实、沉醉虚拟幻想,真的令人很愉快,但这是不健康的
希望取得进展的第二天 - 如题,今天是周天了,明天就是周一,然后很快就周三了。今天晚上要取得进展。 ,
希望取得进展的第五天 - 昨天虽然摸鱼了,但获得了一些进展。今天回到教室了,可能南京升温了,昨天图书馆很热
希望取得进展的第三天 - 如题。今天打算调程序。今天就周一了,明天就周二了,后天就周三了,这就二月中旬了,
希望取得进展的第六天 - 昨天最大的进展就是,面对组会的时候没有心态崩盘…… 事实上,我进组实习的很大一部
希望取得进展的第四天 - 明天就要开组会了哎,今天有几个小想法,要写一下train一下看看结果。考虑明天跑
希望取得进展的第二天 - 今天是希望取得进展的第二天。已经是周天了,然后要干的事情蛮多的。加油加油。

合作伙伴

线上在线自习室晚自习。番茄工作法、四象限、打卡、作业清单、作业辅导、作业交流、作业跟踪、作业计划、个人宣传相关内容

行恒 © 行恒 2013