CS294(285) Actor Critic之Critic

 CS294(285) Actor Critic系列

CS294(285) Actor Critic之agents（https://duanzhihua.blog.csdn.net/article/details/103106090）

 CS294(285) Actor Critic之Critic

构建基类BaseCritic

class BaseCritic(object):
    def __init__(self,**kwargs):
        pass

    def update(self,ob_no,next_ob_no,re_n,terminal_n):
        raise  NotImplementedError

 BootstrappedContinuousCritic子类继承BaseCritic

注意 标记表示:
 符号变量的前缀是sy_u，以区别于数值变量   

 前缀和后缀:
 ob - 观测值 observation 
 ac - 动作 action
 _no - 批处理数据大小 n, 观测维度 observation dim 
 _na - 批处理数据大