（8-5）Dueling DQN 算法：股票交易策略系统（3）

8.3.6  Double DQN算法实现

Double DQN（双重深度Q网络）改变了目标网络的Q值计算方式，解决了DQN算法中的Q值过高估计问题，可以与Dueling DQN算法结合使用，以提高模型的整体性能。

（1）实现基于Double DQN（双重深度 Q 网络）算法的训练，其中 Q 网络和目标网络之间采用了特定的更新策略来减轻 Q 值过高估计问题。具体实现代码如下所示。

def train_ddqn(env):

    # 定义 Q 网络的类
    class Q_Network(chainer.Chain):

        def __init__(self, input_size, hidden_size, output_size):
            super(Q_Network, self).__init__(
                fc1 = L.Linear(input_size, hidden_size),
                fc2 = L.Linear(hidden_size, hidden_size),
                fc3 = L.Linear(hidden_size,