@zhangeric 谢谢老哥的建议，目前就是在用 pid 。效果不太好所以打算用 sac ，因为后面会优化很多，所以 pid 吃不消了，而且鲁棒性太差了

@Sawyerhou 在线训练太慢了，效果很差。我测试 lstm 环境下可以稳定在 0.5 ，我希望误差可以稳定在 0.02 ，但是实际上有的都在了 0.04 ，我对 lstm 训练不太了解，大佬了解吗？大佬也在做强化学习方面的研究吗？可否留个绿泡泡。

@qscasdqwezxc 我用 sac 训练的话不能直接在线在 dcs 训练，所以我采集了数据通过 lstm 建模，自定义 gym 环境，然后用 sb3 开始训练，目的是水压稳定在 0.5:reward：
error = abs(pressure - self.target_pressure)
if error <= 0.005:
reward = 1.2
elif error <= 0.01:
reward = 1.0 + (0.005 - error) * 40
elif error <= 0.05:
reward = 1.0 - 15 * (error - 0.01)
elif error <= 0.1:
reward = 0.4 - 4 * (error - 0.05)
else:
reward = -5.0 * (error - 0.1)

@liushengxian1230 没借给过别人账号

@bigbugbag
@Zenon
@foolishcrab
@relife 抱歉大家我没有表达清楚，就是我的账号被别人发了一个卖鼠标的视频，我朋友看到我发的卖视频以为我卖鼠标了给我点赞。

@Carson089 男妹妹可以吗（ doge ）：ZjE0MDA1ODU1MDQ=

@csfreshman 可以在 YouTube 看一下 David Silver 的公开课，讲的自我感觉很好哈哈

@JacksonC 男妹妹可以吗（ doge ）：ZjE0MDA1ODU1MDQ=

@vfx666 啥也没干，就买了个东西，让我验证身份

我也是这种，只能乖乖备案

问的 chatgpt 可以测试一下，我不懂这些

macOS 允许用户态程序使用 IOKit 直接操作 SCSI 设备，而不用写 Kext 。

你可以尝试使用 IOKit 访问 SCSI 设备：

#include <IOKit/IOKitLib.h>
#include <IOKit/usb/IOUSBLib.h>

kern_return_t result;
io_service_t usbDevice;
io_iterator_t iterator;

// 查找 USB 设备
result = IOServiceGetMatchingServices(kIOMasterPortDefault,
IOServiceMatching(kIOUSBDeviceClassName),
&iterator);

if (result == KERN_SUCCESS) {
while ((usbDevice = IOIteratorNext(iterator))) {
// 这里可以发送 USB 请求
IOObjectRelease(usbDevice);
}
}

IOObjectRelease(iterator);

恭喜恭喜，但是用生殖隔离确实不太合适 哈哈，可能是太激动了！理解！

@NewYear 破案了，马达没坏，我给我的车钥匙换了一个壳，忘了装防盗芯片

好评！怎么打赏呢

看来大佬是个机器学习大佬啊！我的中文对话模型一直过拟合怎么处理呢？用的 transformer

没什么难度，稍微了解一下 ffmpeg 都可以做到

@iamzuoxinyu 我在 stackoverflow 搜了半天都没搜出来！感谢大佬