推荐《安克创新访谈》,谈大模型的未来和应用
柏舟 新冠5年 07-02大模型的出现与GPU的发展密切相关,未来将有超越基于冯诺依曼架构的系统出现,使大模型存算训一体,真正实现通用人工智能。本文介绍了访谈梗概,讨论了分治法、计算的本质和存算训大模型的意义。
从天气预报谈深度学习,不同的预报对象、结构和心得体会
柏舟 新冠5年 06-28天气预报的主要对象有中期天气预报,风力发电的风速预报以及短时强降雨预报。在Nature上发表了很多文章,主要的方法包括Transformer,图神经网络,AI for Science的一些方法,以及传统的UNet,PredCNN等。
在国际象棋上复现AlphaZero的设计和失败的心得
柏舟 新冠4年 12-19AlphaZero是一种以MCTS为基础的使用模仿学习的强化学习方法,适用于奖励函数难以建模的情形。国际象棋动作空间建模很复杂。复现策略拟合还算成功,但是局势判断拟合失败。