马帅
专职科研岗/博士后
电子邮箱：andyshuai.ma@foxmail.com
研究领域：马尔科夫决策过程，强化学习






个人简介2020年5月获得加拿大康考迪亚大学哲学博士学位。博士学习期间主要研究1. 马尔科夫过程/强化学习中的风险决策，机器学习；2. 脑电图实验（Electroencephalogram, EEG），记忆理论（working memory），认知学习理论（cognitive learning theory）。期间发表相关领域学术论文6篇。
主要研究领域为马尔科夫决策过程、强化学习、风险评估/决策、机器学习理论、博弈论，多目标优化等。
?
教育背景2013/08 - 2019/10 ?加拿大康考迪亚大学，信息系统工程，博士
2010/09 - 2013/06 ?大连理工大学，工业工程，硕士
2006/09 - 2010/06 ?大连理工大学，物流工程，本科
?
研究成果Shuai Ma, Jia Yuan Yu (2019). State-Augmentation Transformations for Risk-Sensitive Reinforcement Learning. In Proceedings of the 33rd AAAI Conference on Artificial Intelligence (AAAI), vol. 33, pp. 4512-4519.
Shuai Ma, Jia Yuan Yu (2019). Variance-Based Risk Estimations in Markov Processes via Transformation with State Lumping. In Proceedings of the IEEE International Conference on Systems, Man and Cybernetics (SMC), pp. 958-963.
Shuai Ma, Jia Yuan Yu (2017). Transition-based versus State-based Reward Functions for MDPs with Value-at-Risk. In Proceedings of the 55th Annual Allerton Conference on Communication, Control, and Computing (Allerton), pp. 974-981.