强化学习笔记七月 5, 2020强化学习笔记2:马尔科夫决策过程Markov decision process(MDP)马尔科夫过程(MarkovProcess,MP)我们说一个state若满足,则其具有马尔可夫性,即该state完全包含了历史中的所有信息。马尔科夫过程是无记忆的随机过程,即随机状态序列具有马尔可夫属性。一个马尔科夫过程可以由一个元组组成⟨S,P⟩\langle\mathcal{S},\mathcal强化学习 RL马尔科夫决策过程 MDP
强化学习笔记七月 1, 2020强化学习笔记1:基本概念概述强化学习是一门多学科交叉的技术与传统控制的关系:相似性:RLtraditionalcontrolagentcontrollerenvplant+enviromentrewardfeedback(errorsignals)valueoptimizefunction不同点:传统的控制:将任务分解成多强化学习RL
机器学习笔记六月 28, 2020机器学习-Coursera笔记AI->机器学习分类图矩阵补课特征值分解EVD,奇异值分解SVDAA是矩阵xix_i是单位特征向量λi\lambda_i是特征值Λ\Lambda是矩阵特征值EVD特征值分解(Theeigenvaluevaluedecomposition)针对方阵,特征值A=UΛU−1=UΛUTA=U\LambdaU机器学习 MLCoursera
机器学习笔记六月 25, 2020RNN 序列模型 sequence modelSequencemodel概述:处理样本数不规则的模型recurrentneuralnetwork递归神经网络参数共享,前->后样本逐个扫描a激活用一套参数y激活用一套参数参数流x、y个数不一致的RNN序列样本分类问题音乐生成、机器翻译RNN类型总结languagemodelwithRNN输出P(s序列模型 sequence model循环神经网络 RNN
笔记五月 3, 2020科学写作Paper协作工具找词汇LinggleNetspeak杂志影响力ScimagoJournalSemanticScholarGooglescholarCorpusofContemporaryAmericanEnglish创新点理论创新结果创新方法创新写作规范—符号Latex智能引用clerveref,科学写作Paper
工具五月 1, 2020Mac必备软件推荐,让你效率起飞🚀系统工具效率Alfred置顶,比spotlight高效,支持各种插件,没有上限brew软件包管理工具,要装啥brewinstallxxx就好了Appcleanermac卸载软件就靠它,一键拖入,彻底清理干净。CleanMyMac、Dr.Cleaner还收费,笑死人istatemenus监控你的电脑,trickApp工具
控制理论笔记四月 5, 2020控制理论笔记经典控制理论动态系统建模通过配置系统输入u(t),使u(s)G(s)的极点使系统满足一定特性一阶系统特性G(s)=as+aG(s)=\frac{a}{s+a}1a\frac{1}{a}是时间常数τ\tau,对应上升为0.634τ4\tau对应阶跃响应0.98二阶系统特性mx¨+Bx˙+kx=Fm\d高级控制理论经典控制理论
设置备忘四月 1, 2020Mac设置系统相关系统安装工具系统安装、刻录工具U启动盘制作工具rufusWTG辅助工具wtg-assistantbootcamp蓝牙鼠标连不上重置SMC,关机,control➕option➕shift➕电源for10s,再开机Mac两个bin目录相同点/usr/bin和/usr/local/bin都是用来存系统MacApp黑苹果
设置备忘三月 18, 2020Latex设置Texpad实时编译注意Texpadlive支持实时编译缺点:不支持高级packages,如cref经过验证,下列包不支持实时编译\crefname{figure}{Fig.}{Figs.}\crefname{table}{Table.}{Tables.}\crefname{appendix}{}{SnippetsLatex
设置备忘二月 1, 2020Matlab设置代码片段snippets保存pdf调整a4纸至合适大小h=figure;plot(1:10);set(h,'Units','Inches');pos=get(h,'Position');set(h,'PaperPositionMode','Auto','PaperUnits','Inches','Pmatlabsnippets
设置备忘一月 1, 2020python-snippetspython读取txt数据plot从txt获取数据defget_txt_result(filename,sp=-1,ep=-1,debug=False):fileReadObj=open(filename)#再读入后续的文件fileLines=fileReadObj.readlines()#一次性读pythonsnippets