半马尔可夫决策过程(SMDP),Semi-Markov decision process (SMDP)
1)Semi-Markov decision process (SMDP)半马尔可夫决策过程(SMDP)
2)semi-Markov decision process半马尔可夫决策过程
1.For a class of controlled semi-Markov systems,which are formulated assemi-Markov decision processes(SMDPs),some parameters are usually indeterminate or unknown,and the performance function or the system parameters,i.半马尔可夫决策过程(SMDP)描述的一类受控半Markov系统,其模型参数在实际中常常不确定或不可知,可能导致随机过程的性能函数和系统参数(即嵌入链转移概率和状态逗留时间分布)皆不确定。
2.The problems whose systems with sojourn times can often be modeled assemi-Markov decision process (SMDP).当决策行为执行从时刻点扩展到连续时间上时,经典的马尔可夫决策过程模型也扩展到半马尔可夫决策过程模型(SMDP)。
英文短句/例句
1.semi-Markovian decision process半马尔可夫决策过程
2.New Achievements in Adaptive Markov Decision Process;马尔可夫决策过程自适应决策的进展
3.IT Project Planning Method Based on Markov Decision Process;基于马尔可夫决策过程的IT项目进度计划方法
4.Optimal Robust Decision Problems for Uncertain Semi-Markov Systems;不确定半马尔可夫系统最优鲁棒决策研究
5.Research of the Dynamic Firing Distribute Way of Artillery Based on Markov Decision Processes基于马尔可夫决策过程的炮兵群动态火力分配方法
6.A Transmission and Scheduling Scheme Based on Markov Decision Process in Cognitive Radio Networks一种基于马尔可夫决策过程的认知无线电网络传输调度方案
7.Markov Decision Processes Model for Flow Rationing Routing Strategy基于马尔科夫决策过程的货物流的配给策略
8.stationary gaussian markovian process平稳高斯马尔可夫过程
9.discrete-time Markov process离散时间马尔可夫过程
10.Decision-making on Stage Financing Based on Markov Process;基于马尔科夫过程的风险资本多阶段投资决策
11.Existence of the Invariant Measure of Piecewise Determinisitic Markov Processes;逐段决定马尔可夫过程的不变测度的存在性
12.Application of Piecewise Deterministic Markov Processes to Risk Theory;逐段决定马尔可夫过程在风险理论中的应用
13.Policy of Stock Investment Based on the Continuous Markov Process;基于连续时间马尔可夫过程的证券投资策略
14.Markovian Decision Programming Model Study on Spare Parts Inventory;备件储备量的马尔可夫决策模型研究
15.The Forecasting Model of the Rainfall Fuzzy Markov Processes;降雨量的模糊马尔可夫过程预报模型
16.Parametric Estimate of Wavelet Transformation on Hidden Markov Processes;隐马尔可夫过程小波变换的参数估计
17.Study on Multi-Action Dynamic Maintenance Policy Based on Non-Homogeneous Markov Process;基于非齐次马尔可夫过程的多动作动态维护策略研究
18.Markovian Decision Planning Model of Compound Stochastic Description混合随机描述的马尔可夫决策规划模型
相关短句/例句
semi-Markov decision process半马尔可夫决策过程
1.For a class of controlled semi-Markov systems,which are formulated assemi-Markov decision processes(SMDPs),some parameters are usually indeterminate or unknown,and the performance function or the system parameters,i.半马尔可夫决策过程(SMDP)描述的一类受控半Markov系统,其模型参数在实际中常常不确定或不可知,可能导致随机过程的性能函数和系统参数(即嵌入链转移概率和状态逗留时间分布)皆不确定。
2.The problems whose systems with sojourn times can often be modeled assemi-Markov decision process (SMDP).当决策行为执行从时刻点扩展到连续时间上时,经典的马尔可夫决策过程模型也扩展到半马尔可夫决策过程模型(SMDP)。
3)Semi-Markov decision processes (SMDP)半马尔可夫决策过程
1.In this paper, an optimal Call Admisition Control (CAC) scheme based on Semi-Markov Decision Processes (SMDP) is presented to support multiple class services for QoS wireless networks.该文提出了一个基于半马尔可夫决策过程理论的最优准入控制策略来支持有服务质量要求的多类业务的无线CDMA网络。
4)semi-markov decision processes半马尔可夫决策过程
1.The performance optimization of semi-Markov decision processes (SMDPs) is concerned based on parameterized learning.讨论半马尔可夫决策过程(SMDP)基于参数学习的性能优化问题。
5)Markov decision process马尔可夫决策过程
1.IT Project Planning Method Based on Markov Decision Process;基于马尔可夫决策过程的IT项目进度计划方法
2.In this paper,a reasonable simplified WTA problem was solved viaMarkov decision process theory.讨论了在合理简化条件下的分配过程,先把对目标群的射击效能作为目标函数制定决策,可将目标分配决策化成一个马尔可夫决策过程,通过策略迭代算法得到最优分配策略从而实现系统效益的最大化。
3.The decision model of agent was described withMarkov decision process (MDP).为此,提出了具有自主决策功能的机动单元智能体的结构模型,它由感知、威胁预测、决策、学习和执行等部分组成;建立了用于威胁预测的神经网络模型,并将智能体的决策描述为马尔可夫决策过程(MDP)。
6)Markov decision processes马尔可夫决策过程
1.Entropic measurements of complexity forMarkov decision processes;马尔可夫决策过程复杂性的熵测度
2.A path planning was preferred based onMarkov decision processes (MDP).提出了基于马尔可夫决策过程的路径规划方法;并建立了基本的马尔可夫决策模型和结合状态聚类的分层马尔可夫决策模型,同时给出了两种规划的仿真实验及结果分析。
3.This paper presents a model called measure-valuedMarkov decision processes(MVMDPs) and within this model the understanding of the agent to the environment is denoted by the mathematical notion of measure.本文提出测度值马尔可夫决策过程新模型。
延伸阅读
马尔可夫决策过程基于马尔可夫过程理论的随机动态系统的最优决策过程,英文缩写 MDP。马尔可夫决策过程是序贯决策的主要研究领域。它是马尔可夫过程与确定性的动态规划相结合的产物,故又称马尔可夫型随机动态规划,属于运筹学中数学规划的一个分支。马尔可夫决策过程是指决策者周期地或连续地观察具有马尔可夫性的随机动态系统,序贯地作出决策。即根据每个时刻观察到的状态,从可用的行动集合中选用一个行动作出决策,系统下一步(未来)的状态是随机的,并且其状态转移概率具有马尔可夫性。决策者根据新观察到的状态,再作新的决策,依此反复地进行。马尔可夫性是指一个随机过程未来发展的概率规律与观察之前的历史无关的性质。马尔可夫性又可简单叙述为状态转移概率的无后效性。状态转移概率具有马尔可夫性的随机过程即为马尔可夫过程。马尔可夫决策过程又可看作随机对策的特殊情形,在这种随机对策中对策的一方是无意志的。马尔可夫决策过程还可作为马尔可夫型随机最优控制,其决策变量就是控制变量。发展概况 50年代R.贝尔曼研究动态规划时和L.S.沙普利研究随机对策时已出现马尔可夫决策过程的基本思想。R.A.霍华德(1960)和D.布莱克韦尔(1962)等人的研究工作奠定了马尔可夫决策过程的理论基础。1965年,布莱克韦尔关于一般状态空间的研究和E.B.丁金关于非时齐(非时间平稳性)的研究,推动了这一理论的发展。1960年以来,马尔可夫决策过程理论得到迅速发展,应用领域不断扩大。凡是以马尔可夫过程作为数学模型的问题,只要能引入决策和效用结构,均可应用这种理论。数学描述 周期地进行观察的马尔可夫决策过程可用如下五元组来描述:{S,(A(i),i∈S,q,γ,V},其中S 为系统的状态空间(见状态空间法);A(i)为状态i(i∈S)的可用行动(措施,控制)集;q为时齐的马尔可夫转移律族,族的参数是可用的行动; γ是定义在Γ(Г呏{(i,ɑ):a∈A(i),i∈S}上的单值实函数;若观察到的状态为i,选用行动a,则下一步转移到状态 j的概率为q(j│i,ɑ),而且获得报酬γ(j,ɑ),它们均与系统的历史无关;V是衡量策略优劣的指标(准则)。策略 策略是提供给决策者在各个时刻选取行动的规则,记作 π=(π0,π1,π2,..., πn,πn+1...),其中πn是时刻 n选取行动的规则。从理论上来说,为了在大范围寻求最优策略πn,最好根据时刻 n以前的历史,甚至是随机地选择最优策略。但为了便于应用,常采用既不依赖于历史、又不依赖于时间的策略,甚至可以采用确定性平稳策略。指标 衡量策略优劣的常用指标有折扣指标和平均指标。折扣指标是指长期折扣〔把 t时刻的单位收益折合成0时刻的单位收益的βt(β<1)倍〕期望总报酬。平均指标是指单位时间的平均期望报酬。采用折扣指标的马尔可夫决策过程称为折扣模型。业已证明:若一个策略是β折扣最优的,则初始时刻的决策规则所构成的平稳策略对同一β也是折扣最优的,而且它还可以分解为若干个确定性平稳策略,它们对同一β都是最优的。现在已有计算这种策略的算法。采用平均指标的马尔可夫决策过程称为平均模型。业已证明:当状态空间S 和行动集A(i)均为有限集时,对于平均指标存在最优的确定性平稳策略;当S和(或)A(i)不是有限的情况,必须增加条件,才有最优的确定性平稳策略。计算这种策略的算法也已研制出来。参考书目R.A.Howard,Dynamic Programming and Markov Processes, MIT Press, Cambridge Mass., 1960.