第10讲-序贯决策的分析01.pptVIP

* k步转移概率矩阵： k步转移概率矩阵的性质： 3、马尔可夫决策 * 状态转移概率矩阵 3、马尔可夫决策 * 例题：某经济系统有三种状态 (比如畅销、一般、滞销)。系统状态转移情况见表6.2。试求系统2步转移概率矩阵。 3、马尔可夫决策 3、马尔可夫决策 * 例题：某经济系统有三种状态 (比如畅销、一般、滞销)。系统状态转移情况见表6.2。试求系统2步转移概率矩阵。 3、马尔可夫决策 * 例6－5 某企业为使技术人员具有多方面经验，实行技术人员在技术部门、生产部门的轮换工作制度。轮换办法采取随机形式，每半年轮换一次。初始状态，即技术人员开始是在某部门工作概率用 表示，j=1,2,3; 表示处于第i个部门的技术人员在半年后（一步）转移到第j个部门的概率。 已知 如果某人开始在工程技术部门工作（部门1），则经过2次转移后他在生产部门工作（部门2）的概率是多少？ 3、马尔可夫决策 * 例6－6 某生产商标为α的产品的厂商为了与另外两个生产同类产品β和γ的厂家竞争，有三种可供选择的措施：措施1为发放有奖债券；措施2为开展广告宣传；措施3为优质售后服务。三种方案分别实施以后，经统计调查可知，该类商品的市场占有率的转移矩阵分别是 已知三种商标的商品的月总销售量为1000万件，每件可获利1元。另外，三种措施的成本费分别为150万，40万，30万。从长远利益考虑，生产商标为α的产品的厂商应该采取何种措施？ 3、马尔可夫决策 * 我国出口某种设备，在国际市场的销售状况有两种：畅销和滞销。畅销时每年可获利100万元，滞销时每年仅获利30万元。以一年为一个时期，如果不采用广告措施或采取广告措施，状态的转移矩阵分另如表6－5，表6－6所示。 确定上一年为畅销状态，每年的广告费为15万元。为了保证以后三年的利润最在化， 是否应该采用广告措施？ 畅销 滞销 畅销 0.8 0.2 滞销 0.4 0.6 表6－5 不采取广告措施 畅销 滞销 畅销 0.9 0.1 滞销 0.7 0.3 表6－6 不采取广告措施 3、马尔可夫决策 * 我国出口某种设备，在国际市场的销售状况有两种：畅销和滞销。畅销时每年可获利100万元，滞销时每年仅获利30万元。以一年为一个时期，如果不采用广告措施或采取广告措施，状态的转移矩阵分另如表6－5，表6－6所示。 如果每年是否采取广告措施可根据上一年经营状况决定，那么，应该怎么决策？ 畅销 滞销 畅销 0.8 0.2 滞销 0.4 0.6 表6－5 不采取广告措施 畅销 滞销 畅销 0.9 0.1 滞销 0.7 0.3 表6－6 不采取广告措施 3、马尔可夫决策 * 1.某企业今年时亏损单位。新上任的厂长准备从明年开始采取改革方案A或B。以一年为一个时期，方案A（表6－10）和方案B（表6－11）的转移矩阵分别为 概率 盈 亏 盈 0.8 0.2 亏 0.4 0.6 表6－10 方案A 概率 盈 亏 盈 0.7 0.3 亏 0.8 0.2 表6－11 方案B 该厂为了以最大的概率在第3年实现盈利，厂长应该采取哪种方案？假定在三年内所采取的方案不变。 作业 * 2.某企业的某种商品的销售状态只分为畅销和滞销两种。每个时期的利润只与本时期及前一时期所处的状态有关，如表6－12所示。 利 润 畅 销 滞 销 畅销 200 －20 滞销 100 －60 表6－12 各种销售状态的利润 已知目前时期的前一时期为滞销。现有两个策略A、B，其转移矩阵分别如表6－13及表6－14所示。 概 率 畅 销 滞 销 畅销 0.8 0.2 滞销 0.4 0.6 表6－13 策略A 概 率 畅销 滞销 畅销 0.7 0.3 滞销 0.5 0.5 表6－14 策略B 策略费用不计。 试问：在下列各种情况下，为使利润最大化，该公司该如何决策？ （1）只经营2年，各年策略相同。 （2）长期经营，各年策略相同。 （3）只经营2年，各年策略可以不同。 （4）长期经营，各年策略可以不同。 Copyright ? 2009 All Rights Reserved,信息管理学院 Copyright ? 2009 All Rights Reserved,信息管理学院 * 邢立宁 国防科技大学五院管理系 Email：xinglining04@gfkd.mtn 联系电话：0731决策理论与方法 * 多阶段决策 序贯决策 马尔可夫