馬爾可天鏈{ξn,n=1,2,…}具有下面的轉移矩陣P,計算狀態(tài)1經三步仍處于狀態(tài)1的概率。
n表示前n次取到的產品中所含廢品的個數(shù)。證明{ξn,n=1,2…}是一個馬爾可夫鏈,并寫出它的轉移矩陣。