W przypadku, gdy mam obserwujących, którzy lubią teorię macierzy losowych. Niech 𝐗 ~ Wishart lub podobnie. Niech 𝐗ₖ będzie przybliżeniem rangi 𝑘 z korekcją diagonalną (diag(𝐗ₖ)=diag(𝐗)). Niech 𝑓(𝑘) = KL( 𝒩(𝟎,𝐗) || 𝒩(𝟎,𝐗ₖ) ) = ½ [ Tr(𝐗ₖ⁻¹𝐗) + ln(det 𝐗ₖ) − ln(det 𝐗) − 𝑝 ] Jakościowo, jak oczekiwanie 𝔼[𝑓(𝑘)] zmienia się w zależności od k? Najpierw zapisz, jak myślisz, że się zachowuje. Następnie spróbuj to sprawdzić. Uważam, że wynik jest bardzo nieintuicyjny.