參考視頻1:https://www.bilibili.com/video/BV1H64y1T7zQ/?spm_id_from=333.337.search-card.all.click
參考視頻2(正定矩陣):https://www.bilibili.com/video/BV1Ag411M76G/?spm_id_from=333.337.search-card.all.click&vd_source=7a1a0bc74158c6993c7355c5490fc600
首先先來看一下 Hessian 矩陣的定義
計算 Hessian 矩陣有兩種方法
1.從定義出發:
這種方法很簡單,看上圖的定義,計算多元二次函數的所有偏導,然后把它們填進 Hessian 矩陣即可
2.先轉成二次型,然后再計算 Hessian 矩陣
參考正定矩陣那個視頻,我們先把 多元二次 函數按照 “二次矩陣” 的方式寫下來,如下圖
如果能寫成那個矩陣乘法的形式,那么此時它的二次偏導矩陣 (Hessian矩陣) 就是 A
以下是一個例子:
The calculation process is as follows: