オプション内の「ジェム消費履歴」から確認することができます。

■手順
お庭画面右上の［オプション（歯車マーク）］>［ジェム消費履歴］