Dans ce cas, il y a bien accord du participe passé, si le C.O.D. est placé avant le verbe.
Exemples : Les sacrifices que cet achat a coûtés. / Les risques que j’ai courus. / Les vacances exceptionnelles que j’ai vécues.

Donc,  Je pense à toutes les heures que Matt a passées à travailler.
On dit bien : je passe des heures à travailler et non « je passe à travailler des heures » ; donc le verbe passer a bien « les heures » pour COD.

Pourinfo.:

 Verbes intransitifs au sens propre;  donc avec un participe passé invariable. Ils sont alors accompagnés de compléments circonstanciels, à ne pas confondre avec des C.O.D.
Exemples :
Les quatre mille euros que cette réparation m’a coûté. -> Combien m’a coûté la réparation ?
La fortune que ces achats ont valu. -> Combien ont valu ces achats ?
Les kilos que ce paquet a pesé. -> Combien de kilos a pesé ce paquet ?
Les heures que j’ai couru. -> Combien d’heures…?
Les quarante années que j’ai vécu. -> Combien d’années… ?

Merci beaucoup, Joëlle! C’est très clair!