En quoi la RAM graphique est-elle différente de la RAM système?

Je sais qu'un GPU et un CPU sont des choses fondamentalement différentes et pourquoi ils sont tous les deux nuls à faire le travail de l'autre. Mais ce que je ne comprends pas, c'est pourquoi la RAM système standard a toujours été une génération derrière la RAM utilisée sur les cartes vidéo.

Si je comprends bien, ce ne sont que des types de DRAM différents, mais il me semble que les différences pourraient être abstraites par le contrôleur de mémoire intégré au silicium du processeur et du GPU. La norme actuelle pour la RAM système est la DDR4, mais les cartes vidéo utilisaient GDDR4 pendant des années avant que la DDR4 ne devienne une chose pour les ordinateurs de bureau. Les cartes vidéo sont maintenant expédiées avec la RAM HBM (GDDR5?), qui est plus rapide que la mémoire système DDR4.

Pourquoi n'utilisons-nous pas le même type de RAM pour les deux ? Qu'est-ce qui les rend différents ?