Per usare un componente di MUI bisogna prima importarlo nella pagina in cui vogliamo usarlo (ad esempio index.js):

Possiamo poi inserirlo dove vogliamo in questo modo:

Nella guida di MUI troviamo una pagina completa di esempi che spiega nel dettaglio il componente:
https://mui.com/material-ui/react-button/

Premendo il bottone Show the full source possiamo vedere l'esempio completo. Ci interessano in particolare le righe "import":

Gli esempi di solito mostrano come inserire il componente nel contesto di una pagina, ad esempio qui sopra vediamo che tre bottoni sono inseriti in un componente Stack.