Descobri a resposta e estou enviando facilitar a vida de quem tiver essa mesma dúvida.
private void button4_MouseEnter(object sender, EventArgs e)
{
button4.Font = new System.Drawing.Font("Calibri", 14, System.Drawing.FontStyle.Underline, System.Drawing.GraphicsUnit.Point, ((byte)(0)));
}