Bootstrap Scrolling Navbar animatie lukt niet

Ik wil graag dat wanneer je al een tikje naar beneden scrolt dat mijn navbar de helft kleiner wordt. Maar nu wordt mijn navbar kleiner naar mate je naar beneden scrolt. Maar wanneer je helemaal naar boven gaat wordt die wel in een keer groter.

Ik wil dat die ook in een keer kleiner wordt als je naar beneden gaat. Weet iemand hoe?
Ik weet echter niet of dit met mijn CSS of Javascript te maken heeft.

(Let niet op het logo, dat die kleiner wordt moet ik er na nog doen).

/* Media Queries */
@media(min-width:767px) {
    .top-nav-collapse {
        height: 50px;
    }
}

//jQuery to collapse the navbar on scroll
$(window).scroll(function() {
    if ($(".navbar").offset().top > 50) {
        $(".navbar-fixed-top").addClass("top-nav-collapse");
    } else {
        $(".navbar-fixed-top").removeClass("top-nav-collapse");
    }
});

Voorbeeld hier