Lo hace y también no lo hace.
Tal vez use una analogía para entender mejor esto. Digamos que tu ordenador está representado por una empresa de mudanzas. Tienen un camión de un tamaño determinado. Quieren trasladar unos muebles de una casa a otra.
Digamos que sólo la suite del salón. Es el camión lo suficientemente grande como para llevar todos los muebles del salón? Si es así puede hacerlo todo en un solo viaje, sino tiene que hacer varios viajes, tardando más tiempo. Lo mismo ocurre con la memoria RAM, si caben todos los programas y datos que utilizas en un momento dado, todo el ordenador funciona lo más rápido posible. Pero si tiene que ir a buscar algo más y vaciar lo que ya ha cargado, esto se come su rendimiento - haciendo que vaya más lento.
¿Y si a esa misma empresa de mudanzas se le pide ahora que traslade también los muebles del dormitorio? Sigue siendo su camión lo suficientemente grande? Esto sería similar en un ordenador si se intenta ejecutar un 2º programa al mismo tiempo que otro ya se está ejecutando. Se aplica el mismo principio. Si hay suficiente espacio extra, entonces la empresa de mudanzas seguiría haciendo un solo viaje, el ordenador seguiría funcionando bien. Pero si hay muy poco espacio para el extra, significa más viajes y el ordenador tendría que empezar a intercambiar de un lado a otro perdiendo tiempo.
Pero aún más similar. El viaje en sí tarda un tiempo determinado. Es decir, aunque haya espacio suficiente para diez casas, el camión no va más rápido por ser más grande. Lo mismo pasa con la RAM, si sólo consumes 2GB, pero tienes 8GB disponibles, el ordenador no va más rápido.
Así que se podría decir que el tamaño afecta a la velocidad, pero no de forma aislada. Depende de lo que intentes hacer exactamente (mover más muebles = abrir más programas / datos).