К развитию хорошей устной и письменной речи размер пассивного запаса имеет весьма отделенное отношение. Для устной речи нужно уметь мгновенно правильно грамматически составлять предложения, причем чтобы они звучали естественно, а не неуклюжей калькой, надо иметь массу готовых речевых образцов, знать collocations, да много еще чего, не говоря уж о произношении, интонации.
Кстати, весьма обычное заблуждение тех, кто еще не научился нормально говорить - "Я плохо говорю, потому что мало слов знаю".