Начнём с того, что комп под Х64 ОБЯЗАТЕЛЬНО должен быть хотя бы 2х ядерным, это раз.
И должно быть Не меньше 4 Гб оперативы.
Если это у вас не так, то ставьте на место х86 систему.
А по вашему мнению отсутствие драйверов в системе влияет на скорость работы процессора?
Если в системе нет драйверов то система не запустится вообще, а отсутствие драйверов на определенные устройства никак не влияют на проц.
Для установки х64 необходимо минимум 4 гига оперативы, 20 гигов жесткий диск и двух ядерный проц не менее 1,9 - 2,0 гигагерц, если у компа параметры меньше этого. ставить только Windows - x32.