Есть люди, с которыми мы не хотим проводить много врмени;
Есть люди, с которыми мы хотим проводить много времени;
Есть даже такие люди, с которыми мы хотим провести всё своё время.

И совершенно отдельно, невзирая на всех прочих - существуют люди, с которыми мы можем провести сколько угодно времени.