Если у одного директора несколько советников, то правильно: советник директора. Несколько советников одного директора так и именуются: советники директора. Если один советник должен сотрудничать с несколькими директорами, то правильно: советник директоров. Если таких советников много, то их следует так и назвать: советники директоров. Выражение в форме множественного числа может использоваться и в случае, когда речь идет о советниках одного директора, но каждый из них сотрудничает с каким-то своим директором.