Родители и муж

Добрый день! У меня сложилась ситуация, в которой я не знаю как правильно поступить. Очень надеюсь на Вашу помощь.
Мы с мужем живём в съемной 1-комнатной квартире. Мои родители живут в другом городе. Так сложилось, что моему папе по работе надо приезжать в наш город каждый месяц на неделю. Естественно он останавливается у нас. Моего мужа такие частые долгосрочные визиты очень напрягают. Полгода он молчал, а недавно высказал: «мне не нравится, скажи ему чтобы не приезжал так часто, нам тут тесно, без трусов ходить не могу». С одной стороны он прав, 1-комнатная квартира очень тесна для троих людей. Но как я могу сказать своему папе, чтобы не приезжал, что он нам мешает и его присутствие напрягает! Папа очень самостоятельный человек, сам готовит, делает покупки, лишний раз не возьмёт ничего «нашего» из холодильника, не вредный, не докучает советами, помогает финансово, когда есть возможность.
В свою очередь папа мужа живёт в том же городе, что и мы! И раз в две недели приезжает к нам на выходные с ночёвкой, что всегда сопровождается застольем! Меня это тоже напрягает, но я молчу, потому что понимаю, что это папа мужа и ему хочется с ним проводить время!

Подскажите как правильно поступить? Все же сказать папе, чтобы часто не приезжал? Как это правильно и корректно сделать, чтобы не обидеть!?
Или все нужен разговор с мужем, о том что это мои родители и я не могу им отказать!? Но у меня не хватает доводов…