Со всей серьёзностью, без вранья, без шуток.
Иногда выражение относят к «бильярдному» языку.
В некоторых разновидностях игры в бильярд требовалось положить в лузы определённое количество шаров. Случайно вкатившиеся в лузу шары шутливо называли «дураками».
Некоторые игроки предпочитали такие шары не засчитывать, играли «без дураков».
Однако оборот древнее: он родился во времена русского средневековья и связан с обычаями московского царского двора.
Когда в царских палатах родовитые бояре собирались «думать государеву думу», принимать серьёзные решения, то их заседания проходили в строгой секретности.
Туда не пускали никого — тем более острословных и болтливых «дураков», то есть шутов, которых было принято держать при царском дворе.
Выражение «без дураков» буквально значило «без шутов», а переносно — «со всей серьёзностью».
Я смотрю на него в недоумении и, решив, что он шутит, улыбаюсь.
— Ты не улыбься и не смотри как баран на новые ворота. Тебе без дураков говорят, — заявляет Холин…
Я всё же не верю и молчу.
Владимир Осипович Богомолов. «Иван»