Обычно принято относить выражение Без дураков к «бильярдному языку». В некоторых разновидностях игры в бильярд требовалось положить в лузы определенное количество шаров. Засчитывались и шары, случайно вкатившиеся в лузы. Такие шары назывались дураками. Некоторые игроки предпочитали такие шары не засчитывать, играли «без дураков». Выражение вошло в общий язык.

Однако такое словосочетание первоначально родилось еще во времена московских царей. Когда в царских палатах собирались родовитые бояре «думать государеву думу», принимать серьезные решения, такие заседания проходили, так сказать «при закрытых дверях», без дураков. Теперь, если вспомнить, что в обычаях феодальной аристократии было держать при себе шутов и шутих — «дураков», которые ее развлекали, становится понятным выражение. Без дураков значит: «без шутов», то есть со всей серьезностью, без шуток.

Вспомните гордые слова, которые М. В. Ломоносов сказал всемогущему придворному И. И. Шувалову: