В критике стихотворение по большей части рассматривалось в контексте М. каб. и поэтому наибольшее внимание вызывали мотивы бродяжничества и хулиганства. После предельной императивности, «крикливости» стихов имажинистского периода, этот сборник удивлял своей «тихостью», минорностью. Так, например, И. А. Груздев в рецензии на него писал: «Ругань, кощунство и непристойность, как литературный прием, законны. Пушкин написал «Телегу жизни» с «русским титулом» и, когда П. Вяземский переделал стихи для печати, Пушкин в следующем издании восстановил свой текст, многоточием ориентируя читателя на пропущенное ругательство. Имажинисты и Есенин в свое время не скупились на подобные вставки, правда, делая это недостаточно убедительно. Но независимо от этого Есенин был поэт со своим пафосом и со своим жестом. Новая книга — не Есенин, но тень от него». И далее, приведя четвертую строфу стихотворения, критик продолжал: «Школьнику это может показаться ужасным нарушением всех условностей, но — для хулигана и скандалиста, каким настойчиво рекомендует себя в стихах Есенин, это, в сущности, программа-минимум, и, может быть, потому стихи не производят должного впечатления» (журн. «Русский современник», Л.–М., 1924, № 3, с. 255). Прямо противоположное увидел в стихотворении Ф. А. Жиц. Заметив, что «хорошо сделанных, грамотных стихов в литературе нашей необычайно много, подлинной же поэзии в ней, к сожалению, необычайно мало», он продолжал: «Большей частью живой поэтический голос подменен весьма искусными руладами стальных соловьев, в хоре которых обаятельно одинок и неповторим голос есенинских стихов». К числу таких произведений он причислил «Не ругайтесь! Такое дело!..». Относительно мотивов бродяжничества, он, цитируя вторую строфу, замечал, что «такие настроения недолго живут в душе Есенина. Поэту, “нежно больному вспоминанием детства”, не уйти от заросшего пруда и от хриплого звона ольхи» (Кр. новь, 1925, № 2, февраль, с. 282–283).

Полное неприятие стихотворения продемонстрировали критики пролеткультовского круга. Гайк Адонц писал: «Современность требует от своих поэтов яркой, определенной идеологии. Узкие рамки личных переживаний не могут теперь претендовать на какую-либо значимость. А Есенин за эти рамки не выходит и, вероятно, не может выйти. Его кажущееся буйство, его творческое «хулиганство», как он любит выражаться, в сущности не что иное, как самая монотонная, сладенькая лирика, расцвеченная нарочито грубыми словечками и преднамеренно резкими, отталкивающими образами». В подтверждение критик обращался прежде всего к «Не ругайтесь! Такое дело!..», усмотрев в нем «мотивы полнейшего отчаяния, полнейшей оторванности от жизни» (журн. «Жизнь искусства», Л., 1925, № 34, 25 августа, с. 10). Другой критик подобного же толка, И. Т. Филиппов писал: «Приход Октябрьской революции огорошил Есенина. В этот момент он намеревался уйти от культуры», — далее критик цитировал «Не ругайтесь! Такое дело!..» (журн. «Лава», Ростов-на-Дону, 1925, № 2/3, август, с. 70).