遊びに誘ったのにはねつけられたときの、子供の悪態です。「よし(＝やめ)にする」から人名の「芳兵衛」と続けますが、「よしべえ」はおそらく「由兵衛」で、隠語で詐欺師のこと。同時に相手の「よすべえ」という断りと掛けた洒落にもなっています。
腹立ちが治まらない場合は、さらに後に「ぺんぺん(＝三味線)弾きたきゃ芸者の子になれ、車が曳きたきゃ車力の子になれ」と続けます。
類似の悪態では、「嫌ならいやさきとんぼの女房」「嫌ならおけやれ桶屋の褌かぶって寝ろやれ」などが各地に伝わっています。「おけやれ」とは「よしとけ」の意。