Med ljudmi kroži več bolj ali manj navihanih zgodb o nastanku imena Ritoznoj. Ena od zgodb pravi, da se kraj tako imenuje zato, ker cerkev sv. Marjete, ki je nekakšno središče Ritoznoja, stoji ravno na sredi med dvema hribčkoma, ki od daleč pač izgledata kot zadnjica. Druga bolj razširjena različica pa se vrača v čase, ko so vinogradniki vsa dela v vinogradih opravljali ročno, kar je od njih zahtevalo velik napor. Vinogradi ponavadi ležijo na velikih strminah, ljudje, ki jih obdelujejo, pa seveda potočijo tudi kakšno kapljico potu. Znoj je tako tekel tudi po zadnjici in do imen Ritoznoj in Ritoznojčan ni bilo več daleč.