Utwór, jak cały album, jest fenomenalnie niedoskonały. Odbiorca słyszy pogłos, czasem trzeszczenie. Jednak wszystko jest tu zamierzone. W czasach "idealnych" piosenek, doskonale dopracowanych z perfekcyjnym dźwiękiem, trafia się Foy Vance ze swoim albumem "From Muscle Shoals", którego estetykę słuchacz zrozumie wiedząc, że artysta zwraca się w tym wydawnictwie do muzyki popularnej południowych Stanów Zjednoczonych lat 60-tych. I faktycznie, słychać w nim tą inspirację, odnosząc wrażenie, że tuż obok Foya w studiu nagrywała Aretha Franklin i Etta James.
Piosenka w męski, pełen emocji sposób traktuje na temat miłości. Z resztą wszystkie piosenki tego albumu łączy motyw nieszczęśliwej miłości, a "Pain Never Hurt Me Like Love" jest tego sztandarowym przykładem. Podmiot mówiący w utworze opowiada o miłości, którą darzył kobietę. Uczucie sprawiło, że zostawił za sobą wszystko i podążał jej śladem, jednak ostatecznie musiał pozwolić jej odejść, ponieważ jak twierdzi nie był dla niej "wystarczająco dobry." "Oddał" kobietę innemu mężczyźnie, jednak nadal martwi się, że zostanie ona zraniona, a Podmiot sam doskonale rozumie, że miłość i strata bolą najbardziej, bardziej niż ból fizyczny.
