Neil Young opisuje konsekwencje rozstania, które są równoznaczne z „rozpadem całego świata”. Aby uniknąć tego bólu, należy być „pewnym od samego początku” - a zatem nie wiązać się z daną osobą, gdy nie jesteśmy całkowicie przekonani co do autentyczności i stałości naszych uczuć.
Muzyk nagrał album „After the Gold Rush” na krótko przed rozpadem swojego pierwszego małżeństwa z Susan Acevedo. Możliwe zatem, że pogorszenie się relacji z ówczesną partnerką wpłynęło na tekst „Only Love Can Break Your Heart”.
Z drugiej strony artysta śpiewa tutaj o „przyjacielu, który chowa swoją głowę w snach”. Być może więc Young chciał nawiązać do jednego ze swoich znajomych, który po rozstaniu nie potrafił poradzić sobie z bólem i odcinał się od świata.
Zgodnie z jedną z popularnych interpretacji, Young faktycznie napisał tę piosenkę dla zaprzyjaźnionego muzyka Grahama Nasha, z którym występował w Crosby, Stills, Nash & Young. „Only Love Can Break Your Heart” miałoby nawiązywać do rozpadu związku Nasha oraz Joni Mitchell. O tym samym romansie opowiadała „Our House” jedna z piosenek z repertuaru Crosby, Stills, Nash & Young.
