Menurut sejarah, suku ini berasal dari keturunan Raja Darmawijaya (Majapahit) yang menyeberang ke Palembang (pulau Perca). Suku ini banyak yang tersebar di pegunungan Bukit Barisan, khususnya di lereng-lerengnya.
Menurut mitologi nama Pasemah berasal dari kata Basemah yang berarti berbahasa Melayu. Hasil utama masyarakat suku ini ialah kopi, sayur-sayuran dan cengkeh dengan makanan pokoknya ialah beras.*