胎记大多数是不遗传的，只有少数合并有基因缺陷的才会遗传。胎记包括很多种类，常见的有色素性的胎记、血管性的胎记，也就是通常讲的红色的胎记和黑色的胎记。大多数的胎记都是非遗传性的，主要是在胚胎发育过程中，受到某些偶然因素的干扰，导致皮肤的发育异常，局部结构发生了改变，导致皮肤外观和颜色也随之改变，这样就形成了胎记。这种不属于基因突变，不会遗传到下一代。
但是有少数的胎记，如咖啡斑，如果数量较多，比如六片比较大的咖啡斑，往往可能有神经纤维瘤病，属于神经纤维瘤病的一种皮肤表现，这种神经纤维瘤病，就是一种染色体显性遗传的疾病，这一类咖啡斑就是有遗传性的。其他常见的胎记，包括太田痣、色素痣、鲜红斑痣、草莓状血管瘤等，这些通常都是不遗传的。