在来月经时只有一点点褐色分泌物可能是以下原因导致的：
1.正常现象：刚来月经时，出血量较少，经血在阴道内被氧化，就会呈现出褐色。这是正常的生理现象，一般不需要特殊处理。
2.怀孕：怀孕后先兆流产、宫外孕等情况也可能导致阴道少量出血，误以为是来月经。可以用验孕棒或早孕试纸检测，或去医院抽血检查人绒毛膜促性腺激素（HCG），以明确是否怀孕。
3.内分泌失调：长期的精神压力、情绪紧张、熬夜、过度节食等都可能导致内分泌失调，影响月经来潮。此外，一些妇科疾病，如多囊卵巢综合征、子宫内膜息肉、子宫肌瘤等，也可能导致内分泌紊乱，引起月经异常。
4.其他：服用某些药物，如避孕药、减肥药等，或者环境改变、过度运动等，也可能影响月经来潮。
如果只是偶尔出现一次这种情况，可以先观察，注意休息，避免劳累和剧烈运动，保持心情愉悦。如果经常出现这种情况，或者伴有其他不适症状，如腹痛、白带异常等，建议及时就医，进行相关检查，如B超、性激素六项等，以明确病因，并在医生的指导下进行治疗。