沈彩十三岁为学者、藏书家陆烜（号梅谷）妾。陆家是浙江平湖的望族。在沈彩《春雨楼集》序中，陆烜称沈彩出自吴兴“故家”。[53]我们对沈彩为妾之前的生活知之甚少。她曾在陆烜收藏的北宋画家、书法家米芾（1051—1107）《云山图》手卷题跋中提及自己的童年，在以鉴赏家身份对米芾笔墨佳妙处做了一番评点后，沈彩受手卷上茫茫雾霭启发，蓦然忆起自己似乎相对自由、活跃的童年，乘舟徜徉于故乡的山水画卷间：
余记儿时常往来于故乡浮玉碧浪湖间，见云树葱茜，人家依水，卞山道场。砻山一带，如鬟如眉，若灭若没，杳霭苍茫，俱入图绘。披此卷，旧游如梦。[54]
从十三岁起，她在陆府的居室基本成为她全部的世界。没有资料显示她曾归宁。但她的诗词表明她与小妹飘香保持着亲密的往来，偶尔，飘香会来与她同住，后来，飘香似乎也成为陆府的妾室。[55]
沈彩文中记述的唯一一次远足是去附近的东溪。那年她二十岁，陆烜带着她，乘着新置办的书画舫夜游东溪。在《东溪泛舟记》这篇短文中，沈彩记下了丈夫的邀请：
壬辰七月，吾家新置书画舫成，制虽朴小，而有窗槛棂格，仍设渔钓之具。是夜，月明如昼，主君谓余曰：“子好游乎？吾语子游：游，不必名山大川也，惟取适兴而已。只此东溪，可沿，可泛，可吟，可眺，盍往游乎？”余曰：“喏。”乃命农叟棹舟，属丫鬟备茶茗膏烛，遂登舟。
文中，沈彩以抒情的笔调绘写自己对夜游中景色与声音的体察——简言之，细致入微地描摹这一罕有的经历所带来的欣悦与亲见亲闻的点点滴滴：
于时已立秋，天气清肃，白露下瀼瀼，寿星若环若璧，已宿鹑首之次，两岸荻花萧然，栖鸟不惊，微波不动，白云粼粼，皆贴水底。主君曰：“苏子赤壁之游，客有吹洞箫者。”[56]言未已，笛声隐隐，遥出林端。时见人家灯火从篱隙射出，熠熠有光。或有起者，见余舟洞窗燃烛，皆错愕审顾。乃命插篙中流，烹茗进泉，尽数器，夜已深乃返。