调所广乡生于1776年，卒于嘉永元年（1849年），名前是广乡，通称笑左卫门。
广乡的亲生父亲川崎主右卫门基明是城下士中的下级武士。广乡是末子，被过继给了无子的下级武士调所清悦为养子——调所清悦是负责奥中茶道的下级藩士。
1798年在江户的萨摩藩邸里当了一名小纳户（藩主侧用人），从此被隐居的大殿樣岛津重豪注意，重豪随后提拔他为茶道头。
1808年岛津重豪重掌藩政，九代家主齐宣被迫退隐，十代家主岛津齐兴继位，但实权仍掌握在重豪手中。
调所熟悉民政、言辞便给，更重要的是他平时意气飞扬、不怕困难，所以重豪对他越来越看重，升职他为“使番”负责传递家主命令、巡查事务。
1827年重豪发布向全藩征求财政改革建议的命令。在诸多的建白书中，调所笑左卫门广乡的策论最对重豪的胃口，于是他被提拔成町奉行。
两年后，重豪又把调所的职位改为御侧用人役、御两隐居样御续料挂。
御侧用人役是家主身边的官员，职责类似秘书，负责藩政所和家主之间的沟通。
御续料挂是负责财务的大管家，两隐居是指隐居的两代家主重豪和齐宣，御两隐居样御续料挂就是隐居的两代家主的对外大管家。
从此调所成为岛津重豪最信任的官员，重豪称他为“我的眼睛”。
萨摩藩到文政末年（1830年），百事皆废，藩吏欠薪最长者达十三个月，连“参觐交代”几乎都无法进行，重豪对藩财政的状况很苦恼，准备改革藩政，命令调所为改革准备一些资金。调所向藩外的商人求助，但萨摩藩的困境已为广大商人所知，从事“大名贷”的商人都因为萨摩藩拖欠还款而不愿继续借款，甚至连门都不让调所进。
当时有个对萨摩藩比较友好的商人叫出云屋孙兵卫——出云屋是他拥有的店铺名称，商人没有苗字，所以称呼大商人都是店铺名加名前。