こちら是代指“我，我们，我们这方的人”
ゆっくり是“悠闲地，充分地”
しよう是表示意志的方式，“打算，想~~~”
思っていましたが 表示“本来想~~~”“本想~~~”
所以，我认为可以翻译成：
我们本想在日本悠闲地过些日子

根据前后文还可以有更准确的说法。