我们可以根据题目中的信息，列出一个方程，来求解这个问题。

设一开始两桶油的数量都为x，则倒出6升油后，第一桶中剩余的油量为x-6，第二桶中油的数量变为x+6。已知第二桶中的油正好是第一桶中的4倍，因此可以列出方程：

4(x-6) = x + 6

解这个方程可以得到：

x = 18

所以，一开始两桶油的数量都为18升。