$5$ công nhân làm được số sản phẩm trong $1$ giờ là:

$120:6=20$ (sản phẩm)

Số sản phẩm mỗi công nhân làm được là:

$20:5=4$ (sản phẩm)

Số sản phẩm $4$ công nhân như thế làm được là:

$4\times 4=16$ (sản phẩm)

Số giờ $4$ công nhân được $96$ sản phẩm là:

$96:16=6$ (giờ)

Đáp số: $6$ giờ