A simple way:
julia> (df1 .+ df2) ./ 2
5×2 DataFrame
Row │ A B
│ Float64 Float64
─────┼──────────────────
1 │ 5.5 3.0
2 │ 6.5 4.0
3 │ 7.5 5.0
4 │ 8.5 6.0
5 │ 9.5 7.0