/etc/sysctl.d/ipv6.confを新規作成して

net.ipv6.conf.all.disable = 1
net.ipv6.conf.default.disable_ipv6 = 1
net.ipv6.conf.lo.disable_ipv6 = 1
net.ipv6.conf.eth0.disable_ipv6 = 1

とすればいいらしい。