TL;DR
URL のオーソリティに含まれる要素で、ネットワーク上の機器を表す 完全修飾ドメイン名（FQDN）または IP アドレス のことである。英語では Host と呼ぶ。
仕組み
RFC 1738 では、ホストを次のように定義している。
The fully qualified domain name of a network host, or its IP address as a set of four decimal digit groups separated by ”.”.
つまり、ホストには www.example.com のような FQDN か、. で区切った 4 つの 10 進数の組で表す IP アドレスを書く。
URI の一般的な構文を定めた RFC 3986 では、オーソリティを [ userinfo "@" ] host [ ":" port ] と定義している。ホストには、角かっこで囲んだ IP リテラル（IPv6 アドレスなど）、ドット区切りの 10 進数で書いた IPv4 アドレス、DNS 名などの登録名のいずれかを書く。ホストは大文字と小文字を区別しないが、登録名は小文字で書くことが推奨されている。