# emerge -avDNt xorg-x11

убеждаемся в наличии флага hal. При отсутствии — включаем. В окончании сборки пакета xorg-server выведется список пакетов для пересборки, их надо пересобрать. Если не заметили или пропустили вот комманда для получения списка пакетов:

# emerge portage-utils; qlist -I -C x11-drivers/