Формула ранжирования, откуда она берется и как настраивается

Само по себе знание того, что страница имеет определенные характеристики недостаточно для того чтобы поставить одну страницу в выдаче выше другой.
Поисковая система должна знать что такое хорошо и что такое плохо.
Для этого ей надо, как ребенку, на конкретных примерах показать это. Этот процесс называется машинное обучение.
Обучением поисковой системы занимаются специальные люди - асессоры.
Их работа заключается в том, чтобы оценивать страницы в выдаче по определенному запросу, итоговая оценка страницы - это конечный вердикт насколько страница хорошо отвечает на запрос. В итоге оценка страницы выглядит примерно так:
не в тему/очень плохая/плохая/может быть/неплохая/хорошая/очень хорошая

Поисковая система группирует страницы по типу оценки, и смотрит что же объединяет страницы с хорошими и плохими оценками.
Вещи, характерные для хороших страниц, становятся важными переменными в формуле.
Вещи, характерные для плохих страниц, становятся либо не важными, либо вносят отрицательный вклад в итоговую оценку.