Estos mismos robots utilizan técnicas muy sofisticadas, de reconocimiento de textos, densidad de palabras, etc, que obligan a un diseño correcto de la web, tanto a nivel gráfico, de programación, gramatical, como de contenidos.