Поисковая машина? Опции

[Янычар]

Стоит задача поиска прямых ссылок на драйвера, подскажите как лучше реализовать эту задачу? Я никогда не делал ничего подобного поэтому появилась мысль что нужно реализовать эдакую поисковую машину, хотя наверное есть и другие варианты решения данной задачи. Я так понимаю основной подзадачей будет стоять парсинг html-страницы и поиск нужной ссылки, но как, в какой последовательности что делать не знаю...Например я уже подумал что можно составить небольшую базу данных сайтов производителей оборудования откуда можно скачивать оригинальные драйвера и затем производить парсинг этих страниц. Вообщем, подскажите хоть направление работы.

[andriano]

Я думаю, полностью автоматизировать этот процесс не получится.
Т.е.:
- либо будет изрядная доля ручной работы, причем такой, которую периодически нужно будет повторять,
- либо база получится, мягко говоря, не представительной.
Другими словами, следует примерно оценить приемлемые трудозатраты:
- первоначальные: на создание базы и инструментария работы с ней (в тысячах часов),
- регулярные: на проверку актуальности базы, пополнение ее новыми поступлениями и усовершенствование инструментария (в сотнях или тысячах часов).
После этого можно уже будет обсуждать, по какому пути целесообразнее двигаться, и стоит ли вообще этим заниматься.