Хороший знакомый... подобные проги на бешеные деньги продают, а тут за пиво ))))
Не прогадай )

Что парсить - будет зависеть от сайта. Где-то html, где-то json, где-то xml, может у кого-то есть вебсервисы. Лучше, конечно, на дотнете, там инструментарий на порядок мощнее

EoltShocker.ProХороший знакомый... подобные проги на бешеные деньги продают, а тут за пиво ))))
Не прогадай )

Что серьезно? Не думал, что парсинг текста так высоко ценится..Здесь не просто парсинг. Многие сайты работают через аякс, соответственно, придется возиться с разбором возвращаемого с сервера, где-то форматирование будет делаться на клиенте скриптом - опять же либо разбирать отделенные от разметки данные, либо кормить браузеру и ждать, пока сформируется ДОМ. Обход каталога, различные варианты отображения описаний и картинок (превьюшки, увеличенные картинки, всякие сторонние просмотрщики и т.п.) - в общем много возни.

Кроме того - это коммерческая ниша. Анализ цен и наличия конкурентов, тырение каталогов, описаний картинок. Плюс постоянная поддержка всего этого хозяйства, ведь дизайн каталогов меняется довольно часто, что либо заставляет тебя писать парсер с зачатками ИИ, либо он тупо будет вырубаться, когда там дизайнер запятую в другое место перенесет....

Так что пива там немало может оказаться, почему и предупреждаю