Скрыть
А чем сейчас модно грабить сайты?
Хочу тащить данные с одного сайта в свою БД, там JSON и нет проверок реферрера/юзер-агента, так что вроде всё просто. Но времена меняются и они чего доброго там или сайт заредизайнят или защит понавешают от такого огульного злоупотребления. Нужно какую-то платформу наверное сразу закладывать, чтобы умела прикидываться бровсером, чтобы её было легко перенастроить, чтобы она уже была с готовыми либами чтобы данные экстрактировать (желательно из pdf тоже на всякий случай), складывать всё это в базу данных, и желательно чтобы эта платформа была не на каком-нибудь маргинальном языку написана. Есть идеи?
Re:А чем сейчас модно грабить сайты?
wget -m?