Обращение к писателям парсеров

parsing

Обращение к писателям парсеров

Господа, я вам охотно верю, в том что вы великие талантливые программисты. Но все же — иногда разувайте глаза. И читайте че почем вокруг происходит…

Недавно обнаружил в одном IMPORT ГАВНОКРИВЫЕ РУКИ ПРО. Скрипт проверяющий системное соответствие   типа требованиям.

Автор — реальный сказочный долбоеб. По двум причинам. Во первых он кладет в корень скрипт. Который вываливает php.info  — а это дыра в безопасности. Во вторых требования модуля — ну просто ебанись 200 секунд тайм лимит пхп. Да ебись ты конем, упырь, как можно оставлять такую брешь. Это как раздвинуть булки, смазать очко вазелином и пригласить в гости молодых упругих ддосеров. Здравствуйте. Вам даже напрягаться не надо.

У дяди Сирожы в автоматической обработке прайс-листов другая беда. У него не надо тайм лимита, но надо нажимать ф5.

Про МаксДа вПопенШопа я молчу совсем.

Так вот ваши проблемы решаются через AJAX при умелой готовке порционнной обработки входящих файлов. Специально для вас погуглил — вот почитайте. Проникнитесь.

И еще… Не делайте инсерты по одному файлу — таблицы запираются, постоянно перестраиваются индексы, и магазины на время импорта умирают. Сделайте же наконец кто-нибудь промежуточные дублирующие таблицы, в которые вы собираете данные из прайса, и потом  из которых сводными запросами,  можно будет все вставить одним махом в  боевые. Посмотрите уже наконец то как импорт в prom.ua реализован.

 

Хуйнаныр(11)Очко(0)

Запостить высер

Стучать мне на мыло
avatar

Сортировать:   Свежие | Тухлые | Хуйнанырные
Дядя Сережа
робот-вертер
Дядя Сережа
9 месяцев 24 дней назад

Понравилась идея с промежуточными таблицами)
А по поводу задолбывающего нажатия на Ф5, есть смешное решение http://sinfx.ru/statja/myshkokliker-by-sf/

Шерсть ебучая
робот-вертер
Шерсть ебучая
9 месяцев 24 дней назад

А есть ещё вот такая штука:

Я даже боюсь представить что это такое)))

Александр
робот-вертер
Александр
9 месяцев 24 дней назад

А где посмотреть как импорт в prom.ua реализован? Чо то погуглил не нашел пока.

Шерсть ебучая
робот-вертер
Шерсть ебучая
9 месяцев 23 дней назад

Зарегать аккаунт у них и посмотреть)

markimax
робот-вертер
9 месяцев 20 дней назад

Совершенно верно — только порционная обработка через ajax
Кстати тоже надо делать и с sitemap, генераторов «url» и т.п.

wpDiscuz