↓
 ↑
Регистрация
Имя/email

Пароль

 
Войти при помощи
ReFeRy
19 ноября 2017
Aa Aa
#будни_админа #внутренности_фанфикса

Сделал парсинг id фандомов с фикбука в ФвФ, теперь оно пишется в БД. Пока не уверен, что удастся заполнить отношения для загруженных ранее фанфиков, ибо про фандомы там хранится только строчка из шапки, без ссылок - парсить по названиям не самый надежный способ.

Нафиг это надо? Пока не знаю, возможно, все-таки сделаю что-то ещё в ФвФ, в связи с этими данными.
19 ноября 2017
3 комментария
Ластро
Да, уже загруженных-то много? Около ста тысяч? Если перепарсить их все разом с фикбука сервер ляжет?

А если руками нажать "обновить", то оно распарсится по новой? Может временно один иф вставить в пхп? Там где идёт формирование странички фика. Если не проставлены иды фандомов, то проверить обновление текста. Всё равно эти мды дергаются из БД? Я же правильно понял.

Потихоньку большую часть переберёт, причём что характерно, начнёт с самых востребованных.
Ал Ластор
При обновлении фандомы тоже обновляются, это логичное штатное поведение. Но обновляется лишь незначительная часть ранее добавленных произведений.
Ластро
ReFeRy, тогда я предлагаю автоматически обновлять "устаревшие" странички, когда их запрашивают пользователи. Всё не обновится, но самое востребованное точно будет перепарсено :) Ещё можно составить рейтинги и парсить в первую очередь то, что сверху рейтинга. Тем более, что функционал очереди на парсинг уже имеется.
ПОИСК
ФАНФИКОВ











Закрыть
Закрыть
Закрыть