15-07-2014 12:44 Alexvn » По поводу форума kamrad.ru
Через неделю, 22 июля, истекает срок нашего договора с хостингом, где размещен сервер kamrad.ru. Перенос форума на новую платформу, где теперь расположен сайт journals.ru, не планируется - это большая работа, на которую у меня просто нет времени и, учитывая активность на форуме - мотивации. Таким образом, с 22 июля форум прекратит свое существование.

Если вы хотите сделать бэкап каких то дискуссий и тем, сейчас самое время этим заняться.

Если у вас есть какие то вопросы или предложения по данной теме, пишите на support@journals.ru.

Такие дела.
Группы: [ организационное ]
Комментарии:
Камрад
Alexvn А можно выгрузить из БД (в том текстовом виде, в каком лежат там записи Поля Битвы - один пост-одна запись) и куда то положить ?
в любом виде , XML, CSV...
Что б я потом это мог структурировать и втянуть куда то...

18-07-2014 00:27
Администратор<br>Буржуин проклятый
goldenandy - пожалуйста, дамп треда в формате XML (без верстки, только данные, 18 МБ в архиве):

http://kamrad.ru/pole.tar.gz

Камрад
спасибо. Завтра попробую скормить это дело оракловой БД пусть там поживет

18-07-2014 09:34
Дон Кихот Камрадский
KooZeeN
напомни, ти из какова [раёна] города?
Новороссийские мы - в смысле не из новой республики Новороссия, а из старого города Новороссийска, что в Краснодарском крае.

Извини, что раньше не ответил - у провайдера авария случилась. Целые сутки украли у меня, гады. Ну, ничего, сейчас докачка продолжается, надеюсь успеть.

One of the lost ones
Skiminok

а из старого города Новороссийска, что в Краснодарском крае.

О как здорово! Теперь буду знать, с кем можно скоротать время в ожидании поезда после отпуска в Геленджике.

18-07-2014 14:56
Администратор<br>Буржуин проклятый
Skiminok - ты главное присматривай, чтоб он у тебя по ссылке из какого нибудь поста не пошел гугл выкачивать, и так далее

19-07-2014 00:51
Опытный ворчун
Skiminok Ты HTTrack-ом качаешь? Меню Mirror -> Modify Options -> таб Limits - впиши в Max Transfer Rate столько, сколько воображение подскажет - тогда эта несчастная полудохлая программулина начинает хоть немного шевелиться. Качать в несколько потоков она, по-моему, не может в результате родовой травмы. У автора. Старый добрый Teleport Pro вертится в гробу, глядя на эту жалкую поделку.

19-07-2014 03:04
Дон Кихот Камрадский
JimmyM
Старый добрый Teleport Pro не хочет брать камрад... Я ж с него и начинал. Моментально заканчивается, ничего не скачав, выдает что-то типа "Ошибка соединения"...

UPD. Телепорт-таки запустил - там косяки с файрволлом были... Поставил качать впараллель с HTTrack (канал 50 Мбит/с, им и вместе его выбрать не получится). Поглядим, что теперь будет.

отредактировано: 19-07-2014 03:35 - Skiminok


19-07-2014 09:50
Дон Кихот Камрадский
Черт, не получается пока...
Оба вылетели с ошибкой - превышено максимальное количество URL (65000)
Пробую дальше - уменьшил число внутренних вложений до 3 (было 4), запретил внешние ссылки. Для скорости качаю только текст.
Смотрим дальше...

19-07-2014 11:27
Опытный ворчун
Skiminok ох-ох... я то думал, что эпоха двухбайтовых переменных прошла...

19-07-2014 11:30
Дон Кихот Камрадский
JimmyM
Ото ж... Сакральное дьявольское число 65535... Дохленькое 666 отдыхает.
Если верить анализатору Телепорта, при уровне вложения 3 ссылок будет чуть больше 58000... Значит в двухбайтовое пространство влезаем.

19-07-2014 11:54
Опытный ворчун
У меня закончилось тем же, HTTrack сказал, что URL-ей больше 100к и у него паника. И при этом открываются только списки, а самих постов нет. Чудесная программа, да.

19-07-2014 14:55
..................

отредактировано: 19-07-2014 15:25 - Агни


19-07-2014 15:22

19-07-2014 18:32
Дон Кихот Камрадский
Ну что...
Литература сдернулась ПОЧТИ полностью - недокачало около 200 файлов из запрошенных. Ошибка - та же... И вырезать из проекта уж нечего...
Но это - похоже, референтные ссылки внутри тредов (переход со страницы N на страницу M) - в принципе не страшно. Главное, что странички ВСЕ в наличии, а ссылки - роскошь.

А вот что делать со Звездными войнами - НЕ ЗНАЮ.
ПБ - 2857 страниц!!! Это какой же телепорт потянет?!
Весь SW - 106 страниц!
Ну и насочиняли вы...
Короче, делаю следующее:
Скачиваю отдельно ПБ с уровнем вложенности 2 без картинок и отдельно SW без ПБ. Что получится - НЕ ЗНАЮ...

Камрад
Skiminok ПБ можешь не качать. Alexvn же его отдал в виде текстов.
Там вполне пристойный XML, его отпарсить и превратить в хтмл, в принципе, не сложно ...
а если вгружать в какой то форум, то, возможно, и особо парсить не надо

19-07-2014 22:57
Дон Кихот Камрадский
goldenandy
Ну хорошо...
Правда, скачалось уже много - около 4 гигов. Точно не нужно, убивать?

One of the lost ones
Skiminok, ПБ можешь не качать - его только ленивый не бэкапит. А вот остальной форум было бы крайне желательно сдернуть.

19-07-2014 23:09
Дон Кихот Камрадский
Несмеяна
Остальной форум - увы, не по зубам...
Слишком много: "Литература" (64 страницы) полностью не скачалась, а у вас - 106, да и вложенные треды там есть по 100, по 200 страниц...
Полностью не сдернется - 100%.
Могу, конечно, поставить на скачку - сколько возьмется столько и возьмется. Вам как - такая практически случайная выборка-огрызок нужна?

One of the lost ones
Skiminok, я имею в виду остальной ЗВ-форум. Если тебе, конечно, не сложно.