powered by simpleCommunicator - 2.0.18     © 2024 Programmizd 02
Map
Форумы / Просто Трёп [закрыт для гостей] / Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
25 сообщений из 189, страница 7 из 8
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #483028
Горбатый ёж
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
cahrim  17.07.2023, 10:49
[игнорируется]
да там и нет срачей (почти, нет)

мне поневоле пришлось там почитать...
там люди - программисты, их сразу видно, зачем они туда пришли и что они хотят
Ну, да, конечно.
Расскажи это кому другому.
Я участвовал в этом бардаке. Слова про то, что на русском форуме тебя сначала обосрут, а только потом может быть дадут ответ на твой вопрос - это слова про тот самый старый добрый сруль.
...
Рейтинг: 1 / 0
Нравится: basename
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #483048
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
cahrim  17.07.2023, 10:49
[игнорируется]
да там и нет срачей (почти, нет)

мне поневоле пришлось там почитать...
там люди - программисты, их сразу видно, зачем они туда пришли и что они хотят

апсирать друг друга им некогда - у них работы валом )
да и интересы - другие, потому что они не алкаши

особенно интересно почитать за 2000-е годы )))
как всё развивалось в то время, какие были познания и уровень у прогеров того времени :)
cat2, иноз, барсук, милиция (02), акуз, - как думаешь из каких нулевых? )) cat2 и акуз - это вообще именно те динозавры )))
...
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #484553
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
cahrim  20.07.2023, 01:22
[игнорируется]
basename [игнорируется] 

докачал все форумы

у меня в хомяке - murcode.zip
забирай и делай с ним что хочешь

внутри архива есть скрипт murcodeinsert.sh - он автоматически импортирует в БД все форумы
для его работы требуется установленная утилита pv http://www.ivarch.com/programs/pv.shtml
и данные для подключения к мускулу:

dbuser=""
dbpassw=""
dbname=""

зип гасит атрибут исполнения у скрипта, поэтому, выставь его, сам (или sh murcodeinsert.sh)

также можно импортировать форумы по одному файлу

при выборе архиватора попробовал сначала XZ, потом 7Z - не для моего процика такие гигазы архивировать
зипанул zip-ом

13 гиг ужались в 1.5

PS. префикс таблиц форума прибит гвоздями (v1_) в скрипте генерации sql-запросов
если у тебя будет другой - пиши, я, переделаю
либо, сам - sed'ом поменяй везде
Прежде всего, спасибо огромное за помощь! я попытаюсь тебя отблагодарить не только словесно :) Не сегодня-завтра, но это будет выполнено.

Сегодня скачаю архив. В реальные условия буду разворачивать уже, наверное, в августе. Сейчас денег расширять место нет. + ещё пашкины пакости, которые до конца не решены.
...
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #484558
Неуловимый Джо
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
[игнорирует гостей]
Сталкер  07.07.2023, 10:57
[игнорируется]
IT-Клоп  07.07.2023, 10:54
[игнорируется]
eNose  07.07.2023, 10:53
[игнорируется]
basename  07.07.2023, 10:51
[игнорируется]
IT-Клоп  07.07.2023, 10:51
[игнорируется]
...
Это не его имущество, а общественный вклад.
высирая пост, ты соглашаешься с правилами.
а правила гласили что высер становится собственностью скульру и без ссылки на скульру перевысирать нельзя.
Это всё аннулировано после трусливого бегства джуджа и закрытия sql.ru.
Джудж никуда не бегал, он был и остался в своей цитадели рептилоидов
А я так и не понял, он испугался что его будут как-то уголовно преследовать в Англии, за то что он держит русскоязычный форум?
...
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #484559
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
cahrim  18.07.2023, 12:47
[игнорируется]
из-за непоняток с хостингом (периодический отказ в доступе) решил на время переехать на свой компик :)
Вот только что подумал, обычно хостер при выскокой нагрузке, обрубает её. Тут хоть и отдельная ВМ и доступ без рута (пароли по умолчанию я поменял )в систему хостер не должен иметь во всяком случае, но на уровне виртуализации ограничивать работу по процессору и например вводу/выводу вполне возможно.

Так что тут большая вероятность, что это уже хостер ресурсы подрезал при большой нагрузке на ВМ, высокая утилизация cpu, диска - режет. ВОзможно, на дедофорум тоже подрезал. Я позже посмотрю в мониторинге детально, что происходило вообще по графикам.
...
Рейтинг: 1 / 0
Нравится: Гарыныч
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #484792
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
cahrim [игнорируется] 

Архив скачал. Распаковывается нормально.

Больше пока ничего не делал.
...
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #485430
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
cahrim  20.07.2023, 17:01
[игнорируется]
ещё я вчера посмотрел - pv для редхата - нет (вроде)
pv есть, в репозитории epel. В штатных репозиториях нет.
...
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #485440
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
cahrim  20.07.2023, 17:37
[игнорируется]
basename [игнорируется] 

я тебе предлагаю потренироваться на "моём" хостинге (если будет время):

в хомяке, в каталоге с чатом - всё уже есть
запускаешь murcodeinsert.sh и смотришь на процесс импорта
одновременно, можешь контролировать здесь https://kroleg.tk/forum/

для упрощения и скорости я там оставил всего три форума
примерно за 10 минут они все должны залететь в БД

если надоело - CTRL + C

при желании, можешь туда залить что хочешь - управление субд, дискуссии и тд
все-равно потом - удалю
Я пока не знаю, где буду.

Пока созрел план такой, дедов дамп брать за основу, так как он самый большой (34 гига сам дамп и примерно 80 БД на диске) и там восстановленный скуль в форуме болталок с рабочими никами. К нему уже прикручивать форумы, скачанные тобой, начиная с маленьких, смотреть, что получается и пытаться сопоставить ники, форумы, цитирование, ссылки на посты. в SQL я умею очень плохо, поэтому да, буду бэш скриптами и sed в основном. Мне нужно самому понять и вникнуть в алгоритм, тогда уже можно будет залить и все форумы, потом выгрузить и залить в рабочую версию.

Удобнее всего и не в ущерб никому это делать либо на компе, либо на ноутбуке. На ноутбуке, наверное, удобнее и приоритетнее, так как больше мобильности, комп с собой не возьмёшь. Но везде диски маленькие. Не знаю, может посмотрю какой дисочек ssd недорогой на терабайт хотя бы в ноут. В общем, это точно до августа как минимум, скорее всего. Кроме того, ещё работа.
...
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #485614
Горбатый ёж
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
basename  21.07.2023, 13:04
[игнорируется]
pv есть, в репозитории epel. В штатных репозиториях нет.
Надо запомнить, что базя консультирует по репам редхатоподобных линуксов.
...
Изменено: 21.07.2023, 15:39 - Горбатый ёж
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #485629
Гарыныч
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
[игнорирует гостей кроме]
Горбатый ёж  21.07.2023, 15:38
[игнорируется]
basename  21.07.2023, 13:04
[игнорируется]
pv есть, в репозитории epel. В штатных репозиториях нет.
Надо запомнить, что базя консультирует по репам редхатоподобных линуксов.
Базя - поклонник Красной Шапочки же
...
дед-пердед
Изменено: 21.07.2023, 15:56 - Гарыныч
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #486232
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Горбатый ёж  21.07.2023, 15:38
[игнорируется]
basename  21.07.2023, 13:04
[игнорируется]
pv есть, в репозитории epel. В штатных репозиториях нет.
Надо запомнить, что базя консультирует по репам редхатоподобных линуксов.
на сервере форума и сопутствующем вспомогательном сервере установлен Rocky Linux release 8.8 (Green Obsidian). Это абсолютно тот же RedHat, только зелёный, ну как раньше CentOS был. epel - уже давно штатный репозиторий, то есть его можно поставить как дополнительный сразу после установки, ничего не надо скачивать, как раньше.
Код
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
epel-release.noarch : Extra Packages for Enterprise Linux repository configuration

[root@dragon ~]# dnf info epel-release
Last metadata expiration check: 5:52:09 ago on Fri 21 Jul 2023 23:04:41 MSK.
Installed Packages
Name         : epel-release
Version      : 8
Release      : 19.el8
Architecture : noarch
Size         : 35 k
Source       : epel-release-8-19.el8.src.rpm
Repository   : @System
From repo    : epel
Summary      : Extra Packages for Enterprise Linux repository configuration
URL          : http://download.fedoraproject.org/pub/epel
License      : GPLv2
Description  : This package contains the Extra Packages for Enterprise Linux (EPEL) repository
             : GPG key as well as configuration for yum.

[root@dragon ~]#
Соответственно, там много софта, которого нет в базовых репозиториях.
...
Рейтинг: 1 / 0
Нравится: Горбатый ёж
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #490927
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
cahrim  21.07.2023, 14:28
[игнорируется]
basename  21.07.2023, 13:16
[игнорируется]
К нему уже прикручивать форумы, скачанные тобой
мне кажца, эт, ваще, чот, анрил ))
работы - на три аддела )))
Пробую заливать форумы на ноутбуке и объединять с дедовой БД. С жутким скрипом и скрежетом. Возможно, понадобится делать несколько раз ((

1. Заметил, в некоторых форумах количество тем не совпадает с теми, что на муркоде. Ну там на штук 10 где-то. Ну да фиг с ними.

2. Я полный лох, что пздц!!! На муркоде же базу выложили, которая там у них. В свободном доступе. По прямой ссылке. SQLLite, правда, и переделывать её под дедофорум всё-равно бы пришлось, но тем не менее это проще, чем скачивать и парсить с сайта.


https://drive.google.com/file/d/1gVUYbJJ0U7_HPfIG-o4CHAuH0R4GjjJy
...
Рейтинг: 1 / 0
Нравится: Гарыныч
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #490930
Гарыныч
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
[игнорирует гостей кроме]
basename  27.07.2023, 20:59
[игнорируется]
cahrim  21.07.2023, 14:28
[игнорируется]
basename  21.07.2023, 13:16
[игнорируется]
К нему уже прикручивать форумы, скачанные тобой
мне кажца, эт, ваще, чот, анрил ))
работы - на три аддела )))
Пробую заливать форумы на ноутбуке и объединять с дедовой БД. С жутким скрипом и скрежетом. Возможно, понадобится делать несколько раз ((

1. Заметил, в некоторых форумах количество тем не совпадает с теми, что на муркоде. Ну там на штук 10 где-то. Ну да фиг с ними.

2. Я полный лох, что пздц!!! На муркоде же базу выложили, которая там у них. В свободном доступе. По прямой ссылке. SQLLite, правда, и переделывать её под дедофорум всё-равно бы пришлось, но тем не менее это проще, чем скачивать и парсить с сайта.


https://drive.google.com/file/d/1gVUYbJJ0U7_HPfIG-o4CHAuH0R4GjjJy
что там? архив скруля? на 11 гб?
...
дед-пердед
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #490931
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
basename  27.07.2023, 20:59
[игнорируется]
cahrim  21.07.2023, 14:28
[игнорируется]
basename  21.07.2023, 13:16
[игнорируется]
К нему уже прикручивать форумы, скачанные тобой
мне кажца, эт, ваще, чот, анрил ))
работы - на три аддела )))
Пробую заливать форумы на ноутбуке и объединять с дедовой БД. С жутким скрипом и скрежетом. Возможно, понадобится делать несколько раз ((

1. Заметил, в некоторых форумах количество тем не совпадает с теми, что на муркоде. Ну там на штук 10 где-то. Ну да фиг с ними.

2. Я полный лох, что пздц!!! На муркоде же базу выложили, которая там у них. В свободном доступе. По прямой ссылке. SQLLite, правда, и переделывать её под дедофорум всё-равно бы пришлось, но тем не менее это проще, чем скачивать и парсить с сайта.


https://drive.google.com/file/d/1gVUYbJJ0U7_HPfIG-o4CHAuH0R4GjjJy
Только сегодня зашёл на их сайте в раздел о проекте и увидел (((
...
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #490932
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Гарыныч  27.07.2023, 21:08
[игнорируется]
basename  27.07.2023, 20:59
[игнорируется]
cahrim  21.07.2023, 14:28
[игнорируется]
basename  21.07.2023, 13:16
[игнорируется]
К нему уже прикручивать форумы, скачанные тобой
мне кажца, эт, ваще, чот, анрил ))
работы - на три аддела )))
Пробую заливать форумы на ноутбуке и объединять с дедовой БД. С жутким скрипом и скрежетом. Возможно, понадобится делать несколько раз ((

1. Заметил, в некоторых форумах количество тем не совпадает с теми, что на муркоде. Ну там на штук 10 где-то. Ну да фиг с ними.

2. Я полный лох, что пздц!!! На муркоде же базу выложили, которая там у них. В свободном доступе. По прямой ссылке. SQLLite, правда, и переделывать её под дедофорум всё-равно бы пришлось, но тем не менее это проще, чем скачивать и парсить с сайта.


https://drive.google.com/file/d/1gVUYbJJ0U7_HPfIG-o4CHAuH0R4GjjJy
что там? архив скруля? на 11 гб?
Там то, что у них на сайте. Не смотрел, не качал.
...
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #490949
Гарыныч
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
[игнорирует гостей кроме]
basename  27.07.2023, 21:09
[игнорируется]
Гарыныч  27.07.2023, 21:08
[игнорируется]
basename  27.07.2023, 20:59
[игнорируется]
cahrim  21.07.2023, 14:28
[игнорируется]
basename  21.07.2023, 13:16
[игнорируется]
...
мне кажца, эт, ваще, чот, анрил ))
работы - на три аддела )))
Пробую заливать форумы на ноутбуке и объединять с дедовой БД. С жутким скрипом и скрежетом. Возможно, понадобится делать несколько раз ((

1. Заметил, в некоторых форумах количество тем не совпадает с теми, что на муркоде. Ну там на штук 10 где-то. Ну да фиг с ними.

2. Я полный лох, что пздц!!! На муркоде же базу выложили, которая там у них. В свободном доступе. По прямой ссылке. SQLLite, правда, и переделывать её под дедофорум всё-равно бы пришлось, но тем не менее это проще, чем скачивать и парсить с сайта.


https://drive.google.com/file/d/1gVUYbJJ0U7_HPfIG-o4CHAuH0R4GjjJy
что там? архив скруля? на 11 гб?
Там то, что у них на сайте. Не смотрел, не качал.
панятна
...
дед-пердед
Изменено: 27.07.2023, 21:44 - Гарыныч
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #490955
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Гарыныч  27.07.2023, 21:43
[игнорируется]
basename  27.07.2023, 21:09
[игнорируется]
Гарыныч  27.07.2023, 21:08
[игнорируется]
basename  27.07.2023, 20:59
[игнорируется]
cahrim  21.07.2023, 14:28
[игнорируется]
...
Пробую заливать форумы на ноутбуке и объединять с дедовой БД. С жутким скрипом и скрежетом. Возможно, понадобится делать несколько раз ((

1. Заметил, в некоторых форумах количество тем не совпадает с теми, что на муркоде. Ну там на штук 10 где-то. Ну да фиг с ними.

2. Я полный лох, что пздц!!! На муркоде же базу выложили, которая там у них. В свободном доступе. По прямой ссылке. SQLLite, правда, и переделывать её под дедофорум всё-равно бы пришлось, но тем не менее это проще, чем скачивать и парсить с сайта.


https://drive.google.com/file/d/1gVUYbJJ0U7_HPfIG-o4CHAuH0R4GjjJy
что там? архив скруля? на 11 гб?
Там то, что у них на сайте. Не смотрел, не качал.
панятна
Кролику было бы явно проще, наверное, чем скачивать и парсить.
...
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #490958
Помощник Менеджера
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Муркод вроде без аттачей базу имеет, да?
...
https://dedoforum.ru/

Ну а что делать то
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #490959
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Помощник Менеджера  27.07.2023, 21:51
[игнорируется]
Муркод вроде без аттачей базу имеет, да?
Судя по размеру - без аттачей
...
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #491087
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
cahrim [игнорируется] 

Что-то немного поковырял, вроде дальнейшие шаги намечены.

Пробовал заливать по одному, делать манипуляции - по хрен, долго, что пздц.

Сейчас Заливаю форумы в БД с дедовым дампом твоим скриптом. На ноутбуке. Потом съеду на десктоп, тяжелые манипуляции там произведу, там много памяти, мощный проц - будет ощутимо быстрее. Места тоже нет, придётся удалить танки :(
0F1018A2-68CF-4C9D-949A-D1C30C06DCC5.jpeg
...
Рейтинг: 1 / 0
Нравится: Гарыныч
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #491934
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
657FA398-769D-49FE-B51A-EBFCE12DB642.jpeg
...
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #491939
Гарыныч
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
[игнорирует гостей кроме]
basename  28.07.2023, 19:49
[игнорируется]
657FA398-769D-49FE-B51A-EBFCE12DB642.jpeg
о, Акцесс скачан :)))
...
дед-пердед
Рейтинг: 0 / 0
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #491952
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Гарыныч  28.07.2023, 20:00
[игнорируется]
basename  28.07.2023, 19:49
[игнорируется]
657FA398-769D-49FE-B51A-EBFCE12DB642.jpeg
о, Акцесс скачан :)))
Не скачан, а вкачан :)
...
Рейтинг: 1 / 0
Нравится: Гарыныч
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #492209
basename
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
cahrim [игнорируется] 

Импортировал, наконец, твой труд.

Сам импорт на ноутбуке занял примерно 34 часа, некоторые форумы я вначале вручную импортировал, хотел потренироваться и добиться сопоставления id форумов со старого скуля в новый. На сопоставление забил. Так как на исходном скуле у жужеля вместо id чпу, искать id лишнее. По фиг. Пересортирую потом как было, ориентируясь на внешний вид.

Видимо не скачались некоторые форумы, например точно не все в разделе Прогоаммирование и не у всех форумов совпадает количество тем. Пока забью, все-равно тут никто не поможет, кроме тебя, а ты обиделся :)

Двигаюсь дальше. Теперь объединение ников.
22DF6E4F-ABEC-476D-B48A-FA938F4AB2DF.jpeg
EB826CFB-54A1-4837-9E3A-2C2225CD8A09.jpeg
...
Рейтинг: 1 / 0
Нравится: Гарыныч
Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
    #492277
Модест
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
basename [игнорируется] 

А надо ли ники старые "совмещать" с новыми?
Все равно это архив.
А заново пусть под новыми пишут.
...
Рейтинг: 0 / 0
25 сообщений из 189, страница 7 из 8
Форумы / Просто Трёп [закрыт для гостей] / Уважаемый Кролег! Важно! Внимание! Просьба! Очень важная и глобальная задача, если тебе интересно!
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (4): Анонимы (4)
Игнорируют тему (2): Redd, erbol
Заблокированы в теме (1): Redd
Читали форум (111): Анонимы (109), sergey11, Разум вселенной
Пользователи онлайн (140): Анонимы (135), sergey11, Разум вселенной, Bing Bot 1 мин., Yandex Bot 1 мин., Green 8 мин.
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]