|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
Ну я вижу 3 пути указал выше... Ну рисовать микросервис для разовой загрузки глупо это как из пушки по воробьям... Как по мне самое простое 3 вариант - через файлы перегнать, но... в банке безопасники запрещают - типа не секурно и вообще нильзя - не объясним по чему, если сам не понимаешь, мы не виноваты что не понимаешь очевидного... можно конечно SSIS попробовать... чота бл попробовал - не видит дефалтово постгрес, создал даже ODBC DSN - тоже сука не видит ))) может какой ему драйвер специальный нужен? В общем пока ябуся с павершелом... загрузил в переменную resultset из запроса... и в таблицу построчно вставляю... Но чота блин 80 тыс строк меж мс-мс внутри сервера простая таблица - 0.1 сек переливается, в докер постгрес с помощью повершела - 3 минуты ))))))) ... |
|||
:
Нравится:
Не нравится:
|
|||
27.03.2023, 17:38 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
миграция с мсскл - ссис у нас уже есть По моему опыту всякие ODBC, особенно некоммерческие, могут имет ограничения на предмет записи данных в удалённый приёмник, а вот с чтением как правило проблем очень мало. Так что если льёшь в посгрес, то и использовать надо средства посгреса. ИМХО. ... |
|||
:
Нравится:
Не нравится:
|
|||
29.03.2023, 15:37 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|
---|---|
#18+
миграция с мсскл - ссис у нас уже есть По моему опыту всякие ODBC, особенно некоммерческие, могут имет ограничения на предмет записи данных в удалённый приёмник, а вот с чтением как правило проблем очень мало. Так что если льёшь в посгрес, то и использовать надо средства посгреса. ИМХО. ... |
|
:
|
|
29.03.2023, 15:40 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
1. несогласованный софт - типа пентахо или платная информатика - согласование через 7 кругов ада может длится полгода выступить на куче встреч и куче разных уровней начальникам доказать необходимость использования этого, далее проверка безов что это безопасно и банк не рискует )))) 2. уже безы запретили выгружать файлы и загружать - типа с мсскл в цсв выгрузить и в постгрес загрузить, всей истории не знаю да и насрать честно говоря, но что бы такое протолкнуть куча нервов своих, твоих руководителей и т.п. безопасники упёртые что пиздец. 3. дблинк или же линкед сервер по той же самой причине запретили. ... |
|||
:
Нравится:
Не нравится:
|
|||
29.03.2023, 15:42 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
эксперты сказали что это не безопасно и всё - пиздарики Пусть набирают штат сотрудников для переноса и те будут тыкать клавиши. ... |
|||
:
Нравится:
Не нравится:
|
|||
29.03.2023, 15:43 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
ну можно всякие екстеншены поискать для постгри ... |
|||
:
Нравится:
Не нравится:
|
|||
29.03.2023, 15:46 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
ну можно всякие екстеншены поискать для постгри иначе все скрипты и опен софт запрещены) ... |
|||
:
Нравится:
Не нравится:
|
|||
29.03.2023, 15:49 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|
---|---|
#18+
А если посадить безопасников переносить данные руками из одной базы в другую? Уверен, это будет самый безопасный вариант. И чем больше привлеч безопасников, тем выше производительность такого решения. ... |
|
:
|
|
29.03.2023, 17:25 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|
---|---|
#18+
А если посадить безопасников переносить данные руками из одной базы в другую? Уверен, это будет самый безопасный вариант. И чем больше привлеч безопасников, тем выше производительность такого решения. ... |
|
:
|
|
29.03.2023, 18:07 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
#337827
Ссылка:
Ссылка на сообщение:
Ссылка с названием темы:
Ссылка на профиль пользователя:
Ссылка на вложение:
|
||||||||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
#18+
... |
||||||||||||||||
:
Нравится:
Не нравится:
|
||||||||||||||||
29.03.2023, 18:22 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
нет ли втут ДСП? ... |
|||
:
Нравится:
Не нравится:
|
|||
29.03.2023, 18:25 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
Штааа? ... |
|||
:
Нравится:
Не нравится:
|
|||
29.03.2023, 18:37 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
древесно-стружечная плита ... |
|||
:
Нравится:
Не нравится:
|
|||
29.03.2023, 18:44 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
красивое! ... |
|||
:
Нравится:
Не нравится:
|
|||
29.03.2023, 18:46 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
NDA ... |
|||
деревья умирают стоя
:
Нравится:
Не нравится:
|
|||
29.03.2023, 18:46 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
... |
|||
:
Нравится:
Не нравится:
|
|||
29.03.2023, 18:48 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
и чем это отличается от прямого линка? - ничем)) ... |
|||
:
Нравится:
Не нравится:
|
|||
29.03.2023, 20:58 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
прямой линк СБ забороняє ... |
|||
:
Нравится:
Не нравится:
|
|||
29.03.2023, 21:04 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
и чем это отличается от прямого линка? - ничем)) у всяких подобных ЕТЛ программ есть неоспоримые преимущества. 1. визуальность мышкатыкание - для многих это минус, меня раздражало сильно писать не код а хуярить всё мышкой, но аналитикам такая визуальность по душе сильно. 2. очень легко параллелить процессы - прямоугольник куда не заходит стрелка независим от других подобных. Стрелка обозначает - порядок выполнения. Часто когда нужно загрузить несколько таблиц - их в таком пакете стартуешь не по порядку а одновременно. Ну на мой взгляд здесь проще, нежели в джаве городит потомки тредов и всяко извращаться. 3. быстрота переливки больших объемов - bulk insert поддержка - пакетная переливка. Вообще SSIS, Pentahoo, Informatika примерно одна хуйня и назначение - переливка данных из источников в приемники... ну как бы специализированное средство... Не факт что безопасники такое пропустят, если не пропустят ну перепишу скриптом... ... |
|||
:
Нравится:
Не нравится:
|
|||
29.03.2023, 21:05 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
и чем это отличается от прямого линка? - ничем)) у всяких подобных ЕТЛ программ есть неоспоримые преимущества. 1. визуальность мышкатыкание - для многих это минус, меня раздражало сильно писать не код а хуярить всё мышкой, но аналитикам такая визуальность по душе сильно. 2. очень легко параллелить процессы - прямоугольник куда не заходит стрелка независим от других подобных. Стрелка обозначает - порядок выполнения. Часто когда нужно загрузить несколько таблиц - их в таком пакете стартуешь не по порядку а одновременно. Ну на мой взгляд здесь проще, нежели в джаве городит потомки тредов и всяко извращаться. 3. быстрота переливки больших объемов - bulk insert поддержка - пакетная переливка. Вообще SSIS, Pentahoo, Informatika примерно одна хуйня и назначение - переливка данных из источников в приемники... ну как бы специализированное средство... Не факт что безопасники такое пропустят, если не пропустят ну перепишу скриптом... я ей пользовался, но удобно, когда надо либо быстро что-то набросать, либо создать некую схему порядков выполнения, условий и прочего в постгрессе аналог булк инсерта есть при заливки из файлов, остальное обычный инсерт (сам не проверял, но на курсах так объясняли) если же нужно лить большие таблицы на постоянной основе без каких-то изъебов я бы выбрал прямой линк или файлы csv написанный скрипт в целом будет делать тоже самое ... |
|||
:
Изменено: 29.03.2023, 22:00 - anonymous
Нравится:
Не нравится:
|
|||
29.03.2023, 22:00 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|
---|---|
#18+
anonymous [игнорируется] нуууу это не прямой линк это как приложение тащит с источника и хуячит в приемник, если требуется преобразования делает... у всяких подобных ЕТЛ программ есть неоспоримые преимущества. 1. визуальность мышкатыкание - для многих это минус, меня раздражало сильно писать не код а хуярить всё мышкой, но аналитикам такая визуальность по душе сильно. 2. очень легко параллелить процессы - прямоугольник куда не заходит стрелка независим от других подобных. Стрелка обозначает - порядок выполнения. Часто когда нужно загрузить несколько таблиц - их в таком пакете стартуешь не по порядку а одновременно. Ну на мой взгляд здесь проще, нежели в джаве городит потомки тредов и всяко извращаться. 3. быстрота переливки больших объемов - bulk insert поддержка - пакетная переливка. Вообще SSIS, Pentahoo, Informatika примерно одна хуйня и назначение - переливка данных из источников в приемники... ну как бы специализированное средство... Не факт что безопасники такое пропустят, если не пропустят ну перепишу скриптом... ... |
|
:
|
|
29.03.2023, 22:01 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|||
---|---|---|---|
#18+
тоже любили коней? ... |
|||
:
Нравится:
Не нравится:
|
|||
29.03.2023, 23:52 |
|
Кто чем делает миграцию данных из MSSQL в Postres?
|
|
---|---|
#18+
тоже любили коней? ... |
|
:
|
|
30.03.2023, 00:09 |
|
|
start [/forum/topic.php?fid=19&msg=337913&tid=8476]: |
0ms |
get settings: |
11ms |
get forum list: |
12ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
367ms |
get topic data: |
16ms |
get forum data: |
3ms |
get page messages: |
133ms |
get tp. blocked users: |
1ms |
others: | 23ms |
total: | 574ms |
0 / 0 |