Прочие базы данных ч.2 -АРХИВ

[sergeiii]

В телеге этот файл где-то на 66 кк.

А можно ссылку на оригинал, именно не чищенный файл "как есть"?

я его и выложил

[Burg0mister]

МТС банк
строк 21кк
поля: имя, телефон, почта, даты рождения, ИНН и частичные данные банковских карт(данные не полные поэтому тут)
номера телефонов НОРМАЛЬНЫЕ( без замены 6 на 3)
пасс - рекомендованный
[External Link Removed for Guests]

В телеге этот файл где-то на 66 кк. Вы его вычищали от дублей путем исключения телефонов контактов клиента банка?
Или Как-то по другому? Просто понимаю, когда у меня получается 33 кк., много дублей строк с незначительным отличием.
Как пример:
FullName BDay Phone Contact INN

Ф И А 1961-01-21 79284192847 78614973337 "234400567646"
Ф И А 1961-01-21 79284192847 79284192847 "234400567646"
С И Н 1990-06-02 79885823070 78639220985 "614308870173"
С И Н 1990-06-02 79885823070 79885823070 "614308870173"
С И Н 1990-06-02 79885823070 79996910388 "614308870173"

я удалял по тел-фио-д.р-инн, осталось 19.800.845
p.s обратите внимание, что там есть строки где надо заменить английские буквы на русские( например фамилия Сорокина начинается с латинской С , и т.д), также если сделаете сортировку по фио от А до Я- внизу много фио которые начинаются словом "не использовать"

Слил все записи на одного юзера в одну строку, отдельным столбцом выделил привязанные телефоны, отдельно почта, отдельно основной телефон, отдельный столбец со всеми картами, но БЕЗ ХЭШЕЙ. После этого удалил столбец с ИД и просеял на дубли, осталось 20.973.8M записей. Если бы оставил хэши кредиток, тогда вес был бы больше ощутимо. Если вычистить из столбца с дополнительными телефонами тот телефон, который указан основным {а он как правило там похоже везде дублируется в дополнительных}, тогда еще можно сократить вес файла.

За подсказку с "не использовать" спасибо большое, вот этого похоже не заметил. Подмена кириллических символов тоже засада.
Еще там около 20-30 строк без парных ИД и не сходились при слиянии с ФИО, и несколько сотен строк вообще без ИД или с нулевым ИД, или с ФИО без телефонов, почты и прочего, их пришлось отбросить, на на фоне общего количества строк это мизер.

Почему-то многие проигнорировали столбец с датой смерти клиентов, таких строк мало, но они полезны. СНИЛС тоже есть, но их тоже мизерное количество.

[sergeiii]

В телеге этот файл где-то на 66 кк. Вы его вычищали от дублей путем исключения телефонов контактов клиента банка?
Или Как-то по другому? Просто понимаю, когда у меня получается 33 кк., много дублей строк с незначительным отличием.
Как пример:
FullName BDay Phone Contact INN

Ф И А 1961-01-21 79284192847 78614973337 "234400567646"
Ф И А 1961-01-21 79284192847 79284192847 "234400567646"
С И Н 1990-06-02 79885823070 78639220985 "614308870173"
С И Н 1990-06-02 79885823070 79885823070 "614308870173"
С И Н 1990-06-02 79885823070 79996910388 "614308870173"

я удалял по тел-фио-д.р-инн, осталось 19.800.845
p.s обратите внимание, что там есть строки где надо заменить английские буквы на русские( например фамилия Сорокина начинается с латинской С , и т.д), также если сделаете сортировку по фио от А до Я- внизу много фио которые начинаются словом "не использовать"

Слил все записи на одного юзера в одну строку, отдельным столбцом выделил привязанные телефоны, отдельно почта, отдельно основной телефон, отдельный столбец со всеми картами, но БЕЗ ХЭШЕЙ. После этого удалил столбец с ИД и просеял на дубли, осталось 20.973.8M записей. Если бы оставил хэши кредиток, тогда вес был бы больше ощутимо. Если вычистить из столбца с дополнительными телефонами тот телефон, который указан основным {а он как правило там похоже везде дублируется в дополнительных}, тогда еще можно сократить вес файла.

За подсказку с "не использовать" спасибо большое, вот этого похоже не заметил. Подмена кириллических символов тоже засада.
Еще там около 20-30 строк без парных ИД и не сходились при слиянии с ФИО, и несколько сотен строк вообще без ИД или с нулевым ИД, или с ФИО без телефонов, почты и прочего, их пришлось отбросить, на на фоне общего количества строк это мизер.

Почему-то многие проигнорировали столбец с датой смерти клиентов, таких строк мало, но они полезны. СНИЛС тоже есть, но их тоже мизерное количество.

выложи свою версию,я видимо некоторые моменты упустил у себя

[Burg0mister]

выложи свою версию,я видимо некоторые моменты упустил у себя

Через несколько минут в личку скину ссылки, пока не хочу в паблик кидать.
Провел работу над ошибками, убрал указанную тобой приписку "не использовать", она была в разных вариантах. Основные номера телефонов, которые дублировались в дополнительных - убрал из колонки с дополнительными, исправил наверное большую часть смеси латиницы с кириллицей, попутно исправил ошибки типа fлександр, правда наверняка отловил не все. Немного подправил e-mail, там тоже были символы с подменой.
В архиве будут версии с картами и хэшем, с картами без хэшей у этих версий 21.046 миллиона строк.
отдельно архив в котором карты отдельно от таблицы {это может быть полезно при расхэшировании}, и уже почищенная версия базы без ИД, с картами без хэшей, она будет на 20.973.500 строк.

Если кому из местных, с кем давно общаемся, нужно - пишите, поделюсь ссылкой.
{жаль нет закрытого раздела}

[tonuser]

Всем добрый вечер!

Где-то завалялись на компе дампы qzaem.ru
Часто видел, что просили csv-версию.

Перевел их из SQL в текстовые файлы.

ОТ СЕБЯ:
Скрытый текст

8кк записей разбил по 500к в файл, чтоб не грузить сильно систему при подгрузке файла куда-либо

ТЕХНИЧЕСКИЕ ДАННЫЕ:
Кодировка: кириллица UTF-8-SIG
Вес файлов в архиве и распакованного {для 1 и 2 части}: 311МБ/2.11ГБ 288МБ/2.10ГБ

[External Link Removed for Guests]

ПАРОЛЬ на архивы: phreaker.info

Карты не в полном виде указаны, поэтому публикую с ними, иначе чтобы не нарушать правила форума обрезал бы этот столбец.

Приветствую! Приятно видеть что мои идеи по оформлению постов пошли в народ и их не только я теперь использую. qzaem интересная база, тоже ее разбирал, здесь на 76 странице она должна быть, только ссылка уже наверное не действует.
Где-то вот тут [External Link Removed for Guests]

Здравствуйте, хотелось бы на скрипт посмотреть

Поддерживаю, тоже интересно было бы взглянуть. Да и скриптеры в наших рядах нужны.

Никнейм C3I3A0D1A связан с форумом breach. Имеете к нему отношение, или это такое совпадение?

ПАРОЛЬ не подходит, кто может перезалить с нормальным паролем

[ostrow]

В 2021-м на хакерском форуме всплыли на продажу данные клиентов AT&T, американского мобильного провайдера. 71 миллион человек, треть от его клиентов на тот момент. Сегодня выложили в паблик. В сливе ФИО, адреса, телефоны, страховые номера и даты рождения.

Скрытый текст

Для просмотра скрытого текста необходимо быть авторизованным пользователем.

День добрый!

Enter decryption key 
The provided key is invalid. 
Please check that the key is correct or ask the creator of the link again.

Ссылка Меги частично скрыта. Плиз раскройте ее, скопируйте и выложете сюда повторно.

[MICKEYMOUSE]

В 2021-м на хакерском форуме всплыли на продажу данные клиентов AT&T, американского мобильного провайдера. 71 миллион человек, треть от его клиентов на тот момент. Сегодня выложили в паблик. В сливе ФИО, адреса, телефоны, страховые номера и даты рождения.

Скрытый текст

Для просмотра скрытого текста необходимо быть авторизованным пользователем.

День добрый!

Enter decryption key 
The provided key is invalid. 
Please check that the key is correct or ask the creator of the link again.

Ссылка Меги частично скрыта. Плиз раскройте ее, скопируйте и выложете сюда повторно.

По всем ссылкам файлы одинаковые

[ostrow]

В 2021-м на хакерском форуме всплыли на продажу данные клиентов AT&T, американского мобильного провайдера. 71 миллион человек, треть от его клиентов на тот момент. Сегодня выложили в паблик. В сливе ФИО, адреса, телефоны, страховые номера и даты рождения.

Скрытый текст

Для просмотра скрытого текста необходимо быть авторизованным пользователем.

День добрый!

Enter decryption key 
The provided key is invalid. 
Please check that the key is correct or ask the creator of the link again.

Ссылка Меги частично скрыта. Плиз раскройте ее, скопируйте и выложете сюда повторно.

По всем ссылкам файлы одинаковые

Да это понятно! Только с Меги такой вес файла мне удается скачать минут за двадцать, а с других ресурсов до четырех часов с обрывами!
Та там делов-то по обновлению ссыки - в первоисточнике стать на нее и правой клавишей мыши кликнуть пункт "Копировать ссылку" и бросить сюда!

[MICKEYMOUSE]

День добрый!

Ссылка Меги частично скрыта. Плиз раскройте ее, скопируйте и выложете сюда повторно.

По всем ссылкам файлы одинаковые

Да это понятно! Только с Меги такой вес файла мне удается скачать минут за двадцать, а с других ресурсов до четырех часов с обрывами!
Та там делов-то по обновлению ссыки - в первоисточнике стать на нее и правой клавишей мыши кликнуть пункт "Копировать ссылку" и бросить сюда!

Если качать на смартфонах Samsung S21-S24 серии, скачается быстро (за несколько минут) с любого из указанных файлообменников.

[smartgoon]

На этот раз протек reg.ru. Тек давно, а сейчас прямо так полилось. Слито все. Часть обработана.

В подтверждение:
[External Link Removed for Guests]

рандомные базы 500 сайтов. датасет, естественно, от сайта к сайту. Никто ничего специально не выбирал, - как попадется, разбирайте сами. За всем остальным - пишите в личку. У нас, точно, найдется все, что есть на рег.ру.