Прочие базы данных

[striker_max01]

 Скрытый текст. Для просмотра нужно быть [Local Link Removed for Guests] и иметь благодарностей: 5

[Burg0mister]

Скрытый текст

Доброе утро!
Файла нет

Поправка, в конце ссылки нужно убрать - и все скачается.

1) Скопируйте ссылку и после вставки уберите черту.
2) Перейдите по отредактированной ссылке.
3) Файл присутствует.

Приветствую, да я там в своем сообщении ниже дополнил тоже про лишний символ.

Привет, лишний знак поставил случайно. My bad.

Привет! Да я сначала написал а потом уже понял в чем дело, но сообщение уже удалить не мог

[Burg0mister]

Не ругайтесь за два сообщения подряд. Так будет проще формучанам не пропустить подарок.

Всем доброе утро!
Недавно на просторах телеграм появился парсинг Вконтакте, который включает в себя данные и о закрытых профилях {не удаленных а закрытых}. Автор утверждает, что у него 52 архива с 400 миллионами строк в формате JSON и парсинг продолжается. По его словам у него есть возможность также собрать данные о том кто у кого в черном списке, в списке подписчиков и т.д. но эти данные он даже в примере не показал.
Для примера он выложил три архива и на этом остановился. Я собрал эти архивы в один файл, извлек из него только интересное мне и обработал под собственные нужды, но результатом делюсь и с вами.

Из более чем 11 миллионов строк данных после обработки дублей и удаления запоротых строчек остается 3.492.202 строчки с учетом шапки. При этом и среди них есть дубли, но они остались из-за того что парсер прошел снова по тем же страницам но их владельцы изменили аватар, скрыли дату рождения или поменячли что-то еще.

Что сделано:
-Нормализованы даты рождения
-Приведены в нормальный текстовый вид и оптимизированы данные из неудобного JSON
-Отсеяны дубли которые образовались из-за разной даты последнего входа в профиль {парсер несколько раз собрал абсолютно одинаковые аккаунты, строки отличались только датой последнего онлайна}
-Нормализованы ссылки на фото, различные сайты и т.п.
-По возможности нормализованы телефоны в соответствующих столбцах и в столбцах типа "о себе".

Разделитель - вертикальная черта |

ВНИМАНИЕ!
-Файл в кодировке UTF-8 из-за используемых специальных символов в никнеймах, статусах и в поле "о себе". При переводе в Кронос и кодировку Win-1251 {кириллица} эти символы могут быть потеряны.
-Содержимое нескольких столбцов таблицы экранировано кавычками, это сделано для того чтобы сохранить символы вертикальной черты внутри ячеек таблицы. Например вертикальную черту использовали в никнеймах, статусах, в полях о себе некоторые пользователи. Если убрать кавчки структура таблицы пострадает и поля сместятся. Поэтому если вам нужно убрать кавычки, тогда перед их удалением либо удалите внутри этих столбцов вертикальную черту, либо замените ее на чтото например I.

СЭМПЛ:

Спойлер

Скрытый текст

Для просмотра скрытого текста необходимо быть авторизованным пользователем.

ССЫЛКА:

Скрытый текст

Для просмотра скрытого текста необходимо быть авторизованным пользователем.

ПАРОЛЬ:
phreaker.in

ОРИГИНАЛЬНЫЙ ТЕКСТ - ОПИСАНИЕ ОТ АВТОРА ПАРСИНГА:

Спойлер

Скрытый текст

Для просмотра скрытого текста необходимо быть авторизованным пользователем.

[ratushka]

База ОСАГО Москва сентябрь 2023 г.

Состав: полис, марка, модель, vin, фио, телефон и др.

Формат: excel.
Под конверт в кронос.
10691 строк.
Пароль личный

[External Link Removed for Guests]

[Safrox]

База украинского ЗАГСа на каких-то 300 тысяч записей
Формат .txt
Скрытый текст
Пароль сайт.

По просьбам трудящихся обновил ссылку. Пароль тот же.

 Скрытый текст. Для просмотра нужно быть [Local Link Removed for Guests] и иметь благодарностей: 1

[AppleGus]

ИТ-инфраструктура медицинского центра «ЦАМ» (aviamed.ru),
"ФИО
дата рождения
телефон
адрес эл. почты
адрес регистрации
СНИЛС
паспортные данные
место работы и должность"

1 122 750 строк

Download Url: [External Link Removed for Guests]

[Swapper]

ИТ-инфраструктура медицинского центра «ЦАМ» (aviamed.ru),
1 122 750 строк
Download Url: [External Link Removed for Guests]

под паролем, сайт не подходит (

[striker_max01]

ИТ-инфраструктура медицинского центра «ЦАМ» (aviamed.ru),
1 122 750 строк
Download Url: [External Link Removed for Guests]

под паролем, сайт не подходит (

A%it1vGa?5wb|ma9tA

[tor4]

[External Link Removed for Guests]
Первоисточник слива, там найдете пароли и все доп. сливы.

[sergeiii]

[External Link Removed for Guests]
Первоисточник слива, там найдете пароли и все доп. сливы.

там к архиву "PD" указан пароль -MY~GH901%A|t ,у меня он не подходит,может у кого нибудь получилось открыть архив