возрожденное сообщество

[Local Link Removed for Guests] писал(а): [Local Link Removed for Guests]26 апр 2025, 06:01

[Local Link Removed for Guests] писал(а): [Local Link Removed for Guests]25 апр 2025, 22:53

[Local Link Removed for Guests] писал(а): [Local Link Removed for Guests]25 апр 2025, 22:22 Скрытый текст

Доброе утро!
Файла нет

Поправка, в конце ссылки нужно убрать - и все скачается.

1) Скопируйте ссылку и после вставки уберите черту.
2) Перейдите по отредактированной ссылке.
3) Файл присутствует.

Приветствую, да я там в своем сообщении ниже дополнил тоже про лишний символ.

[Local Link Removed for Guests] писал(а): [Local Link Removed for Guests]27 апр 2025, 16:15 Привет, лишний знак поставил случайно. My bad.

Привет! Да я сначала написал а потом уже понял в чем дело, но сообщение уже удалить не мог

Не ругайтесь за два сообщения подряд. Так будет проще формучанам не пропустить подарок.

Всем доброе утро!
Недавно на просторах телеграм появился парсинг Вконтакте, который включает в себя данные и о закрытых профилях {не удаленных а закрытых}. Автор утверждает, что у него 52 архива с 400 миллионами строк в формате JSON и парсинг продолжается. По его словам у него есть возможность также собрать данные о том кто у кого в черном списке, в списке подписчиков и т.д. но эти данные он даже в примере не показал.
Для примера он выложил три архива и на этом остановился. Я собрал эти архивы в один файл, извлек из него только интересное мне и обработал под собственные нужды, но результатом делюсь и с вами.

Из более чем 11 миллионов строк данных после обработки дублей и удаления запоротых строчек остается 3.492.202 строчки с учетом шапки. При этом и среди них есть дубли, но они остались из-за того что парсер прошел снова по тем же страницам но их владельцы изменили аватар, скрыли дату рождения или поменячли что-то еще.

Что сделано:
-Нормализованы даты рождения
-Приведены в нормальный текстовый вид и оптимизированы данные из неудобного JSON
-Отсеяны дубли которые образовались из-за разной даты последнего входа в профиль {парсер несколько раз собрал абсолютно одинаковые аккаунты, строки отличались только датой последнего онлайна}
-Нормализованы ссылки на фото, различные сайты и т.п.
-По возможности нормализованы телефоны в соответствующих столбцах и в столбцах типа "о себе".

Разделитель - вертикальная черта |

ВНИМАНИЕ!
-Файл в кодировке UTF-8 из-за используемых специальных символов в никнеймах, статусах и в поле "о себе". При переводе в Кронос и кодировку Win-1251 {кириллица} эти символы могут быть потеряны.
-Содержимое нескольких столбцов таблицы экранировано кавычками, это сделано для того чтобы сохранить символы вертикальной черты внутри ячеек таблицы. Например вертикальную черту использовали в никнеймах, статусах, в полях о себе некоторые пользователи. Если убрать кавчки структура таблицы пострадает и поля сместятся. Поэтому если вам нужно убрать кавычки, тогда перед их удалением либо удалите внутри этих столбцов вертикальную черту, либо замените ее на чтото например I.

СЭМПЛ:

Спойлер

Скрытый текст

Для просмотра скрытого текста необходимо быть авторизованным пользователем.

ССЫЛКА: ПАРОЛЬ:
phreaker.in

ОРИГИНАЛЬНЫЙ ТЕКСТ - ОПИСАНИЕ ОТ АВТОРА ПАРСИНГА:

Спойлер

Скрытый текст

Для просмотра скрытого текста необходимо быть авторизованным пользователем.

База ОСАГО Москва сентябрь 2023 г.

Состав: полис, марка, модель, vin, фио, телефон и др.

Формат: excel.
Под конверт в кронос.
10691 строк.
Пароль личный

[External Link Removed for Guests]

[Local Link Removed for Guests] писал(а): [Local Link Removed for Guests]28 янв 2025, 20:39 База украинского ЗАГСа на каких-то 300 тысяч записей
Формат .txt
Скрытый текст
Пароль сайт.

По просьбам трудящихся обновил ссылку. Пароль тот же.

ИТ-инфраструктура медицинского центра «ЦАМ» (aviamed.ru),
"ФИО
дата рождения
телефон
адрес эл. почты
адрес регистрации
СНИЛС
паспортные данные
место работы и должность"

1 122 750 строк

Download Url: [External Link Removed for Guests]

[Local Link Removed for Guests] писал(а): [Local Link Removed for Guests]06 май 2025, 18:18 ИТ-инфраструктура медицинского центра «ЦАМ» (aviamed.ru),
1 122 750 строк
Download Url: [External Link Removed for Guests]

под паролем, сайт не подходит (

[Local Link Removed for Guests] писал(а): [Local Link Removed for Guests]06 май 2025, 18:33

[Local Link Removed for Guests] писал(а): [Local Link Removed for Guests]06 май 2025, 18:18 ИТ-инфраструктура медицинского центра «ЦАМ» (aviamed.ru),
1 122 750 строк
Download Url: [External Link Removed for Guests]

под паролем, сайт не подходит (

A%it1vGa?5wb|ma9tA

[External Link Removed for Guests]
Первоисточник слива, там найдете пароли и все доп. сливы.

[Local Link Removed for Guests] писал(а): [Local Link Removed for Guests]06 май 2025, 19:30 [External Link Removed for Guests]
Первоисточник слива, там найдете пароли и все доп. сливы.

там к архиву "PD" указан пароль -MY~GH901%A|t ,у меня он не подходит,может у кого нибудь получилось открыть архив