Тема: Потрiбен парсер Facebook

Вітаю, потрібен парсер фб. Мета: Спарсити увесь Фейсбук

Реалізація:

Фейсбук має жорсткі ліміти на майже весь парсинг, крім парсинга за типом ім'я + місто.

Цим і скористаємося.

Вказуємо список містом і список імен. Парсимо все, що нам видають.

Алгоритм буде приблизно таким:

Є міста Нью-Йорк, Філадельфія
імена: Мінді, Джон, Аліса

Парсер обробляє так:

Мінді + Нью-йорк, Джон + Нью-йорк, Аліса + Нью-йорк
Мінді + Філадельфія, Джон + Філадельфія, Аліса + Філадельфія

Знадобиться десь 1 до потоків. Ймовірно, використовувати амазон (як я розумію, вони для цих цілей мають сервера)
Проксі ipv6.

Ймовірно, через браузер або імітацію його. Хоча можна і через хттп запити спробувати.

Акаунти, в будь-якому випадку, будуть летіти в бан, так що потрібен реєстратор, який буде підтягувати акаунти на час парсинга.


Далі все це збирається в базу. В якій ми можемо:

1) Використовувати мінус-слова по потрібним нам категоріям. (Наприклад, ім'я та слово "Лера". Всі люди з ім'ям Лера, втечуть)

2) Плюс слова по потрібним нам категоріям. Наприклад, ім'я та слово "Лера". Всі люди з ім'ям Лера, залишаться.

Етап фільтрації багатоступінчастий. Тобто операції плюс і мінус слів можуть використовуватися кілька разів. Як у звичайній бд.

А також знадобиться рейтинг по найпопулярнішим збігів. Наведу приклад. У нас є категорія Ім'я. Софт вважає, скільки імен збігається і вибудовує рейтинг від найбільшої кількості до найменшому.

Якщо у нас в Списку:

Сергій Філатов
Сергій Єсєнін
Олександр Пушкін

Софт вибудує все так:

Сергій - 2
Олександр 1

категорії:

1)! Вся! графа Favorites (рейтинг)
2) Освіта
3) Місто
4) ім'я та прізвище
5) Улюблені цитати (рейтінг_)
6) Робота (рейтинг)
7) підлогу

Для зв'язку телеграм - @Jricher

2

Re: Потрiбен парсер Facebook

proskuriakovainna написав:

Мета: Спарсити увесь Фейсбук

http://lurkmore.so/images/4/4d/Sashkorage.jpg

Подякували: /KIT\, sensei, ostap34PHP, bvn, VTrim, 221VOLT, LoganRoss7

3

Re: Потрiбен парсер Facebook

:D  я таке можу, тільки одна проблема

Прихований текст
замовнику грошей на оплату не вистачить...
https://blog.clever-games.win/
Це ще не кінець. Це навіть не початок кінця. Але, можливо, це кінець початку.
Зростання мудрості можна точно вимірювати ступенем зменшення злоби.
///// у творчій відпустці. не турбувати /////

4

Re: Потрiбен парсер Facebook

Сергій Філатов
Сергій Єсєнін
Олександр Пушкін

чую руку кремля

Говоріть українською! Живіть українською! Відчувайте українською!
Подякували: Q-bart, leofun012

5

Re: Потрiбен парсер Facebook

Враження від форума, що тут одні тріпачі, які нічого реалізувати на ділі не можуть!!!

По ділу: в Апі фейсбука обмеження в 1000 результатів, но! присутня можливіть реалізувати на вебморді, за допомогою Graph Search. Можливо і помиляюсь, так як давно не юзав тему, по причинам неактуальності свого досвіду чекана валюти.
За 100% інформацією по темі звернись на форум зеннолаба, там профі чели по даній тематиці і тільки там найдеш виконавців, якщо виконати реально в принципі.

Чисто випадково побачив пост, тема якого мені частково знайома тому і вирішив допомогти.

print('Pytin la la la')