Где поесть? Куда сходить? Ищем ответ на вопрос с помощью пары рекомендаций и скрипта Python

from instagrapi import Client
import time
import pandas as pd

cl = Client()
cl.login(«username», «password»)

pk_place_ids = [541835746291313, 2103750586526340, 100059475]
 
print(‘Getting users started’)
 
# получаем пользователей, которые отметили заведение на фото
users = []
for i in pk_place_ids:
    # получаем 150 последних постов с выбранной геометкой
    medias = cl.location_medias_recent(i, amount=150)
    
    for m in medias:
        user_id = m.dict()[‘user’][‘pk’]
        if not user_id in users:
            users.append(user_id)
    
count_users = len(users)
 
print(f’Getting {count_users} users finished’)
 
print(‘Getting not business users started’)
 
# отбираем тех пользователей, чьи аккаунты не являются комерческими
users_not_business = []
for u in users:
    try:        
        u_info = cl.user_info(u).dict()
        
        if not u_info[‘is_business’]:
            users_not_business.append(u)
    except:
        next
 
count_nb_users = len(users_not_business)
 
print(f’Getting {count_nb_users} not business users finished’)
 
print(‘Getting location started’)

# получаем места, которые посетил пользователь
locations = {}
 
end_cursor = None
for u in users_not_business:
    # скрипт работает довольно медленно, поэтому анализируем только 100 последних постов пользователя
    # посты получаем порциями 20 раз по 5 с сохранением курсора
    for page in range(20):
        u_medias, end_cursor = cl.user_medias_paginated(u, 5, end_cursor=end_cursor)
        for m in u_medias:
            # обернул в обработку исключений, т.к. иногда парсер падает
            try:
                # задержка для снижения чатсоты запросов в инстаграм
                time.sleep(1)
                # по идентификатору поста получаем данные поста (важно, что есть имя места, но нет его координат)
                info = cl.media_info(m.dict()[‘pk’]).dict()
                if ‘location’ in info:               
                    loc_key = info[‘location’][‘pk’]
                    
                    # вывод имени отмеченного места (для лога)
                    #print(info[‘location’][‘name’])
                    
                    # если место встретилось первый раз, то узнаем его координаты
                    if loc_key not in locations:
                        
                        # для того, чтобы узнать координаты, берем последний пост с такой геометкой
                        loc_data = cl.location_medias_recent(loc_key, amount=1)[0].dict()
                        
                        lng=»
                        lat=»
                        
                        if ‘location’ in loc_data:
                            lng=loc_data[‘location’][‘lng’]
                            lat=loc_data[‘location’][‘lat’]
                        
                        locations[info[‘location’][‘pk’]] = [info[‘location’][‘name’],1,lng,lat] 
                    else:
                        locations[info[‘location’][‘pk’]][1] = locations[info[‘location’][‘pk’]][1] + 1
                    
                    # сохраняем результат в csv файл
                    ids = [i for i in locations]
                    names = [locations[i][0] for i in locations]
                    vizits = [locations[i][1] for i in locations]
                    lngs = [locations[i][2] for i in locations]
                    lats = [locations[i][3] for i in locations]
 
                    df = pd.DataFrame(
                        {‘id’: ids,
                        ‘name’: names,
                        ‘vizit’: vizits,     
                        ‘lng’: lngs,
                        ‘lat’: lats     
                        })
 
                    df.sort_values(‘vizit’, ascending=False).to_csv(‘places.csv’, index=False)                  
                    
            except:
                next
                
count_locations = len(locations)
 
print(f’Getting {count_locations} location finished’)

# получим категории из справочника организаций сервиса Яндекс.Карты
import requests
 
# ключ API можно найти в кабинете разработчика
api_key = «—»
 
addrs = []
urls = []
cat1s = []
cat2s = []
cat3s = []
 
df = pd.read_csv(«places.csv»)
 
for i, row in df.iterrows():
    
    time.sleep(1)
    
    lng = row[‘lng’]
    lat = row[‘lat’]
    name = row[‘name’]
    print(name)
        
    req = f»https://search-maps.yandex.ru/v1/?text={name}&results=1&type=biz&lang=ru_RU&ll={lng},{lat}&spn=0.01,0.01&apikey={api_key}»
 
    response = requests.get(req)
 
    addr = »
    url = »
    cat1 = »
    cat2 = »
    cat3 = »
 
    if response.status_code == 200:
        # обернули в обработку исключений, т.к. иногда падает
        try:
            company_data = response.json()[‘features’][0][‘properties’][‘CompanyMetaData’]
                        
            addr = company_data[‘address’]
            url = company_data[‘url’]
            
            count_categories = len(company_data[‘Categories’])
            
            # у организации может быть до 3 категорий, сохраняем их все
            if count_categories > 0:
                if count_categories == 1:
                    cat1 = company_data[‘Categories’][0][‘name’]
                elif count_categories == 2:
                    cat1 = company_data[‘Categories’][0][‘name’]
                    cat2 = company_data[‘Categories’][1][‘name’]
                elif count_categories == 3:
                    cat1 = company_data[‘Categories’][0][‘name’]
                    cat2 = company_data[‘Categories’][1][‘name’]
                    cat3 = company_data[‘Categories’][2][‘name’]             
            
        except:
            pass
        
    addrs.append(addr)
    urls.append(url)
    cat1s.append(cat1)
    cat2s.append(cat2)
    cat3s.append(cat3)
    
df[‘address’] = addrs
df[‘url’] = urls
df[‘cat1’] = cat1s
df[‘cat2’] = cat2s
df[‘cat3’] = cat3s
df.to_csv(‘places_24.csv’, index=False)