Доработка парсера ВК

19.05.2024 17:32

«Фрилансим»

Необходимо оптимизировать скрипт по читаемости и времени выполнения (чтобы каждый метод был не перегружен вложенными циклами и т.д.), разделить код на несколько модулей по функциональности. При этом код должен быть масштабируемым, то есть при необходимости можно было добавить еще одну группу для парсинга без написания дополнительных функций.
Обеспечить сохранение данных (включая результаты классификации) по мере обработки постов, а не в самом конце
Также найти ошибки, из-за которых в файл выгружаются не все комментарии и посты
Строки с пустым значением, со значением 'speech' или 'skip' в поле 'comment_tonality', а также строки с 'Иная категория' в поле 'post_topic' должны удаляться из датафрейма

Новости от наших партнёров в Вашем городе

Ria.city

123ru.net

Житель Чехова неделю жил с обезглавленным телом дедушки в квартире

У фонтана Дружбы народов на ВДНХ обрушилась сцена. Есть пострадавшие

Московские школьники завоевали медали на Азиатской физической олимпиаде

Вы удивитесь, но у Галицкого был еще один футбольный клуб. Его сгубили обнаглевшие чиновники

Музыкальные новости

Bigpot.news

Нижегородская область подала 18 заявок на конкурс малых городов

В Ярославле ждут Надежду Бабкину на бесплатные концерты

В день 225-летия А.С. Пушкина преподаватели ФСТ провели конференцию по вопросам сохранения культурного наследия России

Сыграть свою лучшую игру. Денис Мацуев рассказал, где искать гениев

Новости России

29ru.net

Сколько Дальний Восток не развивай, а часть его регионов со дна экономического рейтинга не вытянуть

В доме 1984 года у Ромашкового леса начался капремонт по современной технологии

Стало известно об еще одном случае отравления ребенка на сборах в Подмосковье

Промышленники в Москве получат поддержку благодаря соглашениям города с банками

Экология в России и мире

Life24.pro

Таджикистан

Парадоксы двойного стандарта

Proenza Schouler, коллекция pre-fall 2024

Уход за кожей летом: мнение эксперта

Спорт в России и мире

News.tennis

Итальянский теннисист Синнер стал лучшей ракеткой мира в рейтинге ATP

Андреевой предрекли борьбу за топ-10 рейтинга WTA в текущем сезоне

Касаткина опустилась в рейтинге WTA, Андреева впервые вошла в топ-25

«Мирра Андреева обладает удивительной выживаемостью» // Олимпийская чемпионка по теннису Елена Веснина об итогах женского Roland Garros

Moscow.media

News24.pro

Доработка парсера ВК

Читайте на 123ru.net

Видео-новости

Деньги

Ru24.pro

Здоровье

Частные объявления в Вашем городе, в Вашем регионе и в России