Скрапинг сайтов с JavaScript на Python
Языки клиентской стороны — это языки, которые выполняются в браузере, а не на веб-сервере. Успех языка клиентской стороны зависит от способности вашего браузера правильно интерпретировать и выполнять этот
Школа Виктора Комлева
Парсинг и формы авторизации
Одним из первых вопросов, который возникает, когда вы начинаете двигаться дальше базового уровня скрапинга веб-сайтов, является: «Как получить доступ к информации за экраном входа?» Веб все больше и
Школа Виктора Комлева
Обработка естественного языка
До сих пор данные, с которыми вы работали, в основном были в виде чисел или подсчитываемых значений. В большинстве случаев вы просто сохраняли данные без проведения какого-либо анализа
Школа Виктора Комлева
Парсинг документов с помощью Python
Заманчиво думать о интернете преимущественно как о сборнике текстовых веб-сайтов, чередующихся с новомодным мультимедийным контентом Web 2.0, который в основном можно игнорировать для целей веб-скрапинга. Однако, интернет прежде
Школа Виктора Комлева
Фреймворк Scrapy
Предыдущие статьи  представили некоторые техники и шаблоны для создания крупных, масштабируемых и (самое главное!) поддерживаемых веб-скрейперов. Хотя это можно сделать вручную достаточно легко, многие библиотеки, фреймворки и даже
Школа Виктора Комлева
Хранение данных для парсинга сайтов
Хотя вывод на терминал может быть веселым занятием, это не особенно полезно, когда речь идет о сборе и анализе данных. Чтобы сделать большинство веб-скрейперов действительно полезными, нужно иметь
Школа Виктора Комлева
Написание Веб-пауков (краулеров)
В этой статье вы начнете изучать реальные задачи, где краулеры (пауки) будут проходить по нескольким страницам и даже нескольким сайтам. Веб-пауки называются так потому, что они «ползут» по
Школа Виктора Комлева
Веб скрапинг (парсинг) данных
Что такое веб-скрапинг? Автоматизированный сбор данных из интернета существует почти столько же времени, сколько и сам интернет. Сегодня общее мнение склоняется в пользу термина «веб-скрапинг», поэтому я буду
Школа Виктора Комлева
Парсинг сайтов с помощью Beautiful Soup
В мире, где информация является ключевым активом, умение эффективно извлекать данные из интернета становится незаменимым навыком. Представьте, что вы можете автоматически собирать актуальные новости, анализировать рыночные тренды или
Школа Виктора Комлева
Фреймворк aiogram-dialog. Высокоуровневый интерфейс телеграм бота.
Основные идеи. : Разделение получения данных и отображения сообщений. Объединение отображения кнопок и обработки нажатий. Улучшенная маршрутизация состояний. Виджеты Основной строительный блок вашего интерфейса в телеграм боте с
Школа Виктора Комлева