Pular para o conteúdo principal

Visão geral

Devin é seu assistente incansável de web scraping. Ele pode criar web scrapers ou até mesmo executar, por conta própria, tarefas repetitivas de pesquisa na web e coleta de informações!

Casos de uso

  1. Web scraping e coleta de dados
  2. Extração automatizada de dados
  3. Conversão de dados coletados para formatos estruturados
  4. Tratamento de conteúdo web estático e dinâmico
  5. Automação de navegador para tarefas repetitivas
  6. Criação de pipelines automatizados de coleta de dados usando a Referência da API

Exemplos de prompts

Extrair emojis
Use este repositório (https://github.com/muan/unicode-emoji-json) para escrever uma função que converta uma string como https://www.gstatic.com/android/keyboard/emojikitchen/20201001/u1f600/u1f600_u2615.png em "grinning_face_warm_beverage", extraindo os 2 emojis (u1f600, u2615) e convertendo-os em emojis reais.
Raspagem de site
## Visão geral
Este playbook pode ser usado para fazer scraping de um site e retornar os resultados para o usuário, junto com os scripts de scraping do lado do cliente e do lado do servidor usados para gerar esses resultados.
Baixar logotipos
Encontre e baixe os logotipos de 50 empresas da lista Fortune 500.

Exemplos de sessões

Processamento de Dados de Emojis

Coleta de emojis Aprenda a analisar e converter dados Unicode de emojis a partir de repositórios do GitHub em formatos legíveis por humanos. Esta sessão mostra como trabalhar com fontes de dados em JSON e manipulação de strings para processamento de emojis. https://app.devin.ai/sessions/4f8a7b129820493b9c0ca140cddede50

Extração de conteúdo do YouTube

Extração de dados de playlist do YouTube Descubra como extrair programaticamente metadados de vídeos a partir de playlists do YouTube. Esta sessão mostra como usar Python para acessar títulos de vídeos, descrições e outras informações da playlist, sempre em conformidade com os Termos de Serviço do YouTube. https://app.devin.ai/sessions/8c6edbbb0bce4b70acd09255e1994c0b

Coleta de Dados de E-commerce

Coleta de Dados do eBay Aprenda técnicas para coletar informações de produtos em grande escala a partir de anúncios do eBay. Esta sessão explora abordagens automatizadas de web scraping para coletar preços, descrições e informações de vendedores, lidando com paginação e limitação de taxa de requisições. https://app.devin.ai/sessions/dc70fe0649cb4041852da384e65d42be