Ce qui appartient à votre programme
- Domains and host patterns
- Products and versions
- Brands, vendors, and identifiers
- Approved sensitive-term patterns
Surveillance des menaces et de l'exposition
Collectez les avis publics, mises à jour de fournisseurs et captures de pages suspectes pour la recherche en sécurité. Fournissez aux analystes des sources, horodatages et preuves à examiner.
Approuver les actifs, les termes, les classes de sources, les contextes, le trafic et la rétention avant le début de la collecte.
Conservez la page, le timestamp, le contexte de la demande, les indices de correspondance et l'état de collecte avec l'observation.
Votre équipe de sécurité confirme la propriété, la pertinence, la gravité, l'attribution, la contention et la réponse.
Commencez par la charge de travail
Choisissez un cas d’usage pour voir des exemples de données et les informations que vous pouvez collecter.
Collection de découvertes
Rassemblez les résultats de recherche, les pages publiques, les pages d'information sur le domaine, les référentiels, les pages d'applications et les annuaires qui correspondent à la surface de référence fournie par votre équipe.
Rapport de suivi
Qualification du signal
URL, contenu rendu, champs extraits, contexte de demande, état de réponse, objets et temps de capture.
L'AEM peut collecter et conserverIdentifiants, domaines ou indices de produit correspondants, preuves manquantes, exclusions et version de règle approuvée.
Inclus lorsqu'ils sont spécifiésValidation des actifs, malveillance, exposition, gravité, attribution, contention, réparation ou action du fournisseur.
Votre équipe de sécurité décideUne association candidate est une aide à l'examen. Ce n'est pas la preuve qu'un actif est à vous, que le logiciel est en cours d'exécution, qu'une vulnérabilité est exploitable, qu'une destination est malveillante ou qu'un acteur est responsable.
Résumé de l'analyste
source_captureurl · type · context · response · captured_at
observed_objecthostname · title · text · redirects · visible_form
reference_contextasset_id · vendor_id · product · version · supplied_terms
associationmatched_cues · missing_cues · exclusions · rule_version
artifactsscreenshot_ref · rendered_page_ref · response_ref
history_statefirst_seen · last_seen · changes · collection_state
Historique et qualité de la collection
Exigences de collecte
Options de livraison
Proxys
Idéal pour · Équipes disposant déjà de collecteurs.
Pour voir le numéro Infrastructure de proxysPilot contrôlé
Confirmer l'identité, le cas d'utilisation des données publiques, les classes sources, le trafic attendu, la rétention et le parcours d'escalade.
Testez le mélange de sources réelles, les contextes, les besoins de rendu, les artefacts de preuve, le masquage et les conditions de défaillance.
Définir les champs, les règles de correspondance, les clés d'historique, les états de qualité, la maintenance de la source, la route de livraison et le propriétaire.
Exécutez la cadence convenue, surveillez la santé et les champs de collecte, maintenez les sources contractées et fournissez des enregistrements ou des exceptions.
Examinez les exemples de données et la couverture des sources avant de convenir du calendrier de production.
Questions courantes
Le numéro WebScrapingAPI recueille des observations de sources publiques approuvées et peut appliquer les règles d'ajustement convenues.
Les sources potentielles comprennent les pages Web publiques prises en charge, les résultats de recherche, les avis des fournisseurs, les bases de données de vulnérabilités, les référentiels, les forums, les marchés, les pages d'applications, les pages d'état, les pages d'information sur le domaine public et les URL fournies.
Non. Le service décrit sur cette page couvre uniquement les sources publiques approuvées. Les sources protégées par identifiants, privées, restreintes, les services cachés et les autres sources non publiques sortent de son périmètre standard.
Pour une URL publique approuvée, les flux de travail du navigateur pris en charge peuvent récupérer la page et préserver les redirections, la sortie rendue, les métadonnées de réponse et les captures d'écran. Il s'agit d'une collecte, pas d'un service de sécurité contre les logiciels malveillants: WebScrapingAPI ne fait pas exploser de fichiers, ne teste pas d'exploit ou ne certifie pas une destination comme sûre ou malveillante.
Selon le produit et le contrat sélectionnés, un enregistrement peut inclure l'URL source, le contexte demandé, les métadonnées de réponse, la chaîne de redirection, le texte rendu, les champs extraits, la référence à la capture d'écran, le temps de capture, la raison de correspondance et l'état de collecte.
Oui, lorsque votre équipe fournit des données de référence approuvées et des règles de correspondance. Chaque candidat peut conserver les valeurs observées, les indices correspondants et manquants, la version de la règle et la capture de la source. Vos analystes valident la relation et son importance pour la sécurité.
Lorsque des identifiants stables ou des clés convenues sont disponibles, les enregistrements peuvent distinguer les premiers à être vus, les derniers à être vus, les changements, les changements, les disparitions, les réapparitions, les échecs de collecte et les états non disponibles.
La méthode de livraison est convenue lors de la scope et doit être prise en charge pour le contrat sélectionné. Selon cette portée, les enregistrements peuvent être fournis via une API, un webhook, un transfert de fichiers, un stockage d'objets ou une livraison d'entrepôt.
Les clients proxy maintiennent leurs collecteurs. Les clients API maintiennent les flux de travail en aval tandis que WebScrapingAPI maintient la couche de service documentée. Pour les programmes programmées ou gérés, WebScrapingAPI maintient les connecteurs contractés, l'extraction, les contrôles de qualité de la collecte et la livraison.
La collecte de sécurité nécessite une identité vérifiée du client, une finalité de données publiques définie, des sources approuvées, des contrôles de trafic et de conservation et une révision de l'utilisation acceptable.
Exploitation d'un échantillon de source surveillée
Prenez une petite liste de surveillance, trois à cinq sources publiques représentatives, les contextes de la demande et les décisions que vos analystes doivent prendre. Nous cartographierons les champs de capture, les indices de correspondance, les états de collecte, les garanties et les limites opérationnelles.