01 · Account surfaceDocumenté
Profil ou page public
Une surface de compte public spécifique à la source, pas une personne réelle vérifiée.
- Source profile ID
- Handle and public name
- Profile URL and visible metadata
Les réseaux sociaux
Extraction de données des réseaux sociaux
Collectez les profils publics, publications, réponses et compteurs d’engagement pour étudier les marques et les contenus. Comparez les API par source, jeux de données et flux récurrents.
Modèle de dossier social public
Reliez les profils, les publications et l’historique d’engagement.
Gardez les objets de source stables séparés des observations changeantes et des étiquettes dérivées afin que les équipes en aval puissent interpréter ce qui était public, où et quand.
02 · ContentDocumenté
Postes
Un message public avec une identité source, un texte visible, un signal de publication et une URL.
- Post ID and URL
- Public text and time
- Author profile relationship
03 · Time-bound valueDocumenté
Observation de l'engagement
Les mesures visibles liées à un temps et à un contexte de collecte spécifiques.
- Like or reaction count
- Reply and share count
- observed_at and availability state
04 · RelationshipLe pilote d'abord
Résumé ou réponse
Une relation parent, réponse, citation ou conversation exposée à la source lorsque la surface approuvée la soutient.
- Parent post ID
- Relationship type
- Pagination and depth state
05 · AttachmentLe pilote d'abord
Médias et thème
Les références, les hashtags et les étiquettes de sources ou de sujets dérivés des médias publics étaient tenus distincts de l'article.
- Attachment URL or ID
- Hashtag and mention
- Topic rule or model version
Object boundaryNot assumed
Un profil public n'est pas une personne vérifiée.
Les identifiants de source, les poignées, les messages et l'engagement visible restent des observations de plateforme.
Contrat de couverture
Vérifiez les sources et la couverture des champs.
Examinez la source, le type de page, le marché et les champs nécessaires avant de choisir une API ou une collecte personnalisée.
Engine or familyLes donnéesContextesÉtat
Schéma d'enregistrement
Consultez les champs d’un exemple de données.
Chaque observation doit contenir suffisamment de contexte source et de collecte pour expliquer ce que signifie le nombre, la relation ou l'état de disponibilité.
Identification de la source publique
- source_profile_id
- Identificateur de plateforme exposé par la source.
- handle
- Le compte public à l'heure de l'observation.
- profile_url
- Page source publique associée au profil.
Objet de contenu public
- source_post_id
- Identifiant de plateforme pour le poste.
- text
- Le texte public exposé sur la surface approuvée.
- published_at
- Temps de publication attribué par la source, lorsqu'il est exposé.
Engagement lié au temps
- metrics
- Les nombres visibles nommés comptent avec la sémantique de la source conservée.
- observed_at
- Le temps de la collection a produit l'instantané.
- availability_state
- Observé, absent, indisponible, raté, exclu ou examiné.
Relations et origine
- parent_post_id
- Réponse ou relation de fil exposée à la source.
- source_url
- Page publique associée à l'observation.
- schema_version
- Version de la forme de sortie convenue.
{
"record_id": "social_obs_0832",
"object_type": "post_observation",
"profile": {
"source": "twitter",
"source_profile_id": "demo_204",
"handle": "example_studio"
},
"post": {
"source_post_id": "post_demo_17",
"published_at": "YYYY-MM-DDT07:55:00Z"
},
"metrics": { "likes": 148, "reposts": 21 },
"observed_at": "YYYY-MM-DDT08:32:00Z",
"collection_state": "observed",
"schema_version": "social.v1"
}Read the snapshot literally.
Engagement metrics are observations, not audited totals. The visible count can change, be rounded, or differ by source surface.
Identité et relations
Préserver l'identité de la plateforme avant d'ajouter une interprétation transversale.
Les profils, les messages, les réponses et les références médiatiques conservent leurs identifiants de source et leurs URL.
- 01
Tape de surface
plateforme + identifiant de profil
Réservé exactement comme observé. - 02
clé de contenu
identifiant de poste source
Uniquement dans la sémantique source. - 03
La relation
auteur, parent, médias, sujet
Les liens de source et les liens dérivés sont maintenus séparés. - 04
Observation
object + observed_at
Les champs changeables créent un nouvel instantané.
Sémantique de la fraîcheur
Traitez chaque métrique changeante comme une observation à temps imprimé.
Le temps de publication, le temps de collecte, le temps de livraison et la première ou dernière fois vu répondent à différentes questions et doivent rester séparés.
- Temps sourcepublished_at
Le temps de publication attribué par la source, lorsqu'il est exposé.
- Observéobserved_at
Le profil, le poste ou la métrique étaient visibles dans le contexte public demandé.
- Il est livré .delivered_at
L'instantané est devenu disponible pour le client.
- Modifiéfirst_seen / last_seen
L'objet source ou l'état métrique est entré ou sorti de l'historique surveillé.
Qualité et absence
Un poste manquant, une métrique zéro et une surface inaccessible ne sont pas équivalents.
Préserver l'état de raison afin que les analyses en aval n'inventent pas de sens là où la source ou la collection n'avaient pas fourni de sens.
La structure requise présente
Le profil, le message ou l'instantané métrique ont passé les contrôles convenus.
champ non affiché
La surface publique approuvée n'a pas révélé la valeur demandée.
La relation ou la mise en page ambiguë
Un fil, un objet source ou un état de parser nécessite une inspection.
Aucune observation soutenue
Restrictions, supprimés, échoués ou exclus restent distincts d'un zéro visible.
Contrôles structurelles
Identifiants, URL, types, noms métriques, timestamps, état de collecte et version de schéma requis.
Contrôles de terrain
Types de compte spécifiques à la source, clés de relation, état de pagination et preuves de surface publique.
Limite d'acceptation
Votre équipe approuve les sources autorisées, les dossiers représentatifs, les seuils de conservation et d'analyse; nous gérons le contrat technique convenu.
Options de livraison
Choisissez comment recevoir vos données.
Utilisez une API dans votre application, recevez des données récurrentes ou confiez-nous la collecte.
Proxys
Conservez vos collecteurs et utilisez notre réseau de proxies.
Utilisez des proxies résidentiels, datacenter ou ISP avec les collecteurs que votre équipe exploite déjà.
FonctionnalitéDétails
Vous recevezAccès proxy pour vos propres requêtes
Nous prenons en chargeRéseau proxy et accès
Votre rôleCollecte, extraction, stockage et analyse
Idéal pour · Équipes disposant déjà de collecteurs.
Comparer les services proxyApplications
Mettez ces données à profit.
Utilisez les champs et exemples ci-dessous pour préparer votre analyse, votre produit ou votre suivi.
Écoute sociale
Suivre les sujets approuvés, les messages et les conversations publiques avec le contexte source.
Posts · threads · hashtagsSurveillance de la marque
Surface de nouvelles mentions publiques et des instantanés d'engagement pour examen.
Queries · posts · observed_atRecherche du paysage créateur
Comparer les signaux de compte public et de contenu sans les traiter comme une preuve d'identité.
Profiles · posts · public metricsVisibilité de la campagne
Observer le contenu public sélectionné et l'engagement affiché par la source au fil du temps.
Posts · media · metric snapshotsÉtude de marché
Construire des organismes publics liés à la source pour l'analyse de sujets et de récits approuvés.
Content · topics · provenancePréparation de données sur l'IA
Préparez des exemples publics régis avec le temps, la source et l'état de la collecte attachés.
Text · relationships · schema versionPilot représentatif
Testez un échantillon dans votre propre processus.
Utilisez des profils publics approuvés, des messages, des threads et des requêtes qui représentent le contenu ordinaire, les champs manquants, la pagination, les états indisponibles et les instantanés d'engagement répétés.
- 01
Définir
Sources publiques, objets, champs, cadence, rétention et utilisation autorisée.
- 02
Pratique de l'échantillon
Profils représentatifs, messages, thèmes, médias et états disparus.
- 03
Inspection
Identification de source, temps métrique, relations, état de collection et exceptions.
- 04
Acceptez
Approuver le schéma, l'ensemble de sources publiques, le modèle d'exploitation et les seuils.
Questions courantes
Questions avant de commencer
Quelles API de réseaux sociaux puis-je utiliser ?
Explorez les options Data API pour Instagram, TikTok, YouTube, Reddit, LinkedIn et X. Consultez chaque page source et échantillon pour les objets et champs publics nécessaires.
Quels sont les objets sociaux qu'un flux à portée de main peut contenir ?
Un modèle d'enregistrement à portée de main peut inclure un profil public ou une page, un message, une observation d'engagement, une référence d'attachement multimédia, une relation de fil ou de réponse, et un hashtag ou un contexte de sujet.
Les chiffres de l'engagement sont-ils exacts ?
Les mesures d'engagement sont des observations, pas des totaux audités. Un nombre de likes, de réponses, de partages, de repost ou de vues visibles peut changer après la collecte, être arrondi et ne pas représenter toute l'activité de la plateforme. Chaque mesure doit conserver la source, le temps d'observation et l'état de disponibilité.
Les profils publics peuvent-ils être associés à la même personne sur toutes les plateformes?
La correspondance entre les personnes sur les plateformes n'est pas supposée. Les identifiants de profil source, les poignées, les noms publics et les URL restent spécifiques à la source. Tout pilote de résolution d'entité nécessite un objectif commercial convenu, des champs autorisés, des indices explicites, une incertitude explicite et une revue d'utilisation responsable séparée.
Les commentaires, les réponses et les thèmes peuvent- ils être fournis?
Les relations de réponse ou de fil public peuvent être évaluées lorsque le point final documenté ou la surface publique admissible sélectionné les expose.
Quelle est la fraîcheur des observations sociales?
Les API collectent les données à l’appel. Les flux et Managed Data suivent un calendrier convenu, en séparant les horodatages de la source et de la collecte lorsqu’ils sont disponibles.
Comment les messages supprimés, indisponibles ou manquants sont-ils représentés ?
L’échantillon distingue les champs manquants, pages indisponibles, requêtes échouées et valeurs à vérifier. Convenez du traitement de chaque état avant la livraison récurrente.
Les profils privés ou les messages sont-ils inclus?
N°: uniquement les surfaces sociales publiques. Les profils privés, les messages privés, le contenu réservé aux membres, les boîtes de réception authentifiées et autres zones restreintes ne sont pas des domaines de portée standard. L'accessibilité publique n'élimine pas non plus la nécessité d'un but légitime et de contrôles appropriés de conservation et d'accès.
Le WebScrapingAPI peut-il fournir une enrichissement des données personnelles?
Le champ d'application standard ne promet pas l'enrichissement des données personnelles, l'inférence sur les traits sensibles, la découverte de contacts privés ou la vérification de l'identité. Les clients restent responsables de la base légale, de la minimisation, de la conservation, des contrôles d'accès et des décisions associées à tout domaine public autorisé.
Qui maintient les changements sociaux ?
Votre équipe maintient les collecteurs avec les proxies et les parseurs personnalisés avec les API d’accès aux pages. Nous maintenons l’extraction Data API prise en charge et la collecte incluse dans les flux ou Managed Data.
Les réseaux sociaux
Commencez par un accès documenté ou une portée d'un flux public réglementé.
Apportez les sources, les objets, les champs, la cadence et le cas d'utilisation approuvés.