python - Comment obtenir le nombre de publications Weibo transférées et le nombre de publications Weibo originales d'un utilisateur sur Sina Weibo

Question

1. Description du problème
Je fais une analyse liée aux trolls Weibo et je dois obtenir le ratio de publications Weibo transférées et le ratio de publications Weibo originales par les utilisateurs de Weibo, c'est-à-dire le nombre d'utilisateurs transférant les publications Weibo d'autres personnes/ le nombre de toutes les publications Weibo.

Après avoir examiné la littérature, j’ai découvert que de nombreux articles contiennent ce type de données, mais je ne sais pas comment les obtenir.

J'ai découvert que dans la version mobile et la version PC de Weibo, vous pouvez utiliser le filtrage pour trouver le Weibo transféré d'une personne, mais lorsque je filtre ainsi dans la version mobile, les résultats renvoyés sont vides.

Quant aux résultats obtenus dans la version informatique, la somme du nombre de Weibo transférés et du nombre de Weibo originaux est évidemment bien inférieure au nombre total de Weibo.

2. Aide nécessaire
(1) Y a-t-il un problème avec le moteur de recherche de Sina Weibo ?
(2) Puis-je obtenir le numéro des publications Weibo originales d'une personne et le nombre de publications Weibo transférées via une sorte de méthode de recherche ? et une canette sur chenilles. (N'utilisez pas le nombre total de Weibos - le nombre de Weibos originaux, car il inclut également les Weibos invisibles).

Answer 1

J'ai open source un robot d'exploration Weibo distribué. Le projet était à l'origine utilisé pour analyser les republications populaires de Weibo (liées à mon propre travail). Plus tard, je l'ai modifié plusieurs fois, ajouté de nombreuses nouvelles fonctions et l'ai rendu open source. Concernant la première question, y a-t-il un problème avec le moteur de recherche de Weibo ? Je pense que cela peut être intentionnel, car par exemple, le système Weibo ne limitera que le retour de 5 pages de données pour les utilisateurs suivis et les fans des utilisateurs, comme la recherche par emplacement. . Les utilisateurs ne renverront que des dizaines de milliers de données. Cela peut également être dû au fait que vous n'êtes pas autorisé à afficher certaines publications Weibo, mais que les résultats qu'il récupère sont ceux que vous êtes autorisé à afficher.
La deuxième question que vous avez mentionnée est que Weibo invisible ne peut pas être obtenu. Le robot d'exploration ne peut obtenir que des données Weibo visibles par les utilisateurs ordinaires. J'ai également implémenté cela dans le code. Car s'il s'agit d'un Weibo privé, il ne sera certainement pas affiché par le système Weibo et l'API ne devrait pas être disponible. Weibo étant une très grande entreprise, elle doit toujours protéger la vie privée de ses utilisateurs.
La raison pour laquelle votre recherche via l'interface de recherche du terminal mobile ne renvoie rien est peut-être due au fait que Weibo l'a fait délibérément. Si vous effectuez des recherches approfondies, vous constaterez que les informations du côté PC sont beaucoup plus riches que les informations Weibo du côté mobile. Par conséquent, si vous souhaitez créer un robot d’exploration et avez besoin de données complètes, vous devez commencer par le PC.