طريقة فعالة لجمع بيانات تويتر دون الحاجة إلى Twitter API

يتم جمع بيانات تويتر لأغراض مختلفة ؛ يجمع المطورون أحيانًا بيانات تويتر لمشاريعهم ؛ يقوم محللو البيانات بجمع التغريدات بغرض التحقق من سلوك المستخدم والتحليل الإحصائي ؛ يقوم الباحثون بجمع وتحليل بيانات تويتر بما يتماشى مع أهداف علم الاجتماع وتحسين الأوراق البحثية. في السنوات الأخيرة ، مع توسع الإنترنت ، خاصة بعد تفشي كورونا ، اكتسبت البيانات قيمة أضعافا مضاعفة للشركات والحكومات. لدى جميع المجموعات المذكورة أعلاه والأشخاص الذين يجمعون بيانات تويتر ويستخدمونها طريقتان: فهم يتلقون البيانات من خلال برنامج مراقبة وسائل التواصل الاجتماعي ، أو مباشرة بمساعدة Twitter API ، والذي تم إصداره مؤخرًا مجانًا.

 

طرق جمع البيانات من تويتر

 

قام تويتر بإزالة API المجاني!

في فبراير ، أعلن تويتر في تغريدة أنه يخطط لسحب API المجاني الخاص به وعرضه مقابل 100 دولار لكل 10000 تغريدة. تم تنفيذ هذا أخيرًا في أبريل ، والآن تتوفر واجهة برمجة تطبيقات تويتر المجانية للمطورين مقابل 1500 تغريدة فقط شهريًا. أدى حظر واجهة برمجة تطبيقات تويتر المجانية إلى إعاقة عملاء الجهات الخارجية ، وخاصة الشركات التي تعتمد على البيانات الضخمة والتي تتمثل طريقة جمعها الوحيدة في واجهة برمجة تطبيقات تويتر. السؤال هو ، ما هي الطريقة أو الطرق الأخرى الموجودة لجمع بيانات تويتر دون استخدام Twitter API؟

اجمع بيانات تويتر بطريقتين

هناك طريقتان لجمع بيانات تويتر ، والتي نسميها هنا رسمية وغير رسمية. سبب هذا الاسم هو أن تويتر لا يوفر إمكانية جمع البيانات بطريقة غير رسمية.

الطريقة الرسمية

طريقة التجميع الأولى هي الطريقة التقليدية لاستخدام Twitter API ، والتي لها طريقتان ، ولكن إمكانية استخدامها مجانًا حاليًا محدودة. في الطريقة الأولى (V1 app auth) ، يسجل المطور تطبيقًا في لوحة مطور تويتر باستخدام واجهات برمجة تطبيقات تويتر والرمز المميز للتطبيق ، وبعد موافقة تويتر ، يتم تسجيل التطبيق باستخدام مفاتيح إخراج تويتر للتجميع. يمكن أيضًا جمع بيانات تويتر من تويتر الإصدار 2 API (V2 app auth) باستخدام رمز التطبيق.

هناك طريقة أخرى للتجميع باستخدام API وهي طريقة V1 user auth ، والتي يمكن أيضًا استخدامها ، نظرًا لاستخدام Auth الحساب ، بالإضافة إلى جمع البيانات والتغريد وإعادة التغريد وما شابه ذلك من API. يمكن تنفيذ نفس العملية باستخدام طريقة V2 user auth.

كانت هاتان الطريقتان ممكنتين مجانًا قبل أن تصبح API المجانية لتويتر غير متوفرة. ولكن مع هذا التغيير ، فهي ليست طرقًا فعالة من حيث التكلفة حاليًا.

الطريقة غير الرسمية

الطريقة غير الرسمية هي طريقة هندسية عكسية لا يسمح بها تويتر رسميًا. باستخدام هذه الطريقة الحصرية ، تمكنت بنك المعلومات من جمع البيانات من تويتر بطريقة مستقرة حتى بعد قيود API المجانية على تويتر.

في هذه الطريقة ، يتم استخدام حساب تويتر لجمع البيانات. بهذه الطريقة ، في البداية ، يجب إنشاء حساب ويجب محاكاة سلوك مستخدم تويتر العادي (التغريد ، والمتابعة ، والحصول على متابعين ، وما إلى ذلك) حتى يتم اعتباره حسابًا عاديًا (مستخدمًا) وفقًا لـ خوارزمية تويتر. أخيرًا ، يتم استخدام الحساب الذي تم إنشاؤه لجمع بيانات تويتر.

الاختلافات بين طرق جمع بيانات تويتر الرسمية وغير الرسمية

تتطلب كلتا الطريقتين المذكورتين حاليًا تكلفة استغلال تقنية عالية مع تغييرات الوصول المجاني إلى Twitter API. مع اختلاف أن الحد الزمني للطلب أقل بالطريقة الرسمية وأكثر بالطريقة غير الرسمية ، ونتيجة لذلك ، سيكون حجم وسرعة جمع البيانات في نفس الإطار الزمني أعلى في الطريقة غير الرسمية.

أيضًا ، نظرًا لعدم حصول تويتر على إذن لاستخدام الطريقة غير الرسمية ، هناك إمكانية لتغيير سياسات تويتر بخصوص هذه المشكلة ومواجهة الكثير من القيود أو عدم الاستقرار في التجميع بهذه الطريقة ، بينما بالطريقة الرسمية ، نظرًا لدعم تويتر ، فهي هو أكثر استقرارا. سيكون.

احصل على مجموعة بيانات تويتر الكاملة

على الرغم من الانقطاع الكامل للوصول إلى API المجانية على تويتر منذ منتصف أبريل ، تمكنت بنك المعلومات من الحفاظ على استقرار حجم جمع البيانات الخاص بها دون تغيير مقارنة بالعام الماضي باستخدام طريقة غير رسمية. يمكنك الاتصال بنا للتحقق من هذه المشكلة واختبار حساب مجاني أو تلقي بيانات تويتر حول أي مشكلة.

 

عمليات البحث ذات الصلة

تويتر بحث بدون حساب
كيفية البحث على تويتر محرك البحث في الشبكات الاجتماعية
دليل البحث المتقدم في تويتر

 

أحدث أقدم