آیا Reddit مشکل اختروفینگ دارد؟ آنچه داده ها نشان می دهد
آدرس مقاله: https://www.petervijeh.com/projects/reddit-astroturf آدرس نظرات: https://news.ycombinator.com/item?id=49877678 امتیاز: 207 # نظر: 261
یکی از برندهای چاقوی سرآشپز 31 درصد از موارد «چی بخرم» را از 5 درصد حسابها دریافت میکند، یعنی چهار برابر چیزی که شانس پیشبینی میکند. بنابراین من تاریخچه کامل ردیت آن حساب ها را جمع آوری کردم.
من آشپزی را دوست دارم و آشپزی به یک وسواس با چاقوهای سرآشپز ژاپنی تبدیل شد. وقتی می خواهم چاقو یا هر چیز دیگری بخرم، نام محصول را در گوگل تایپ می کنم و کلمه "reddit" را اضافه می کنم. افراد زیادی این کار را انجام می دهند. مایک ریگز آن را در ریسون در سال 2022 بهعنوان «هک ردیت» نوشت، پس از اینکه مقاله دیمیتری بریتون در جستجوی گوگل به همین نکته اشاره کرد: یک پرس و جو با «reddit» در انتها، انسانها را به جای صفحات وابسته بازمیگرداند. شرط پشت این عادت این است که یک غریبه در r/chefknives دلیلی ندارد که در مورد چاقو به شما دروغ بگوید.
این شرط بندی یک نقطه ضعف آشکار دارد. اگر ردیت جایی است که خریداران برای نظرات بدون دستمزد مراجعه می کنند، ردیت جایی است که یک برند می خواهد نظرات پولی را بکارد. میخواستم بدانم که آیا زیرمجموعههای چاقویی که خواندهام و برای New Knife Day نوشتهام، نشانهای از آن را نشان میدهد یا خیر. نه در مورد یک نظر مشکوک، اما چیزی که من می توانستم بشمارم و شخص دیگری می تواند بازگو کند.
سال گذشته یک مدل کوچک به نام GLiNER را تنظیم کردم تا مارک ها، مدل ها و استیل ها را از نظرات چاقو بیرون بکشم. از «انتخاب یک مازاکی در سفید شماره 2، بسیار بهتر از فیبروکس قدیمی من»، مازاکی را به عنوان یک برند، فیبروکس را به عنوان مدل و سفید شماره 2 را به عنوان فولاد بازمی گرداند. این مدل بر روی هر نظری که Scraper New Knife Day از شش زیرمجموعه جمعآوری میکند، استفاده میکند: r/knives، r/knifeclub، r/chefknives، r/japaneseknives، r/fixedBladeEdc و r/knifeSteels. نوشته روی آن مدل اینجاست.
بنابراین برای هر نظری که قبلا دارم، چه کسی آن را نوشته است، چه مارک هایی را نام می برد، و اینکه آیا موضوعی که در آن قرار دارد یا خیر، کسی می پرسد چه چیزی بخرد. همین برای پرسیدن یک سوال محدود کافی است: در موضوعاتی که یک توصیه خرید را تغییر می دهد، چه کسی توصیه را انجام می دهد؟
New Knife Day سایت من برای کلکسیونرهای چاقو است. چاقوها و فولادها را فهرست می کند و چاقوهایی را که مردم در Reddit می خرند و در مورد آنها بحث می کنند را فهرست می کند، بنابراین من سهمی در چاقویی دارم که Reddit ارزش خواندن دارد. New Knife Day در new.knife.day است.
با در نظر گرفتن این صفحات فروش به عنوان توضیحات محصول، یک کمپین پولی برای یک نام تجاری، که از طریق تعداد انگشت شماری از حساب های آماده شده ارائه می شود، باید به صورت زیر نمایش داده شود:
هر یک از این موارد نیز همان چیزی است که یک طرفدار فداکار، یک کارمند سازنده در زمان خود پست میگذارد، یا افراد عادی ساب ردیت خود یک برند که در یک تاپیک خرید سرگردان هستند، تولید میکنند. دادههای عمومی Reddit میتوانند نشان دهند که توصیهها متمرکز هستند و نمیتوانند دلیل آن را نشان دهند. همه چیز زیر در مورد نیمه اول است.
Scraper هر پست جدید و نظرات آن را بلافاصله پس از ارسال ذخیره می کند. معلوم شد که این لحظه اشتباهی برای این سوال بود: یک موضوع خرید توصیههای خود را طی یکی دو روز بعد جمعآوری میکند، و پستهای r/knives هر کدام 1.5 نظر ذخیره شده داشتند. یک پاس تازه به 3607 پست قدیمیتر از 48 ساعت بازگشت و درختان نظرات آنها را بازیابی کرد، که مجموعه را از 21،673 به 51،129 رساند. قبل از رفرش، تست زیر چیزی پیدا نکرد، زیرا حدود 800 اشاره به موضوع خرید خیلی کم بود که بتوان 7.6% از شانس 7.1% را تشخیص داد.
سه تعریف کار را انجام می دهند. موضوع خرید پستی است که عنوان یا متن آن با عباراتی مانند "آیا باید بخرم"، "توصیه می کنم"، "زیر $" یا "بهترین چاقو" مطابقت دارد. این یک عبارت منظم است، نه یک طبقه بندی. سنگینی نام تجاری نویسنده، سهم نظرات آنها است که نام یک برند را نام میبرند و هر بار برای نامگذاری یک برند وزن دارند. دم، 5 درصد برتر از 987 نویسنده با 10 نظر یا بیشتر درباره آن امتیاز، 49 حساب است. من از این طریق به آن امتیاز میدهم زیرا حسابی که مدام همان مارک را نشان میدهد، محصولی است که فروشندگان بالا میفروشند.
سوال این است که با توجه به تعداد پستهایی که همه ارسال میکنند، چه سهمی از موضوع خرید که دم را ذکر میکند، به طور تصادفی مینویسد. برای به دست آوردن آن شماره، هر نام تجاری را در جایی که هست، در رشته آن و نامگذاری برندش نگه میدارم، و نام نویسندهها را بهطور تصادفی در میان آن ذکرها، مانند به هم ریختن برچسبهای نام، تخصیص میدهم. یک حساب پرکار هنوز هم نام های زیادی دریافت می کند و یک حساب بی سر و صدا تعداد کمی را دریافت می کند، اما اینکه یک حساب در کدام رشته ها ظاهر می شود دیگر به این بستگی ندارد که چه کسی باشد. من این کار را 1000 بار انجام می دهم و هر بار سهم دم را ثبت می کنم.
اگر سهم واقعی در محدوده ای باشد که 1000 تخصیص مجدد ایجاد می کند، دم بیشتر از آن چیزی که تعداد نظرات آن توضیح می دهد، در خرید موضوعات متمرکز نیست. اگر بالاتر از محدوده باشد، اکانتهای دم در خرید موضوعات بیشتر از آنچه که حجم ارسال آنها توضیح میدهد، ظاهر میشوند. نویسندگان در سراسر هش نمکی هستند. هیچ نام کاربری یا متن نظری از پایگاه داده خارج نمی شود.
اگر دم در خرید تاپیکها فقط به این دلیل ظاهر میشود که پستهای زیادی ارسال میکند، تخصیص مجدد تصادفی میگوید که باید حدود 7.9٪ از نام تجاری را در آنجا بنویسد و تقریبا همیشه بین 6.3٪ و 10.1٪. 11.3 درصد نوشته است. تنها 2 مورد از 1000 تغییر تصادفی به آن رسیدند. در شمارشهای ساده، حدود یک پیشنهاد خرید از هر 9 مورد از این 49 حساب میآید، که شانس میگوید یکی از هر سیزده حساب، که حدود 50 توصیه اضافی از 1471 است.
جایی که سهم اضافی بیشتر از اندازه آن اهمیت دارد. اگر با چاقوی Reddit به طور کلی بازی می شد، هر subreddit بالاتر از شانس قرار می گرفت. دو تا، r/chefknives و r/knifeclub. r/knives، بزرگترین، در نیم نقطه شانس است. یک کمپین پولی توسط یک برند خریداری میشود، بنابراین باید برند به برند نیز نشان داده شود، و این کار را میکند: سه برند بیشتر از آنچه شانس میدهد، توصیههای خرید خود را دریافت میکنند، یک برند بزرگ کمی کمتر میگیرد و سه برند هیچ کدام را دریافت نمیکنند. این همان شکلی است که چند کمپین هدفمند از خود به جا میگذارند، و همچنین شکلی است که چند پایگاه هواداران با صدای بلند از خود خواهند گذاشت.
این برندها کدگذاری شدهاند زیرا آمار غلظت نشان نمیدهد که هیچ برندی برای هر چیزی پول پرداخت کرده است، و برندی که قویترین سیگنال را دارد، طرفداران زیادی نیز دارد.
در داده های بدنه، دم نیز با دو پیش بینی دیگر در بالا مطابقت دارد. حسابها نازک هستند: میانه 12 نظر در این شش زیرردیت، و میانگین امتیاز 1، بنابراین هیچکس به آنها رأی نمیدهد تا برجسته شوند. آنها به یک برند وفادار هستند: دو سوم نامهای تجاری دم حسابها به همان برند اختصاص دارد. این سه پیشبینی از شش پیشبینی است که همه پیکره میتواند آزمایش کند. سن، تمرکز چاقو و پیوندهای فروشگاه به کل تاریخچه Reddit هر حساب نیاز دارد.
من 23 اکانت دم پشت این سه برند را با یک سیگنال گرفتم و همه چیزهایی را که Reddit برای هر کدام برمیگرداند واکشی کردم: حداکثر 2000 نظر و ارسالهای آنها، تاریخ ایجاد حساب و کارما. برای مقایسه، 23 نویسنده 10 به اضافه نظر دیگر از همان مجموعه، به طور تصادفی از محدوده تعداد نظرات دنباله گرفته شده اند. هشت تاریخچه دم و هفت سابقه مقایسه پنهان، تعلیق یا حذف شدند. بقیه خواندنی بودند
یک حساب پرداختی آماده شده باید جوان باشد، بیشتر در ساب ردیت هایی که برای ارسال آن پول پرداخت می شود، پست کند و یک برند را فشار دهد. حسابهای دم در میانه 4.5 سال قدمت دارند، مانند حسابهای مقایسه. فقط 3 درصد از نظرات آنها در شش زیرمجموعه چاقو است، در مقابل 10 درصد برای گروه مقایسه، و آنها بیش از 66 زیرمجموعه را به 47 مورد گروه مقایسه تقسیم کردند. در کل تاریخ آنها از هفت مارک چاقو نام می برند، نه یک. لینک های فروشگاه در هر دو گروه نادر است.
من در مجموع حدود دوجین ویژگی را مقایسه کردم. با 15 و 16 حساب قابل خواندن، هیچ یک از تفاوتها بزرگتر از تقسیم 31 نفر به دو گروه تصادفی نیست، و آنهایی که به هر جایی متمایل میشوند، به سمت دم متمایل میشوند که تمرکز کمتری روی چاقو دارند.
این چیزی است که یک حساب کاربری گرم شده و تک منظوره به نظر نمی رسد. فردی که زیاد در ردیت حضور دارد و احساسات شدیدی نسبت به یک سازنده چاقو دارد، به نظر می رسد. همچنین یک حساب پولی با مدیریت خوب به نظر می رسد، به همین دلیل است که فروشندگان به جای حساب های جدید، حساب های قدیمی را می فروشند. هشت تاریخچه دم پنهان می توانند کل داستان را در خود جای دهند و من نمی توانم آنها را بخوانم.
اضافه کردن "reddit" به جستجوی چاقو همچنان شما را به انسان تبدیل می کند. برای چند برند، یک چهارم تا یک سوم توصیههای خرید از حسابهایی است که بیشتر آن برند را توصیه میکنند. من نمی دانم که آیا آن ها طرفدار هستند یا پولی، و پس از خواندن تاریخچه آنها به طرفداران متمایل می شوم و آن را آزادانه نگه می دارم.
بررسی عملی همان چیزی است که دادهها تأیید میکنند: وقتی یک توصیه چاقویی از حسابی میآید که شما آن را نمیشناسید، روی آن کلیک کنید و ببینید آیا تا به حال نام برند دیگری را نام برده است یا خیر. در این پیکره یک سوال بهتر از کارما دم را از همه جدا می کند. نظر پرداخت شده از یک حساب قدیمی واقعی را نمی گیرد و فکر نمی کنم خواننده بتواند کاری انجام دهد.
کد، دادههای ناشناس و نمودارها در مخزن عمومی که در زیر پیوند داده شده است، قرار دارند. نام کاربری، متن نظر، تاریخچه حساب و کلید کد برند منتشر نشده و نخواهد بود.
متن اصلی (انگلیسی)
Does Reddit have an astroturfing problem? What the data suggests
Article URL: https://www.petervijeh.com/projects/reddit-astroturf Comments URL: https://news.ycombinator.com/item?id=49877678 Points: 207 # Comments: 261