सोशल मीडिया डेटा स्क्रैपिंग को डेवलपर API में बदलने वाले एड्रियन हॉर्निंग

सोशल मीडिया डेटा स्क्रैपिंग को डेवलपर API के तौर पर बेचना

एड्रियन हॉर्निंग (Adrian Horning) ने सोशल मीडिया का डेटा जमा करने वाला डेवलपर-केंद्रित API, स्क्रेप क्रिएटर्स (Scrape Creators) बनाया। जून 2024 में इस काम को ठीक से शुरू करने के बाद, 31 जुलाई 2025 को छपे Indie Hackers इंटरव्यू में उन्होंने बताया कि करीब एक साल में महीने की बिक्री 10 हज़ार डॉलर से ऊपर पहुँच गई।

कौशल सीखना और आत्मनिर्भरता की तैयारी

यूनिवर्सिटी में उन्होंने मनोविज्ञान पढ़ा। इंटर्नशिप के दौरान Uber से परिचय हुआ तो टेक इंडस्ट्री में दिलचस्पी जगी, और वे सैन फ्रांसिस्को जाकर कोडिंग बूटकैंप में पढ़ने लगे। उस दौरान Lyft में काम करके और साइकिल से खाना पहुँचाकर उन्होंने खर्च निकाला, और बाद में यूटा में करीब तीन साल सॉफ़्टवेयर इंजीनियर रहे।

2022 में नौकरी छोड़ते समय उनके खाते में 30 हज़ार डॉलर थे, और एक छोटा ऐप महीने के 500 डॉलर दे रहा था। लेकिन आज़ाद होने के बाद कई बार पैसा खत्म होने की नौबत आई, और उन्होंने फ्रीलांस काम तथा स्क्रैपिंग कोर्स बेचकर गुज़ारा किया। जब तक उत्पाद घर का खर्च नहीं उठा सका, तब तक बाहरी कमाई ने डेवलपमेंट का समय बचाए रखा।

शुरुआती प्रयोगों में 'Auto Apply' भी था, जो लिंक्डइन पर भर्ती करने वालों को ढूँढकर मेल भेजता था। तब यह ब्राउज़र को अपने आप चलाने वाले Puppeteer पर निर्भर था, और बार-बार ब्लॉक होने तथा डेटा जमा करने में अस्थिरता की वजह से उन्हें काफ़ी दिक्कत हुई।

तकनीकी मोड़ दोस्त जेक की एक फ़रमाइश से आया। जेक ने कहा कि जब उसकी पत्नी को पसंद आने वाले Lululemon के कपड़े दोबारा स्टॉक में आएँ तो मैसेज कर देना, और इसी बहाने वे वेबसाइट के अंदरूनी API को देखने लगे। ब्राउज़र के डेवलपर टूल्स में डेटा की रिक्वेस्ट ढूँढ़कर सीधे JSON जवाब लेने का तरीका उन्होंने सीखा, और बाद में फ्रीलांस काम तथा कोर्स में भी इसी अनुभव का इस्तेमाल किया।

पुराने कोड को बिकने वाले API में बदलना

कारोबार का स्वरूप तय करने में किसी और कंपनी के बिक्री की सूचना ने असर डाला। एक फ़ॉलोअर ने MicroAcquire पर चढ़े सोशल मीडिया स्क्रैपिंग API के कारोबार का लिंक भेजा, और उन्हें पता चला कि ऐसी ही सुविधा के लिए बाज़ार पहले से पैसा दे रहा है। उन्हें लगा कि कई प्रोजेक्ट्स में बनी डेटा जमा करने वाली सुविधाओं को एक साथ जोड़कर बेचा जा सकता है।

शुरू में उन्होंने TikTok क्रिएटर डेटाबेस और स्क्रैपिंग API, दोनों को करीब छह महीने साथ चलाया। क्रिएटर डेटाबेस का रखरखाव महँगा था और उसका बोझ भी भारी, जबकि API से कमाई की संभावना ज़्यादा साफ़ दिख रही थी। आख़िर में उन्होंने डेटाबेस का काम बंद किया और API पर ध्यान लगाने का रास्ता चुना।

Scrape Creators का बुनियादी काम यह है कि वह सार्वजनिक प्रोफ़ाइल, पोस्ट, कमेंट, वीडियो की जानकारी वग़ैरह जमा करके JSON के रूप में लौटा दे। ग्राहक इस डेटा को अपने प्रोग्राम से जोड़ते हैं, और सेवा चलाने वाला हर प्लेटफ़ॉर्म के डेटा जमा करने के तरीके तथा खराबी से निपटने का काम सँभालता है। YouTube और TikTok के वीडियो की ट्रांसक्रिप्ट तथा ऐड लाइब्रेरी का डेटा भी उत्पाद के अहम दायरे में शामिल रहा।

ग्राहकों में सोशल मीडिया एनालिटिक्स टूल बनाने वाले डेवलपर, मार्केटिंग एजेंसियाँ, शोधकर्ता और कंटेंट क्रिएटर शामिल हैं। मिसाल के तौर पर एजेंसियाँ प्रतिद्वंद्वियों के विज्ञापनों की तुलना कर सकती हैं, और डेवलपर कई प्लेटफ़ॉर्म के आँकड़े जमा करने वाला डैशबोर्ड बना सकते हैं। वीडियो ट्रांसक्रिप्ट का इस्तेमाल कंटेंट को दोबारा गढ़ने या खोजे जा सकने वाले संग्रह बनाने में होता है।

असली इस्तेमाल से भी माँग का स्वरूप पता चला। सितंबर 2025 में हॉर्निंग ने अपने आँकड़े जारी किए, जिनमें Instagram प्रोफ़ाइल की 43.1 लाख बार जाँच और TikTok वीडियो ट्रांसक्रिप्ट की 38.2 लाख रिक्वेस्ट दर्ज थीं। इन आँकड़ों से पता चलता है कि अकाउंट का आकार और बुनियादी जानकारी देखना तथा वीडियो की सामग्री का विश्लेषण करना, दोनों ही बड़े इस्तेमाल थे।

इस्तेमाल के हिसाब से बिकने वाले क्रेडिट

भुगतान का तरीका यह है कि ग्राहक जितना चाहिए उतने क्रेडिट पहले खरीदता है और उन्हें API कॉल में खर्च करता है। इंटरव्यू में MRR शब्द इस्तेमाल हुआ है, लेकिन इस आँकड़े को "इस्तेमाल के हिसाब से बिकने वाले क्रेडिट उत्पाद की महीने की बिक्री" के संदर्भ में पढ़ना चाहिए। यह हर महीने एक तय रकम वसूलने वाली सदस्यता से अलग किस्म की कमाई है, और इस ढाँचे में डेटा जमा करते रहने वाले ग्राहकों की दोहराई गई खरीद ही अहम हो जाती है।

सितंबर 2026 में देखी गई आधिकारिक दाम-सूची में एक बार में खरीदने वाले पैकेज दिए गए हैं: 25 हज़ार क्रेडिट 47 डॉलर में, और 5 लाख क्रेडिट 497 डॉलर में। ज़्यादातर सुविधाएँ एक कॉल पर 1 क्रेडिट खर्च करती हैं, पर कुछ को ज़्यादा क्रेडिट चाहिए। नए उपयोगकर्ता पहले मुफ़्त के 100 क्रेडिट से मिलने वाला डेटा और काम करने का तरीका परख सकते हैं।

ग्राहकों तक ख़ुद पहुँचना और एक उत्पाद पर ध्यान देना

पहला ग्राहक तकनीकी कंटेंट से आया। हॉर्निंग ने ट्विटर पर बताया कि किसी कंपनी की वेबसाइट से डेटा कैसे निकाला जाए, तो उसी कंपनी के CTO ने जवाब दिया और उनके API के बारे में पूछा। काम का तरीका दिखाने वाली उस पोस्ट ने उनकी तकनीकी काबिलियत साबित की और सीधे असली सौदे तक पहुँचा दिया।

इसके बाद वे ऐसे उत्पाद ढूँढकर, जिन्हें सोशल मीडिया डेटा की ज़रूरत लगती थी, ख़ुद संपर्क करते थे। किसी और फ़ाउंडर का प्रचार वीडियो या पोस्ट देखकर वे API आज़माने के लिए मुफ़्त 10 हज़ार क्रेडिट की पेशकश करते थे, और इसी तरीके से ग्राहक जुटाए। मैसेज वे ख़ुद भेजते थे, थोक में चलने वाली अपने आप सेल्स पर निर्भर नहीं रहे।

उन्होंने X के डायरेक्ट मैसेज और गूगल सर्च को मुख्य ग्राहक-स्रोत बताया। मुफ़्त कंटेंट से बनी साख काम आई, हालाँकि हर चैनल के नतीजे को बारीकी से नापने वाला कोई तरीका उनके पास नहीं था।

उन्होंने उत्पाद दिखाने के लिए मुफ़्त टूल भी बनाए। लिंक्डइन पर साझा किया 'YouTube Comment Analyzer' वीडियो का पता डालने पर कमेंट का विश्लेषण करता है, और इसमें उनके ही बनाए YouTube कमेंट स्क्रैपिंग API का इस्तेमाल हुआ। यह ऐसा उदाहरण था जिससे उपयोगकर्ता ख़ुद देख सकते थे कि API से क्या-क्या बन सकता है।

बढ़त में अहम बदलाव तब आया जब उन्होंने दूसरे कामों पर लगने वाला समय घटाया। कई प्रोजेक्ट्स और फ्रीलांस काम साथ-साथ करते हुए उन्होंने Scrape Creators पर ध्यान केंद्रित किया, और मुश्किल कुछ महीने पार करने के बाद मार्च 2025 तक घर के ज़्यादातर खर्च निकलने लगे। उसी साल की गर्मियों में महीने की बिक्री 10 हज़ार डॉलर से ऊपर चली गई।

ग्राहकों को जवाब देना उनका अहम मुकाबला-तरीका था। ग्राहक गिल हिल्डेब्रांड (Gil Hildebrand) ने इंटरव्यू की टिप्पणी में कहा कि हॉर्निंग लगभग तुरंत जवाब देते हैं और उन्हें ज़रूरी सुविधा मुहैया कराते हैं। हॉर्निंग ने भी कहा कि API के कारोबार में फ़ाउंडर तक आसानी से पहुँच पाना और तेज़ सपोर्ट, ये दोनों ही ताक़त बन जाते हैं।

रखरखाव को भी शामिल करने वाला छोटा इन्फ्रास्ट्रक्चर कारोबार

सितंबर 2025 में जारी तकनीकी जानकारी के मुताबिक मुख्य सर्वर Node.js और Express पर चलता था, और Redis से क्रेडिट की स्थिति तथा कैश सँभाले जाते थे। जो काम हो सकते थे वे सीधे HTTP रिक्वेस्ट से किए जाते, और ब्राउज़र सिर्फ़ तब चलाया जाता जब सच में ज़रूरत हो, जैसे TikTok Shop की कुछ सुविधाओं में। यानी उन्होंने ऐसा सीधा-सादा ढाँचा चुना जिसमें अकेले दिक्कत ढूँढ़कर ठीक की जा सके।

चलाने में सबसे भारी हिस्सा प्रॉक्सी की गुणवत्ता और हर प्लेटफ़ॉर्म से डेटा जमा करने की भरोसेमंदी था। भरोसे की दिक्कतें घटाने के लिए उन्होंने प्रॉक्सी देने वाली कंपनी बदली, और बताया कि वे हर सुविधा की सफलता दर, जवाब का समय और गड़बड़ियों के पैटर्न पर नज़र रखते हैं। ग्राहक को यह सिर्फ़ एक साधारण कॉल जैसा लगता है, फिर भी इसके पीछे लगातार रखरखाव का खर्च चलता रहता है।

बाहरी प्लेटफ़ॉर्म पर निर्भरता का ख़तरा भी बना रहता है। Scrape Creators की शर्तों में साफ़ लिखा है कि बाहरी साइटों में बदलाव या अपने आप होने वाली पहुँच पर रोक से सुविधाएँ रुक सकती हैं, और उन साइटों की शर्तों तथा निजता से जुड़े कानूनों का पालन करने की ज़िम्मेदारी उपयोगकर्ता की है। सार्वजनिक डेटा देने वाला API खरीदने पर भी डेटा जमा करने और उसके इस्तेमाल की शर्तें जाँचना बाक़ी रहता है।

इस्तेमाल को आसान बनाने का काम भी चलता रहा। सितंबर 2025 में उन्होंने n8n के लिए एक ख़ास नोड पेश किया, जिससे जटिल HTTP रिक्वेस्ट ख़ुद लिखने की ज़रूरत नहीं पड़ती, और आज n8n की आधिकारिक इंटिग्रेशन सूची में उसे सत्यापित नोड के तौर पर देखा जा सकता है। यह उस विस्तार का हिस्सा था जिसमें डेवलपर की बनाई स्क्रैपिंग सुविधा को वर्कफ़्लो ऑटोमेशन टूल इस्तेमाल करने वालों तक पहुँचाया गया।

सितंबर 2026 में देखे गए आधिकारिक परिचय पेज पर टीम का आकार 3 लोगों का दिखाया गया है। 2025 में यह अकेले डेवलपर का उत्पाद था, अब छोटी टीम से चलने वाला काम बन गया है, और बाहरी निवेश के बिना चलाने की बात आज भी कायम है।

Scrape Creators इस तरह बढ़ा कि उसने कई प्रयोगों में बने स्क्रैपिंग कोड को दोबारा इस्तेमाल किया और जिन डेवलपर्स को यह डेटा चाहिए था, उन्हें सीधे बेचा। हॉर्निंग ने जो क़ीमत बेची, वह इस बात में थी कि ग्राहक को मनचाहा डेटा आसानी से मिल जाए, और डेटा जमा करने का तरीका बदलने पर वे उसे लगातार ठीक भी कर देते रहें।