NLP for Market Analysis — समाचार और सामाजिक सेंटीमेंट का प्रसंस्करण
क्रिप्टो ट्रेडिंग में प्राकृतिक भाषा प्रसंस्करण महत्वपूर्ण हो गया है। समाचार घोषणाएं, सोशल मीडिया सेंटीमेंट और नियामक फुसफुसाहट बाजारों को चेन संकेतों के प्रकट होने से पहले ही हिला देती हैं। यह गाइड आपको असंरचित पाठ से कार्रवाई योग्य जानकारी निकालने के माध्यम से चलाता है — वही तकनीकें जो Smart Money API में सेंटीमेंट स्कोरिंग को शक्ति प्रदान करती हैं।
मुख्य अंतर्दृष्टि: सेंटीमेंट अकेले केवल 48% अल्पकालिक चालों की भविष्यवाणी करता है। लेकिन जब इसे व्हेल सहमति और फंडिंग दरों के साथ जोड़ा जाता है? सेंटीमेंट-पुष्ट ट्रेड्स 61% सटीकता प्राप्त करते हैं। यही बहु-मोडल संकेतों की शक्ति है।
सेंटीमेंट विश्लेषण की बुनियाद
लेक्सिकॉन-आधारित बनाम मशीन लर्निंग दृष्टिकोण
लेक्सिकॉन-आधारित: सकारात्मक/नकारात्मक शब्दों का शब्दकोश (VADER, TextBlob)। तेज़, व्याख्यात्मक, लेकिन व्यंग्य और संदर्भ के साथ संघर्ष करता है।
from nltk.sentiment import SentimentIntensityAnalyzer
analyzer = SentimentIntensityAnalyzer()
texts = [
"Bitcoin surged 15% on bullish institutional adoption news",
"Crash incoming — expect 40% dump based on fundrat neg",
"Mixed signals but whales are accumulating ETH"
]
for text in texts:
scores = analyzer.polarity_scores(text)
print(f"{text[:40]}... → {scores['compound']:.2f}")
आउटपुट: कंपाउंड स्कोर -1 (सबसे नकारात्मक) से +1 (सबसे सकारात्मक) तक होते हैं। 0.65 का स्कोर सकारात्मक सेंटीमेंट को दर्शाता है, -0.42 नकारात्मक सेंटीमेंट को दर्शाता है।
ML-based: क्लासिफायर (Naive Bayes, SVM) को प्रशिक्षित करें या पूर्व-प्रशिक्षित ट्रांसफॉर्मर्स (BERT, RoBERTa) का उपयोग करें। अधिक सटीक लेकिन लेबल किए गए डेटा की आवश्यकता होती है।
क्रिप्टोकरेंसी समाचार का प्रसंस्करण
रियल-टाइम समाचार एकत्रीकरण
प्रमुख स्रोतों से हेडलाइन्स खींचें (CoinTelegraph, BlockBeats, Cointelegraph RSS, Reddit):
import feedparser
from datetime import datetime, timedelta
feeds = [
"https://cointelegraph.com/feed",
"https://www.coindesk.com/arc/outboundfeeds/rss/",
]
articles = []
for feed_url in feeds:
feed = feedparser.parse(feed_url)
for entry in feed.entries[:10]:
articles.append({
"title": entry.title,
"published": entry.published_parsed,
"summary": entry.summary,
})
नामित इकाई पहचान (NER) for Crypto Assets
कौन से टोकन/एक्सचेंज उल्लेखित हैं उन्हें निकालें:
import spacy
nlp = spacy.load("en_core_web_sm")
crypto_entities = {"Bitcoin", "BTC", "Ethereum", "ETH", "Solana", "SOL"}
text = "Bitcoin surged 12% as Ethereum whales accumulated large amounts"
doc = nlp(text)
for token in doc:
if token.text in crypto_entities:
print(f"{token.text} found")
सामाजिक सेंटीमेंट का खनन
Twitter/X API एकीकरण
विशिष्ट संपत्तियों के लिए उल्लेख, सेंटीमेंट और संलग्नता को ट्रैक करें:
import tweepy
from transformers import pipeline
sentiment_pipeline = pipeline("sentiment-analysis", model="distilbert-base-uncased-finetuned-sst-2-english")
client = tweepy.Client(bearer_token=TWITTER_BEARER)
query = "Bitcoin -is:retweet lang:en"
tweets = client.search_recent_tweets(query=query, max_results=100)
sentiments = []
for tweet in tweets.data:
result = sentiment_pipeline(tweet.text)[0]
sentiments.append({
"text": tweet.text,
"label": result["label"],
"score": result["score"]
})
avg_sentiment = sum(s["score"] for s in sentiments) / len(sentiments)
print(f"Bitcoin sentiment: {avg_sentiment:.2f}")
Reddit Community Sentiment
Monitor r/cryptocurrency, r/btc, r/ethtrader for retail sentiment shifts:
import praw
reddit = praw.Reddit(client_id=ID, client_secret=SECRET, user_agent=AGENT)
subreddit = reddit.subreddit("cryptocurrency")
for post in subreddit.hot(limit=50):
if post.created_utc > (time.time() - 86400):
sentiment = sentiment_pipeline(post.title)[0]
signal_strength = post.score * sentiment["score"]
Building a Production Sentiment Engine
Transformer-Based Sentiment (BERT)
Pre-trained BERT models are far more accurate than lexicon-based approaches:
from transformers import AutoTokenizer, AutoModelForSequenceClassification
import torch
model_name = "ProsusAI/finbert"
tokenizer = AutoTokenizer.from_pretrained(model_name)
model = AutoModelForSequenceClassification.from_pretrained(model_name)
def get_finbert_sentiment(text):
inputs = tokenizer(text, return_tensors="pt")
with torch.no_grad():
outputs = model(**inputs)
logits = outputs.logits
probabilities = torch.softmax(logits, dim=1)
sentiment_idx = torch.argmax(probabilities)
confidence = probabilities[0, sentiment_idx].item()
return {"sentiment": ["negative", "neutral", "positive"][sentiment_idx], "confidence": confidence}
Real-Time Sentiment Aggregation
Combine multiple signals into a daily sentiment score:
def compute_daily_sentiment(symbol):
news_articles = fetch_recent_news(symbol)
news_sentiments = [get_finbert_sentiment(a["title"]) for a in news_articles]
news_score = np.mean([s["confidence"] for s in news_sentiments])
tweets = fetch_tweets_last_6h(symbol)
twitter_sentiments = [get_finbert_sentiment(t) for t in tweets]
twitter_score = np.mean([s["confidence"] for s in twitter_sentiments])
reddit_posts = fetch_reddit_hot(symbol)
reddit_sentiments = [get_finbert_sentiment(p) for p in reddit_posts]
reddit_score = np.mean([s["confidence"] for s in reddit_sentiments])
composite = (news_score * 0.4 + twitter_score * 0.35 + reddit_score * 0.25)
return composite
Integrating with Smart Money API
Add sentiment as a feature to your confirmation system:
def confirm_with_sentiment(symbol, direction):
response = requests.get(
f"https://api.smartmoneyapi.com/v1/confirm?symbol={symbol}&direction={direction}",
headers={"X-API-Key": API_KEY}
)
smart_money = response.json()
sentiment_score = compute_daily_sentiment(symbol)
if (direction == "long" and sentiment_score > 0.55):
boost = 0.05
elif (direction == "short" and sentiment_score < 0.45):
boost = 0.05
else:
boost = 0
final_composite = min(smart_money["composite"] + boost, 1.0)
return {"composite": final_composite, "sentiment_boost": boost}
उन्नत NLP तकनीकें
पहलू-आधारित भावना विश्लेषण
समग्र भावना के बजाय, विशिष्ट पहलुओं के बारे में भावना निकालें: "बिटकॉइन तकनीक महान है, लेकिन अपनाने की गति धीमी है।" फीचर-स्तरीय राय निकालें।
कार्य-कारण पहचान
कारणात्मक दावों की पहचान करें: "XYZ के कारण, कीमत आगे बढ़ेगी।" हाइप और मूलभूत समाचारों को अलग करने के लिए एक क्लासिफायर को प्रशिक्षित करें।
भावना समय श्रृंखला
समय के साथ भावना में बदलाव को ट्रैक करें। +0.65 से -0.45 का अचानक उलटफेर एक उलट संकेत है जिस पर ध्यान देना चाहिए।
भावना को स्मार्ट मनी संकेतों के साथ जोड़ें
स्मार्ट मनी API आत्मविश्वास स्कोर प्रदान करता है जो व्हेल सहमति और ऑन-चेन मेट्रिक्स के खिलाफ सत्यापित होते हैं। अपने लाभ की पुष्टि करने और जीत दर को 4-6% बढ़ाने के लिए भावना विश्लेषण जोड़ें।
मुफ्त में शुरू करें →