சந்தை பகுப்பாய்வுக்கான NLP — செய்தி மற்றும் சமூக உணர்வு செயலாக்கம்
கிரிப்டோ வர்த்தகத்தில் இயற்கை மொழி செயலாக்கம் முக்கியமானதாகிவிட்டது. செய்தி அறிவிப்புகள், சமூக ஊடக உணர்வுகள் மற்றும் ஒழுங்குமுறை ரகசியங்கள் சங்கிலி சமிக்ஞைகள் தோன்றுவதற்கு முன்பே சந்தைகளை நகர்த்துகின்றன. இந்த வழிகாட்டி கட்டமைக்கப்படாத உரையிலிருந்து செயல்படக்கூடிய நுண்ணறிவை பிரித்தெடுப்பதற்கு உங்களை வழிநடத்துகிறது — Smart Money API இல் உணர்வு மதிப்பெண் அளிக்கும் அதே நுட்பங்கள்.
முக்கிய நுண்ணறிவு: உணர்வு மட்டும் குறுகிய கால நகர்வுகளில் 48% மட்டுமே கணிக்கிறது. ஆனால் திமிங்கல ஒருமித்த மற்றும் நிதியளிப்பு விகிதங்களுடன் இணைக்கப்படும்போது? உணர்வு உறுதிப்படுத்தப்பட்ட வர்த்தகங்கள் 61% துல்லியத்தை அடைகின்றன. அதுதான் பல-முறை சமிக்ஞைகளின் சக்தி.
உணர்வு பகுப்பாய்வு அடிப்படைகள்
அகராதி அடிப்படையிலான மற்றும் இயந்திர கற்றல் அணுகுமுறைகள்
அகராதி அடிப்படையிலான: நேர்மறை/எதிர்மறை சொற்களின் அகராதி (VADER, TextBlob). வேகமானது, விளக்கக்கூடியது, ஆனால் கிண்டல் மற்றும் சூழலுடன் போராடுகிறது.
from nltk.sentiment import SentimentIntensityAnalyzer
analyzer = SentimentIntensityAnalyzer()
texts = [
"Bitcoin surged 15% on bullish institutional adoption news",
"Crash incoming — expect 40% dump based on fundrat neg",
"Mixed signals but whales are accumulating ETH"
]
for text in texts:
scores = analyzer.polarity_scores(text)
print(f"{text[:40]}... → {scores['compound']:.2f}")
வெளியீடு: கூட்டு மதிப்பெண்கள் -1 (மிகவும் எதிர்மறை) முதல் +1 (மிகவும் நேர்மறை) வரை இருக்கும். 0.65 மதிப்பெண் நேர்மறை உணர்வைக் குறிக்கிறது, -0.42 எதிர்மறை உணர்வைக் குறிக்கிறது.
ML-based: வகைப்படுத்திகளை பயிற்றுவிக்கவும் (Naive Bayes, SVM) அல்லது முன் பயிற்சி பெற்ற மாற்றிகள் (BERT, RoBERTa) பயன்படுத்தவும். மிகவும் துல்லியமானது ஆனால் லேபிளிடப்பட்ட தரவு தேவை.
கிரிப்டோகரன்சி செய்தி செயலாக்கம்
நிகழ்நேர செய்தி ஒருங்கிணைப்பு
முக்கிய ஆதாரங்களிலிருந்து தலைப்புகளை இழுக்கவும் (CoinTelegraph, BlockBeats, Cointelegraph RSS, Reddit):
import feedparser
from datetime import datetime, timedelta
feeds = [
"https://cointelegraph.com/feed",
"https://www.coindesk.com/arc/outboundfeeds/rss/",
]
articles = []
for feed_url in feeds:
feed = feedparser.parse(feed_url)
for entry in feed.entries[:10]:
articles.append({
"title": entry.title,
"published": entry.published_parsed,
"summary": entry.summary,
})
கிரிப்டோ சொத்துக்களுக்கான பெயரிடப்பட்ட நிறுவன அங்கீகாரம் (NER)
எந்த டோக்கன்கள்/பரிமாற்றங்கள் குறிப்பிடப்படுகின்றன என்பதை பிரித்தெடுக்கவும்:
import spacy
nlp = spacy.load("en_core_web_sm")
crypto_entities = {"Bitcoin", "BTC", "Ethereum", "ETH", "Solana", "SOL"}
text = "Bitcoin surged 12% as Ethereum whales accumulated large amounts"
doc = nlp(text)
for token in doc:
if token.text in crypto_entities:
print(f"{token.text} found")
சமூக உணர்வு சுரங்கம்
Twitter/X API ஒருங்கிணைப்பு
குறிப்பிட்ட சொத்துக்களுக்கான குறிப்புகள், உணர்வு மற்றும் ஈடுபாட்டை கண்காணிக்கவும்:
import tweepy
from transformers import pipeline
sentiment_pipeline = pipeline("sentiment-analysis", model="distilbert-base-uncased-finetuned-sst-2-english")
client = tweepy.Client(bearer_token=TWITTER_BEARER)
query = "Bitcoin -is:retweet lang:en"
tweets = client.search_recent_tweets(query=query, max_results=100)
sentiments = []
for tweet in tweets.data:
result = sentiment_pipeline(tweet.text)[0]
sentiments.append({
"text": tweet.text,
"label": result["label"],
"score": result["score"]
})
avg_sentiment = sum(s["score"] for s in sentiments) / len(sentiments)
print(f"Bitcoin sentiment: {avg_sentiment:.2f}")
Reddit Community Sentiment
Monitor r/cryptocurrency, r/btc, r/ethtrader for retail sentiment shifts:
import praw
reddit = praw.Reddit(client_id=ID, client_secret=SECRET, user_agent=AGENT)
subreddit = reddit.subreddit("cryptocurrency")
for post in subreddit.hot(limit=50):
if post.created_utc > (time.time() - 86400):
sentiment = sentiment_pipeline(post.title)[0]
signal_strength = post.score * sentiment["score"]
Building a Production Sentiment Engine
Transformer-Based Sentiment (BERT)
Pre-trained BERT models are far more accurate than lexicon-based approaches:
from transformers import AutoTokenizer, AutoModelForSequenceClassification
import torch
model_name = "ProsusAI/finbert"
tokenizer = AutoTokenizer.from_pretrained(model_name)
model = AutoModelForSequenceClassification.from_pretrained(model_name)
def get_finbert_sentiment(text):
inputs = tokenizer(text, return_tensors="pt")
with torch.no_grad():
outputs = model(**inputs)
logits = outputs.logits
probabilities = torch.softmax(logits, dim=1)
sentiment_idx = torch.argmax(probabilities)
confidence = probabilities[0, sentiment_idx].item()
return {"sentiment": ["negative", "neutral", "positive"][sentiment_idx], "confidence": confidence}
Real-Time Sentiment Aggregation
Combine multiple signals into a daily sentiment score:
def compute_daily_sentiment(symbol):
news_articles = fetch_recent_news(symbol)
news_sentiments = [get_finbert_sentiment(a["title"]) for a in news_articles]
news_score = np.mean([s["confidence"] for s in news_sentiments])
tweets = fetch_tweets_last_6h(symbol)
twitter_sentiments = [get_finbert_sentiment(t) for t in tweets]
twitter_score = np.mean([s["confidence"] for s in twitter_sentiments])
reddit_posts = fetch_reddit_hot(symbol)
reddit_sentiments = [get_finbert_sentiment(p) for p in reddit_posts]
reddit_score = np.mean([s["confidence"] for s in reddit_sentiments])
composite = (news_score * 0.4 + twitter_score * 0.35 + reddit_score * 0.25)
return composite
Integrating with Smart Money API
Add sentiment as a feature to your confirmation system:
def confirm_with_sentiment(symbol, direction):
response = requests.get(
f"https://api.smartmoneyapi.com/v1/confirm?symbol={symbol}&direction={direction}",
headers={"X-API-Key": API_KEY}
)
smart_money = response.json()
sentiment_score = compute_daily_sentiment(symbol)
if (direction == "long" and sentiment_score > 0.55):
boost = 0.05
elif (direction == "short" and sentiment_score < 0.45):
boost = 0.05
else:
boost = 0
final_composite = min(smart_money["composite"] + boost, 1.0)
return {"composite": final_composite, "sentiment_boost": boost}
மேம்பட்ட NLP நுட்பங்கள்
அம்ச-அடிப்படையிலான உணர்வுநிலை பகுப்பாய்வு
ஒட்டுமொத்த உணர்வுநிலைக்கு பதிலாக, குறிப்பிட்ட அம்சங்கள் பற்றிய உணர்வுநிலையைப் பிரித்தெடுக்கவும்: "Bitcoin தொழில்நுட்பம் நன்றாக உள்ளது, ஆனால் ஏற்றுக்கொள்ளுதல் மெதுவாக உள்ளது." அம்ச-நிலை கருத்துகளைப் பிரித்தெடுக்கவும்.
காரணத்தன்மை கண்டறிதல்
காரண கூற்றுகளை அடையாளம் காணவும்: "XYZ காரணமாக, விலை நகரும்." அடிப்படை செய்திகளிலிருந்து ஹைப்பை வேறுபடுத்தும் வகைப்படுத்தியைப் பயிற்றுவிக்கவும்.
உணர்வுநிலை நேரத் தொடர்
காலப்போக்கில் உணர்வுநிலை மாற்றத்தைக் கண்காணிக்கவும். +0.65 இலிருந்து -0.45 க்கு திடீர் மாற்றம் கவனிக்கத்தக்க மாற்றத்தின் சமிக்ஞையாகும்.
உணர்வுநிலையை ஸ்மார்ட் மனி சமிக்ஞைகளுடன் இணைக்கவும்
ஸ்மார்ட் மனி API திணிக்கப்பட்ட தகவல்களுக்கு எதிராக சரிபார்க்கப்பட்ட நம்பிக்கை மதிப்பெண்களை வழங்குகிறது. உங்கள் விளிம்பை உறுதிப்படுத்தவும் மற்றும் வெற்றி விகிதங்களை 4-6% அதிகரிக்க உணர்வுநிலை பகுப்பாய்வைச் சேர்க்கவும்.
இலவசமாகத் தொடங்கவும் →