NLP voor Marktanalyse — Verwerking van Nieuws en Sociaal Sentiment
Natuurlijke taalverwerking is cruciaal geworden in cryptohandel. Nieuwsberichten, sentiment op sociale media en geruchten over regelgeving bewegen markten voordat on-chain signalen verschijnen. Deze gids leidt je door het extraheren van actiegerichte inzichten uit ongestructureerde tekst — dezelfde technieken die sentiment scoring in Smart Money API mogelijk maken.
Belangrijk inzicht: Sentiment alleen voorspelt slechts 48% van de kortetermijnbewegingen. Maar wanneer gecombineerd met walvisconsensus en funding rates? Door sentiment bevestigde transacties behalen een nauwkeurigheid van 61%. Dat is de kracht van multimodale signalen.
Grondbeginselen van Sentimentanalyse
Lexicon-Based vs Machine Learning Benaderingen
Lexicon-based: Woordenboek van positieve/negatieve woorden (VADER, TextBlob). Snel, interpreteerbaar, maar worstelt met sarcasme en context.
from nltk.sentiment import SentimentIntensityAnalyzer
analyzer = SentimentIntensityAnalyzer()
texts = [
"Bitcoin steeg 15% op bullish institutionele adoptienieuws",
"Crash komt eraan — verwacht een dump van 40% gebaseerd op negatieve fundrat",
"Gemengde signalen maar walvissen accumuleren ETH"
]
for text in texts:
scores = analyzer.polarity_scores(text)
print(f"{text[:40]}... → {scores['compound']:.2f}")
Output: Compound scores variëren van -1 (meest negatief) tot +1 (meest positief). Een score van 0.65 duidt op positief sentiment, -0.42 op negatief.
ML-based: Train classifiers (Naive Bayes, SVM) of gebruik vooraf getrainde transformers (BERT, RoBERTa). Nauwkeuriger maar vereist gelabelde data.
Verwerking van Cryptocurrency Nieuws
Real-Time Nieuwsaggregatie
Haal headlines op van grote bronnen (CoinTelegraph, BlockBeats, Cointelegraph RSS, Reddit):
import feedparser
from datetime import datetime, timedelta
feeds = [
"https://cointelegraph.com/feed",
"https://www.coindesk.com/arc/outboundfeeds/rss/",
]
articles = []
for feed_url in feeds:
feed = feedparser.parse(feed_url)
for entry in feed.entries[:10]:
articles.append({
"title": entry.title,
"published": entry.published_parsed,
"summary": entry.summary,
})
Named Entity Recognition (NER) voor Crypto Assets
Extraheer welke tokens/exchanges worden genoemd:
import spacy
nlp = spacy.load("en_core_web_sm")
crypto_entities = {"Bitcoin", "BTC", "Ethereum", "ETH", "Solana", "SOL"}
text = "Bitcoin steeg 12% terwijl Ethereum walvissen grote hoeveelheden accumuleerden"
doc = nlp(text)
for token in doc:
if token.text in crypto_entities:
print(f"{token.text} gevonden")
Mijnbouw van Sociaal Sentiment
Twitter/X API Integratie
Volg vermeldingen, sentiment en betrokkenheid voor specifieke assets:
import tweepy
from transformers import pipeline
sentiment_pipeline = pipeline("sentiment-analysis", model="distilbert-base-uncased-finetuned-sst-2-english")
client = tweepy.Client(bearer_token=TWITTER_BEARER)
query = "Bitcoin -is:retweet lang:en"
tweets = client.search_recent_tweets(query=query, max_results=100)
sentiments = []
for tweet in tweets.data:
resultaat = sentiment_pipeline(tweet.text)[0]
sentiments.append({
"text": tweet.text,
"label": resultaat["label"],
"score": resultaat["score"]
})
gemiddeld_sentiment = sum(s["score"] voor s in sentiments) / len(sentiments)
print(f"Bitcoin sentiment: {avg_sentiment:.2f}")
Reddit Community Sentiment
Monitor r/cryptocurrency, r/btc, r/ethtrader voor verschuivingen in retail sentiment:
import praw
reddit = praw.Reddit(client_id=ID, client_secret=SECRET, user_agent=AGENT)
subreddit = reddit.subreddit("cryptocurrency")
voor post in subreddit.hot(limit=50):
als post.created_utc > (time.time() - 86400):
sentiment = sentiment_pipeline(post.title)[0]
signaalsterkte = post.score * sentiment["score"]
Bouwen van een Productie Sentiment Engine
Transformer-Based Sentiment (BERT)
Voorgetrainde BERT-modellen zijn veel nauwkeuriger dan lexicon-gebaseerde benaderingen:
from transformers import AutoTokenizer, AutoModelForSequenceClassification
import torch
model_naam = "ProsusAI/finbert"
tokenizer = AutoTokenizer.from_pretrained(model_naam)
model = AutoModelForSequenceClassification.from_pretrained(model_naam)
def get_finbert_sentiment(text):
inputs = tokenizer(text, return_tensors="pt")
met torch.no_grad():
outputs = model(**inputs)
logits = outputs.logits
kansen = torch.softmax(logits, dim=1)
sentiment_idx = torch.argmax(kansen)
betrouwbaarheid = kansen[0, sentiment_idx].item()
return {"sentiment": ["negatief", "neutraal", "positief"][sentiment_idx], "confidence": betrouwbaarheid}
Real-Time Sentiment Aggregatie
Combineer meerdere signalen tot een dagelijks sentimentcijfer:
def bereken_dagelijks_sentiment(symbol):
nieuws_artikelen = fetch_recent_news(symbol)
nieuws_sentiments = [get_finbert_sentiment(a["title"]) voor a in nieuws_artikelen]
nieuws_score = np.mean([s["confidence"] voor s in nieuws_sentiments])
tweets = fetch_tweets_last_6h(symbol)
twitter_sentiments = [get_finbert_sentiment(t) voor t in tweets]
twitter_score = np.mean([s["confidence"] voor s in twitter_sentiments])
reddit_posts = fetch_reddit_hot(symbol)
reddit_sentiments = [get_finbert_sentiment(p) voor p in reddit_posts]
reddit_score = np.mean([s["confidence"] voor s in reddit_sentiments])
samengesteld = (nieuws_score * 0.4 + twitter_score * 0.35 + reddit_score * 0.25)
return samengesteld
Integratie met Smart Money API
Voeg sentiment toe als een functie aan je bevestigingssysteem:
def confirm_with_sentiment(symbol, direction):
response = requests.get(
f"https://api.smartmoneyapi.com/v1/confirm?symbol={symbol}&direction={direction}",
headers={"X-API-Key": API_KEY}
)
smart_money = response.json()
sentiment_score = compute_daily_sentiment(symbol)
if (direction == "long" and sentiment_score > 0.55):
boost = 0.05
elif (direction == "short" and sentiment_score < 0.45):
boost = 0.05
else:
boost = 0
final_composite = min(smart_money["composite"] + boost, 1.0)
return {"composite": final_composite, "sentiment_boost": boost}
Geavanceerde NLP-technieken
Aspect-gebaseerde sentimentanalyse
In plaats van algemeen sentiment, extraheer sentiment over specifieke aspecten: "Bitcoin-technologie is geweldig, maar adoptie is traag." Extraheer meningen op functieniveau.
Causaliteitsdetectie
Identificeer causale claims: "Vanwege XYZ zal de prijs bewegen." Train een classifier om hype van fundamenteel nieuws te onderscheiden.
Sentimenttijdreeks
Volg sentimentverloop in de tijd. Een plotselinge omslag van +0,65 naar -0,45 is een omkeersignaal dat het vermelden waard is.
Combineer sentiment met smart money-signalen
Smart Money API biedt vertrouwensscores die zijn gevalideerd tegen walvisconsensus en on-chain metrieken. Voeg sentimentanalyse toe om je voorsprong te bevestigen en winpercentages met 4-6% te verhogen.
Start Gratis →