NLP pro analýzu trhu — Zpracování zpráv a sociálního sentimentu
Zpracování přirozeného jazyka se stalo klíčovým v obchodování s kryptoměnami. Zprávy, sentiment na sociálních sítích a regulátorské šepoty hýbou trhy ještě předtím, než se objeví on-chain signály. Tato příručka vás provede extrakcí využitelných informací z nestrukturovaného textu — stejné techniky, které pohání hodnocení sentimentu v Smart Money API.
Klíčový poznatek: Samotný sentiment předpovídá pouze 48 % krátkodobých pohybů. Ale když se kombinuje s konsenzem velryb a funding rates? Obchody potvrzené sentimentem dosahují 61% přesnosti. To je síla multimodálních signálů.
Základy analýzy sentimentu
Lexikonové vs. strojové učení přístupy
Lexikonové: Slovník pozitivních/negativních slov (VADER, TextBlob). Rychlé, srozumitelné, ale bojuje se sarkasmem a kontextem.
from nltk.sentiment import SentimentIntensityAnalyzer
analyzer = SentimentIntensityAnalyzer()
texts = [
"Bitcoin vzrostl o 15 % díky optimistickým zprávám o institucionální adopci",
"Blíží se pád — očekávejte 40% pokles na základě negativního fundratu",
"Smíšené signály, ale velryby akumulují ETH"
]
for text in texts:
scores = analyzer.polarity_scores(text)
print(f"{text[:40]}... → {scores['compound']:.2f}")
Výstup: Compound skóre se pohybuje od -1 (nejvíce negativní) do +1 (nejvíce pozitivní). Skóre 0,65 značí pozitivní sentiment, -0,42 značí negativní.
ML-based: Trénujte klasifikátory (Naive Bayes, SVM) nebo použijte předtrénované transformátory (BERT, RoBERTa). Přesnější, ale vyžaduje označená data.
Zpracování kryptoměnových zpráv
Sběr zpráv v reálném čase
Stahujte titulky z hlavních zdrojů (CoinTelegraph, BlockBeats, Cointelegraph RSS, Reddit):
import feedparser
from datetime import datetime, timedelta
feeds = [
"https://cointelegraph.com/feed",
"https://www.coindesk.com/arc/outboundfeeds/rss/",
]
articles = []
for feed_url in feeds:
feed = feedparser.parse(feed_url)
for entry in feed.entries[:10]:
articles.append({
"title": entry.title,
"published": entry.published_parsed,
"summary": entry.summary,
})
Rozpoznávání pojmenovaných entit (NER) pro kryptoměny
Extrahujte, které tokeny/burzy jsou zmíněny:
import spacy
nlp = spacy.load("en_core_web_sm")
crypto_entities = {"Bitcoin", "BTC", "Ethereum", "ETH", "Solana", "SOL"}
text = "Bitcoin vzrostl o 12 %, zatímco velryby Ethereum akumulovaly velká množství"
doc = nlp(text)
for token in doc:
if token.text in crypto_entities:
print(f"{token.text} nalezen")
Těžba sociálního sentimentu
Integrace Twitter/X API
Sledujte zmínky, sentiment a interakce pro konkrétní aktiva:
import tweepy
from transformers import pipeline
sentiment_pipeline = pipeline("sentiment-analysis", model="distilbert-base-uncased-finetuned-sst-2-english")
client = tweepy.Client(bearer_token=TWITTER_BEARER)
query = "Bitcoin -is:retweet lang:en"
tweets = client.search_recent_tweets(query=query, max_results=100)
sentiments = []
for tweet in tweets.data:
result = sentiment_pipeline(tweet.text)[0]
sentiments.append({
"text": tweet.text,
"label": result["label"],
"score": result["score"]
})
avg_sentiment = sum(s["score"] for s in sentiments) / len(sentiments)
print(f"Bitcoin sentiment: {avg_sentiment:.2f}")
Reddit Community Sentiment
Sledujte r/cryptocurrency, r/btc, r/ethtrader pro změny sentimentu retailových investorů:
import praw
reddit = praw.Reddit(client_id=ID, client_secret=SECRET, user_agent=AGENT)
subreddit = reddit.subreddit("cryptocurrency")
for post in subreddit.hot(limit=50):
if post.created_utc > (time.time() - 86400):
sentiment = sentiment_pipeline(post.title)[0]
signal_strength = post.score * sentiment["score"]
Tvorba produkčního sentimentového engine
Transformer-Based Sentiment (BERT)
Předtrénované BERT modely jsou mnohem přesnější než lexikonové přístupy:
from transformers import AutoTokenizer, AutoModelForSequenceClassification
import torch
model_name = "ProsusAI/finbert"
tokenizer = AutoTokenizer.from_pretrained(model_name)
model = AutoModelForSequenceClassification.from_pretrained(model_name)
def get_finbert_sentiment(text):
inputs = tokenizer(text, return_tensors="pt")
with torch.no_grad():
outputs = model(**inputs)
logits = outputs.logits
probabilities = torch.softmax(logits, dim=1)
sentiment_idx = torch.argmax(probabilities)
confidence = probabilities[0, sentiment_idx].item()
return {"sentiment": ["negative", "neutral", "positive"][sentiment_idx], "confidence": confidence}
Agregace sentimentu v reálném čase
Kombinujte více signálů do denního skóre sentimentu:
def compute_daily_sentiment(symbol):
news_articles = fetch_recent_news(symbol)
news_sentiments = [get_finbert_sentiment(a["title"]) for a in news_articles]
news_score = np.mean([s["confidence"] for s in news_sentiments])
tweets = fetch_tweets_last_6h(symbol)
twitter_sentiments = [get_finbert_sentiment(t) for t in tweets]
twitter_score = np.mean([s["confidence"] for s in twitter_sentiments])
reddit_posts = fetch_reddit_hot(symbol)
reddit_sentiments = [get_finbert_sentiment(p) for p in reddit_posts]
reddit_score = np.mean([s["confidence"] for s in reddit_sentiments])
composite = (news_score * 0.4 + twitter_score * 0.35 + reddit_score * 0.25)
return composite
Integrace se Smart Money API
Přidejte sentiment jako funkci do vašeho potvrzovacího systému:
def confirm_with_sentiment(symbol, direction):
response = requests.get(
f"https://api.smartmoneyapi.com/v1/confirm?symbol={symbol}&direction={direction}",
headers={"X-API-Key": API_KEY}
)
smart_money = response.json()
sentiment_score = compute_daily_sentiment(symbol)
if (direction == "long" and sentiment_score > 0.55):
boost = 0.05
elif (direction == "short" and sentiment_score < 0.45):
boost = 0.05
else:
boost = 0
final_composite = min(smart_money["composite"] + boost, 1.0)
return {"composite": final_composite, "sentiment_boost": boost}
Pokročilé techniky NLP
Analýza sentimentu na základě aspektů
Místo celkového sentimentu extrahujte sentiment k specifickým aspektům: "Technologie Bitcoinu je skvělá, ale adopce je pomalá." Extrahujte názory na úrovni funkcí.
Detekce kauzality
Identifikujte kauzální tvrzení: "Kvůli XYZ se cena pohne." Natrénujte klasifikátor, který rozliší hype od fundamentálních zpráv.
Časová řada sentimentu
Sledujte změny sentimentu v čase. Náhlý obrat z +0,65 na -0,45 je signálem obratu, který stojí za pozornost.
Kombinujte sentiment se signály Smart Money
Smart Money API poskytuje skóre důvěry ověřené proti konsenzu velryb a on-chain metrikám. Přidejte analýzu sentimentu, abyste potvrdili svou výhodu a zvýšili úspěšnost o 4-6%.
Začněte zdarma →