NLP untuk Analisis Pasar — Memproses Berita dan Sentimen Sosial
Pemrosesan bahasa alami telah menjadi krusial dalam trading crypto. Pengumuman berita, sentimen media sosial, dan bisikan regulasi menggerakkan pasar sebelum sinyal on-chain muncul. Panduan ini akan memandu Anda mengekstrak intelijen yang dapat ditindaklanjuti dari teks tidak terstruktur — teknik yang sama yang digunakan dalam penilaian sentimen di Smart Money API.
Wawasan utama: Sentimen saja hanya memprediksi 48% pergerakan jangka pendek. Tapi ketika digabungkan dengan konsensus paus dan tingkat pendanaan? Trading yang dikonfirmasi sentimen mencapai akurasi 61%. Itulah kekuatan sinyal multi-modal.
Dasar-Dasar Analisis Sentimen
Pendekatan Berbasis Leksikon vs Pembelajaran Mesin
Berbasis leksikon: Kamus kata-kata positif/negatif (VADER, TextBlob). Cepat, mudah dipahami, tetapi kesulitan dengan sarkasme dan konteks.
from nltk.sentiment import SentimentIntensityAnalyzer
analyzer = SentimentIntensityAnalyzer()
texts = [
"Bitcoin melonjak 15% karena berita adopsi institusional yang bullish",
"Crash akan datang — perkirakan penurunan 40% berdasarkan fundrat neg",
"Sinyal campuran tetapi paus sedang mengakumulasi ETH"
]
for text in texts:
scores = analyzer.polarity_scores(text)
print(f"{text[:40]}... → {scores['compound']:.2f}")
Output: Skor compound berkisar dari -1 (paling negatif) hingga +1 (paling positif). Skor 0,65 menunjukkan sentimen positif, -0,42 menunjukkan sentimen negatif.
Berbasis ML: Latih pengklasifikasi (Naive Bayes, SVM) atau gunakan transformer yang sudah dilatih sebelumnya (BERT, RoBERTa). Lebih akurat tetapi membutuhkan data berlabel.
Memproses Berita Cryptocurrency
Agregasi Berita Real-Time
Ambil headline dari sumber utama (CoinTelegraph, BlockBeats, Cointelegraph RSS, Reddit):
import feedparser
from datetime import datetime, timedelta
feeds = [
"https://cointelegraph.com/feed",
"https://www.coindesk.com/arc/outboundfeeds/rss/",
]
articles = []
for feed_url in feeds:
feed = feedparser.parse(feed_url)
for entry in feed.entries[:10]:
articles.append({
"title": entry.title,
"published": entry.published_parsed,
"summary": entry.summary,
})
Pengenalan Entitas Bernama (NER) untuk Aset Crypto
Ekstrak token/bursa yang disebutkan:
import spacy
nlp = spacy.load("en_core_web_sm")
crypto_entities = {"Bitcoin", "BTC", "Ethereum", "ETH", "Solana", "SOL"}
text = "Bitcoin melonjak 12% karena paus Ethereum mengakumulasi dalam jumlah besar"
doc = nlp(text)
for token in doc:
if token.text in crypto_entities:
print(f"{token.text} ditemukan")
Menambang Sentimen Sosial
Integrasi Twitter/X API
Lacak penyebutan, sentimen, dan keterlibatan untuk aset tertentu:
import tweepy
from transformers import pipeline
sentiment_pipeline = pipeline("sentiment-analysis", model="distilbert-base-uncased-finetuned-sst-2-english")
client = tweepy.Client(bearer_token=TWITTER_BEARER)
query = "Bitcoin -is:retweet lang:en"
tweets = client.search_recent_tweets(query=query, max_results=100)
sentiments = []
for tweet in tweets.data:
result = sentiment_pipeline(tweet.text)[0]
sentiments.append({
"text": tweet.text,
"label": result["label"],
"score": result["score"]
})
avg_sentiment = sum(s["score"] untuk s dalam sentiments) / len(sentiments)
print(f"Sentimen Bitcoin: {avg_sentiment:.2f}")
Sentimen Komunitas Reddit
Pantau r/cryptocurrency, r/btc, r/ethtrader untuk perubahan sentimen retail:
import praw
reddit = praw.Reddit(client_id=ID, client_secret=SECRET, user_agent=AGENT)
subreddit = reddit.subreddit("cryptocurrency")
untuk posting dalam subreddit.hot(limit=50):
jika posting.created_utc > (time.time() - 86400):
sentiment = sentiment_pipeline(post.title)[0]
signal_strength = post.score * sentiment["score"]
Membangun Mesin Sentimen Produksi
Sentimen Berbasis Transformer (BERT)
Model BERT yang sudah dilatih jauh lebih akurat daripada pendekatan berbasis leksikon:
from transformers import AutoTokenizer, AutoModelForSequenceClassification
import torch
model_name = "ProsusAI/finbert"
tokenizer = AutoTokenizer.from_pretrained(model_name)
model = AutoModelForSequenceClassification.from_pretrained(model_name)
def get_finbert_sentiment(text):
inputs = tokenizer(text, return_tensors="pt")
dengan torch.no_grad():
outputs = model(**inputs)
logits = outputs.logits
probabilities = torch.softmax(logits, dim=1)
sentiment_idx = torch.argmax(probabilities)
confidence = probabilities[0, sentiment_idx].item()
return {"sentiment": ["negative", "neutral", "positive"][sentiment_idx], "confidence": confidence}
Agregasi Sentimen Real-Time
Gabungkan beberapa sinyal menjadi skor sentimen harian:
def compute_daily_sentiment(symbol):
news_articles = fetch_recent_news(symbol)
news_sentiments = [get_finbert_sentiment(a["title"]) untuk a dalam news_articles]
news_score = np.mean([s["confidence"] untuk s dalam news_sentiments])
tweets = fetch_tweets_last_6h(symbol)
twitter_sentiments = [get_finbert_sentiment(t) untuk t dalam tweets]
twitter_score = np.mean([s["confidence"] untuk s dalam twitter_sentiments])
reddit_posts = fetch_reddit_hot(symbol)
reddit_sentiments = [get_finbert_sentiment(p) untuk p dalam reddit_posts]
reddit_score = np.mean([s["confidence"] untuk s dalam reddit_sentiments])
composite = (news_score * 0.4 + twitter_score * 0.35 + reddit_score * 0.25)
return composite
Integrasi dengan Smart Money API
Tambahkan sentimen sebagai fitur ke sistem konfirmasi Anda:
def confirm_with_sentiment(symbol, direction):
response = requests.get(
f"https://api.smartmoneyapi.com/v1/confirm?symbol={symbol}&direction={direction}",
headers={"X-API-Key": API_KEY}
)
smart_money = response.json()
sentiment_score = compute_daily_sentiment(symbol)
if (direction == "long" and sentiment_score > 0.55):
boost = 0.05
elif (direction == "short" and sentiment_score < 0.45):
boost = 0.05
else:
boost = 0
final_composite = min(smart_money["composite"] + boost, 1.0)
return {"composite": final_composite, "sentiment_boost": boost}
Teknik NLP Lanjutan
Analisis Sentimen Berbasis Aspek
Alih-alih sentimen keseluruhan, ekstrak sentimen tentang aspek spesifik: "Teknologi Bitcoin hebat, tetapi adopsi lambat." Ekstrak opini tingkat fitur.
Deteksi Kausalitas
Identifikasi klaim kausal: "Karena XYZ, harga akan bergerak." Latih pengklasifikasi untuk membedakan hype dari berita fundamental.
Deret Waktu Sentimen
Lacak pergeseran sentimen dari waktu ke waktu. Perubahan tiba-tiba dari +0,65 ke -0,45 adalah sinyal pembalikan yang patut diperhatikan.
Gabungkan sentimen dengan sinyal smart money
Smart Money API menyediakan skor kepercayaan yang divalidasi terhadap konsensus paus dan metrik on-chain. Tambahkan analisis sentimen untuk mengonfirmasi keunggulan Anda dan tingkatkan tingkat kemenangan sebesar 4-6%.
Mulai Gratis →