NLPを活用した市場分析 — ニュースとソーシャルセンチメントの処理

自然言語処理は暗号通貨取引において不可欠な技術となりました。ニュース発表、ソーシャルメディアのセンチメント、規制に関する噂は、オンチェーンシグナルが現れる前に市場を動かします。このガイドでは、非構造化テキストから実用的な情報を抽出する方法を解説します。Smart Money APIのセンチメントスコアリングにも同じ技術が使われています。

センチメント分析の基礎

辞書ベース vs 機械学習アプローチ

辞書ベース: ポジティブ/ネガティブな単語の辞書（VADER、TextBlob）。高速で解釈可能ですが、皮肉や文脈に弱い。

Python — 辞書ベースのセンチメント
from nltk.sentiment import SentimentIntensityAnalyzer
analyzer = SentimentIntensityAnalyzer()
texts = [
"Bitcoinが15%急騰、強気の機関投資家採用ニュースを受けて",
"暴落間近 — 資金調達率のネガティブさから40%下落を予想",
"混在したシグナルだが、クジラがETHを蓄積中"
]
for text in texts:
scores = analyzer.polarity_scores(text)
print(f"{text[:40]}... → {scores['compound']:.2f}")

出力: コンパウンドスコアは-1（最もネガティブ）から+1（最もポジティブ）の範囲です。0.65はポジティブなセンチメント、-0.42はネガティブなセンチメントを示します。

MLベース: 分類器（Naive Bayes、SVM）を訓練するか、事前訓練済みトランスフォーマー（BERT、RoBERTa）を使用します。より正確ですが、ラベル付きデータが必要です。

暗号通貨ニュースの処理

リアルタイムニュース集約

主要ソース（CoinTelegraph、BlockBeats、Cointelegraph RSS、Reddit）から見出しを取得:

Python — ニュースパイプライン
import feedparser
from datetime import datetime, timedelta
# 暗号通貨ニュースのRSSフィード
feeds = [
"https://cointelegraph.com/feed",
"https://www.coindesk.com/arc/outboundfeeds/rss/",
]
articles = []
for feed_url in feeds:
feed = feedparser.parse(feed_url)
for entry in feed.entries[:10]:
articles.append({
"title": entry.title,
"published": entry.published_parsed,
"summary": entry.summary,
})

暗号資産の固有表現抽出（NER）

どのトークン/取引所が言及されているかを抽出:

Python — 暗号通貨のNER
import spacy
nlp = spacy.load("en_core_web_sm")
# 暗号通貨用のカスタムエンティティパターン
crypto_entities = {"Bitcoin", "BTC", "Ethereum", "ETH", "Solana", "SOL"}
text = "Bitcoinが12%急騰、Ethereumのクジラが大量に蓄積"
doc = nlp(text)
for token in doc:
if token.text in crypto_entities:
print(f"{token.text}を発見")

Twitter/X API統合

特定の資産に関する言及、センチメント、エンゲージメントを追跡:

Python — Twitterセンチメントストリーム
import tweepy
from transformers import pipeline
sentiment_pipeline = pipeline("sentiment-analysis", model="distilbert-base-uncased-finetuned-sst-2-english")
# Twitter API v2での認証
client = tweepy.Client(bearer_token=TWITTER_BEARER)
# 過去1時間のBitcoinに関するツイートを検索
query = "Bitcoin -is:retweet lang:en"
tweets = client.search_recent_tweets(query=query, max_results=100)
sentiments = []
for tweet in tweets.data:
result = sentiment_pipeline(tweet.text)[0]
sentiments.append({
"text": tweet.text,
"label": result["label"],
"score": result["score"]
})
avg_sentiment = sum(s["score"] for s in sentiments) / len(sentiments)
print(f"Bitcoin sentiment: {avg_sentiment:.2f}")

Redditコミュニティのセンチメント

r/cryptocurrency、r/btc、r/ethtraderを監視し、小口投資家のセンチメント変化を追跡:

Python — Redditセンチメント
import praw
reddit = praw.Reddit(client_id=ID, client_secret=SECRET, user_agent=AGENT)
subreddit = reddit.subreddit("cryptocurrency")
# 過去24時間のホット投稿を取得
for post in subreddit.hot(limit=50):
if post.created_utc > (time.time() - 86400):
sentiment = sentiment_pipeline(post.title)[0]
# 高アップボート + ポジティブセンチメント = 強い小口投資家の強気サイン
signal_strength = post.score * sentiment["score"]

本番用センチメントエンジンの構築

トランスフォーマーベースのセンチメント(BERT)

事前学習済みBERTモデルは、辞書ベースのアプローチよりもはるかに正確:

Python — BERTセンチメントパイプライン
from transformers import AutoTokenizer, AutoModelForSequenceClassification
import torch
model_name = "ProsusAI/finbert" # FinBERTは金融ニュースで学習済み
tokenizer = AutoTokenizer.from_pretrained(model_name)
model = AutoModelForSequenceClassification.from_pretrained(model_name)
def get_finbert_sentiment(text):
inputs = tokenizer(text, return_tensors="pt")
with torch.no_grad():
outputs = model(**inputs)
logits = outputs.logits
probabilities = torch.softmax(logits, dim=1)
# 返り値: negative (0), neutral (1), positive (2)
sentiment_idx = torch.argmax(probabilities)
confidence = probabilities[0, sentiment_idx].item()
return {"sentiment": ["negative", "neutral", "positive"][sentiment_idx], "confidence": confidence}

リアルタイムセンチメント集計

複数のシグナルを組み合わせて日次センチメントスコアを算出:

Python — 複合センチメント
def compute_daily_sentiment(symbol):
# 1. ニュースセンチメント (40% 重み)
news_articles = fetch_recent_news(symbol)
news_sentiments = [get_finbert_sentiment(a["title"]) for a in news_articles]
news_score = np.mean([s["confidence"] for s in news_sentiments])
# 2. Twitterセンチメント (35% 重み)
tweets = fetch_tweets_last_6h(symbol)
twitter_sentiments = [get_finbert_sentiment(t) for t in tweets]
twitter_score = np.mean([s["confidence"] for s in twitter_sentiments])
# 3. Redditセンチメント (25% 重み)
reddit_posts = fetch_reddit_hot(symbol)
reddit_sentiments = [get_finbert_sentiment(p) for p in reddit_posts]
reddit_score = np.mean([s["confidence"] for s in reddit_sentiments])
# 複合スコア
composite = (news_score * 0.4 + twitter_score * 0.35 + reddit_score * 0.25)
return composite

Smart Money APIとの統合

確認システムの特徴量としてセンチメントを追加:

Python — センチメント + Smart Money
def confirm_with_sentiment(symbol, direction):
# Smart Moneyの確認を取得
response = requests.get(
f"https://api.smartmoneyapi.com/v1/confirm?symbol={symbol}&direction={direction}",
headers={"X-API-Key": API_KEY}
)
smart_money = response.json()
# センチメントを取得
sentiment_score = compute_daily_sentiment(symbol)
# センチメントが方向と一致する場合、信頼度を向上
if (direction == "long" and sentiment_score > 0.55):
boost = 0.05  # 信頼度に+5%
elif (direction == "short" and sentiment_score < 0.45):
boost = 0.05
else:
boost = 0  # センチメントが相反する場合
final_composite = min(smart_money["composite"] + boost, 1.0)
return {"composite": final_composite, "sentiment_boost": boost}

高度なNLP技術

アスペクトベース感情分析

全体的なセンチメントではなく、特定の側面に関するセンチメントを抽出：「ビットコインの技術は素晴らしいが、採用は遅れている」。特徴レベルの意見を抽出。

因果関係検出

因果関係のある主張を特定：「XYZが原因で価格が動く」。根拠のあるニュースと誇大宣伝を区別する分類器を訓練。

センチメント時系列

時間経過に伴うセンチメントの変化を追跡。+0.65から-0.45への急激な反転は注目すべき反転シグナル。