Compare commits
2 Commits
bd59092674
...
bd27db49e7
| Author | SHA1 | Date | |
|---|---|---|---|
| bd27db49e7 | |||
| fa7eddf02f |
@@ -1,3 +1,3 @@
|
|||||||
#!/bin/sh
|
#!/bin/sh
|
||||||
|
|
||||||
grep possibly rstat.log | awk '{print $6 }' | tr -d : | tr -d \$ | sort -u | awk '{printf "%s\"%s\"", sep, $0; sep=", "} END {print ""}'
|
grep possibly rstat.log | grep -v 'YFPricesMissingError' | awk '{print $6 }' | tr -d : | tr -d \$ | sort -u | awk '{printf "%s\"%s\"", sep, $0; sep=", "} END {print ""}'
|
||||||
|
|||||||
@@ -374,3 +374,10 @@ def get_all_scanned_subreddits():
|
|||||||
results = conn.execute("SELECT DISTINCT name FROM subreddits ORDER BY name ASC;").fetchall()
|
results = conn.execute("SELECT DISTINCT name FROM subreddits ORDER BY name ASC;").fetchall()
|
||||||
conn.close()
|
conn.close()
|
||||||
return [row['name'] for row in results]
|
return [row['name'] for row in results]
|
||||||
|
|
||||||
|
def get_all_tickers():
|
||||||
|
"""Retrieves the ID and symbol of every ticker in the database."""
|
||||||
|
conn = get_db_connection()
|
||||||
|
results = conn.execute("SELECT id, symbol FROM tickers;").fetchall()
|
||||||
|
conn.close()
|
||||||
|
return results
|
||||||
46
rstat_tool/fetcher.py
Normal file
46
rstat_tool/fetcher.py
Normal file
@@ -0,0 +1,46 @@
|
|||||||
|
# rstat_tool/fetcher.py
|
||||||
|
# A dedicated, isolated script for fetching financial data.
|
||||||
|
|
||||||
|
import sys
|
||||||
|
import json
|
||||||
|
import yfinance as yf
|
||||||
|
import pandas as pd
|
||||||
|
import logging
|
||||||
|
|
||||||
|
# Suppress verbose yfinance logging in this isolated process
|
||||||
|
logging.getLogger("yfinance").setLevel(logging.CRITICAL)
|
||||||
|
|
||||||
|
def get_financial_data_isolated(ticker_symbol):
|
||||||
|
"""
|
||||||
|
Fetches market cap and the most recent closing price for a ticker.
|
||||||
|
This is the robust version of the function.
|
||||||
|
"""
|
||||||
|
market_cap = None
|
||||||
|
closing_price = None
|
||||||
|
try:
|
||||||
|
data = yf.download(
|
||||||
|
ticker_symbol, period="2d", progress=False, auto_adjust=False
|
||||||
|
)
|
||||||
|
if not data.empty:
|
||||||
|
last_close_raw = data['Close'].iloc[-1]
|
||||||
|
if pd.notna(last_close_raw):
|
||||||
|
closing_price = float(last_close_raw)
|
||||||
|
try:
|
||||||
|
market_cap = yf.Ticker(ticker_symbol).info.get('marketCap')
|
||||||
|
except Exception:
|
||||||
|
# This is a non-critical failure, we can proceed without market cap
|
||||||
|
pass
|
||||||
|
return {"market_cap": market_cap, "closing_price": closing_price}
|
||||||
|
except Exception:
|
||||||
|
# This is a critical failure, return None for both
|
||||||
|
return {"market_cap": None, "closing_price": None}
|
||||||
|
|
||||||
|
if __name__ == "__main__":
|
||||||
|
if len(sys.argv) < 2:
|
||||||
|
# This script requires a ticker symbol as an argument
|
||||||
|
sys.exit(1)
|
||||||
|
|
||||||
|
ticker_to_fetch = sys.argv[1]
|
||||||
|
result = get_financial_data_isolated(ticker_to_fetch)
|
||||||
|
# Print the result as a JSON string to standard output
|
||||||
|
print(json.dumps(result))
|
||||||
@@ -1,101 +1,115 @@
|
|||||||
# The initial unsorted set of words.
|
# The initial unsorted set of words.
|
||||||
# Note: In Python, a 'set' is inherently unordered, but we define it here for clarity.
|
# Note: In Python, a 'set' is inherently unordered, but we define it here for clarity.
|
||||||
COMMON_WORDS_BLACKLIST = {
|
COMMON_WORDS_BLACKLIST = {
|
||||||
"401K", "403B", "457B", "ABC", "ABOUT", "ABOVE", "ADAM", "ADR", "ADX", "AEDT",
|
"401K", "403B", "457B", "AAVE", "ABC", "ABOUT", "ABOVE", "ACAT", "ADAM", "ADHD",
|
||||||
"AEST", "AF", "AFAIK", "AFTER", "AH", "AI", "AINT", "ALD", "ALGOS", "ALIVE",
|
"ADR", "ADS", "ADX", "AEDT", "AEST", "AF", "AFAIK", "AFTER", "AGENT", "AH",
|
||||||
"ALL", "ALPHA", "ALSO", "AM", "AMA", "AMEX", "AMK", "AND", "ANY", "APES",
|
"AI", "AINT", "AK", "ALD", "ALGOS", "ALIVE", "ALL", "ALPHA", "ALSO", "AM",
|
||||||
"APL", "APPL", "APPLE", "APR", "AR", "ARE", "AREA", "ARH", "ARK", "AROUND",
|
"AMA", "AMEX", "AMK", "AMY", "AND", "ANSS", "ANY", "APES", "APL", "APPL",
|
||||||
"ASAP", "ASK", "ASS", "ASSET", "AST", "AT", "ATH", "ATL", "ATM", "AUD",
|
"APPLE", "APR", "APUS", "APY", "AR", "ARBK", "ARE", "AREA", "ARH", "ARK",
|
||||||
"AUM", "AV", "AVG", "AWS", "BABY", "BAG", "BAGS", "BALLS", "BANG", "BBB",
|
"AROUND", "ART", "ASAP", "ASEAN", "ASK", "ASS", "ASSET", "AST", "AT", "ATH",
|
||||||
"BBBY", "BE", "BEAR", "BEARS", "BECN", "BEER", "BELL", "BELOW", "BETA", "BETS",
|
"ATL", "ATM", "AUD", "AUG", "AUM", "AV", "AVG", "AWS", "BABY", "BAG",
|
||||||
"BF", "BID", "BIG", "BIS", "BITCH", "BLEND", "BNPL", "BOE", "BOJ", "BOLL",
|
"BAGS", "BALLS", "BAN", "BANG", "BASIC", "BBB", "BBBY", "BE", "BEAR", "BEARS",
|
||||||
"BOMB", "BOND", "BONED", "BORN", "BOTH", "BOTS", "BOY", "BOYS", "BRB", "BRICS",
|
"BECN", "BEER", "BELL", "BELOW", "BETA", "BETS", "BF", "BID", "BIG", "BIS",
|
||||||
"BRK", "BRKA", "BRKB", "BRL", "BROKE", "BRRRR", "BS", "BST", "BSU", "BT",
|
"BITCH", "BKEY", "BLEND", "BNPL", "BOE", "BOJ", "BOLL", "BOMB", "BOND", "BONED",
|
||||||
"BTC", "BTS", "BTW", "BULL", "BULLS", "BUST", "BUT", "BUY", "BUZZ", "CAD",
|
"BORN", "BOTH", "BOTS", "BOY", "BOYS", "BRB", "BRICS", "BRK", "BRKA", "BRKB",
|
||||||
"CAFE", "CAGR", "CALL", "CALLS", "CAN", "CAP", "CARB", "CASE", "CBD", "CBGM",
|
"BRL", "BROKE", "BRRRR", "BS", "BSE", "BST", "BSU", "BT", "BTC", "BTS",
|
||||||
"CBS", "CCI", "CD", "CEO", "CEST", "CET", "CEX", "CFD", "CFO", "CHART",
|
"BTW", "BUDDY", "BULL", "BULLS", "BUST", "BUT", "BUY", "BUZZ", "CAD", "CAFE",
|
||||||
"CHATS", "CHECK", "CHF", "CHIPS", "CIA", "CLEAN", "CLICK", "CLOSE", "CMON", "CNBC",
|
"CAGR", "CALL", "CALLS", "CAN", "CAP", "CARB", "CARES", "CASE", "CATL", "CBD",
|
||||||
"CNN", "CNY", "COCK", "COGS", "COIL", "COKE", "COME", "COST", "COULD", "COVID",
|
"CBGM", "CBS", "CCI", "CCP", "CD", "CDN", "CEO", "CEST", "CET", "CEX",
|
||||||
"CPAP", "CPI", "CRA", "CRE", "CRO", "CRV", "CSE", "CSP", "CSS", "CST",
|
"CFD", "CFO", "CFPB", "CHART", "CHASE", "CHATS", "CHECK", "CHF", "CHICK", "CHIP",
|
||||||
"CTB", "CTEP", "CTO", "CUCKS", "CULT", "CUM", "CUV", "CYCLE", "CZK", "DA",
|
"CHIPS", "CIA", "CIC", "CLAIM", "CLEAN", "CLICK", "CLOSE", "CMON", "CN", "CNBC",
|
||||||
"DAILY", "DAO", "DATE", "DAX", "DAY", "DAYS", "DCA", "DCF", "DD", "DEBT",
|
"CNN", "CNY", "COBRA", "COCK", "COGS", "COIL", "COKE", "COME", "COST", "COULD",
|
||||||
"DEEZ", "DEMO", "DET", "DEX", "DIA", "DID", "DIDNT", "DIP", "DITM", "DIV",
|
"COVID", "CPAP", "CPI", "CRA", "CRE", "CRO", "CRV", "CSE", "CSP", "CSS",
|
||||||
"DIY", "DJIA", "DKK", "DL", "DM", "DMV", "DNI", "DNUTZ", "DO", "DOE",
|
"CST", "CTB", "CTEP", "CTO", "CUCKS", "CULT", "CUM", "CUTS", "CUV", "CYCLE",
|
||||||
"DOES", "DOGE", "DOJ", "DOM", "DONT", "DOOR", "DOWN", "DOZEN", "DPI", "DR",
|
"CZK", "DA", "DAILY", "DAO", "DATE", "DAX", "DAY", "DAYS", "DCA", "DCF",
|
||||||
"DUDE", "DUMP", "DUNT", "DUT", "DUTY", "DXYXBT", "DYI", "DYNK", "DYODD", "DYOR",
|
"DD", "DEAL", "DEBT", "DEEZ", "DEMO", "DET", "DEX", "DGAF", "DIA", "DID",
|
||||||
"EACH", "EARLY", "EARN", "EAST", "EASY", "ECB", "EDGAR", "EDIT", "EDT", "EJ",
|
"DIDNT", "DIP", "DITM", "DIV", "DIY", "DJI", "DJIA", "DJTJ", "DKK", "DL",
|
||||||
"EMA", "EMJ", "END", "ENRON", "ENSI", "ENV", "EO", "EOD", "EOW", "EOY",
|
"DM", "DMV", "DNI", "DNUTZ", "DO", "DOD", "DOE", "DOES", "DOGE", "DOING",
|
||||||
"EPA", "EPK", "EPS", "ER", "ESG", "ESPP", "EST", "ETA", "ETF", "ETFS",
|
"DOJ", "DOM", "DONNY", "DONT", "DONUT", "DOOR", "DOWN", "DOZEN", "DPI", "DR",
|
||||||
"ETH", "EU", "EUR", "EV", "EVEN", "EVERY", "EVTOL", "EXTRA", "EYES", "EZ",
|
"DUDE", "DUMP", "DUNT", "DUT", "DUTY", "DXY", "DXYXBT", "DYI", "DYNK", "DYODD",
|
||||||
"FAANG", "FAFO", "FAQ", "FAR", "FAST", "FBI", "FCFF", "FD", "FDA", "FEE",
|
"DYOR", "EACH", "EARLY", "EARN", "EAST", "EASY", "ECB", "EDGAR", "EDIT", "EDT",
|
||||||
"FFH", "FFS", "FGMA", "FIG", "FIGMA", "FIHTX", "FING", "FINRA", "FINT", "FINTX",
|
"EJ", "EMA", "EMJ", "EMT", "END", "ENRON", "ENSI", "ENV", "EO", "EOD",
|
||||||
"FINTY", "FIRST", "FKIN", "FLT", "FLY", "FML", "FOLO", "FOMC", "FOMO", "FOR",
|
"EOM", "EOW", "EOY", "EPA", "EPK", "EPS", "ER", "ESG", "ESPP", "EST",
|
||||||
"FOREX", "FRAUD", "FREAK", "FRG", "FROM", "FRP", "FSBO", "FSD", "FSE", "FSELK",
|
"ETA", "ETF", "ETFS", "ETH", "ETL", "EU", "EUR", "EV", "EVEN", "EVERY",
|
||||||
"FSPSX", "FTD", "FTSE", "FUCK", "FUCKS", "FUD", "FULL", "FUND", "FUNNY", "FVG",
|
"EVTOL", "EXTRA", "EYES", "EZ", "FAANG", "FAFO", "FAQ", "FAR", "FAST", "FBI",
|
||||||
"FWIW", "FX", "FXAIX", "FXIAX", "FXROX", "FY", "FYI", "FZROX", "GAAP", "GAIN",
|
"FCC", "FCFF", "FD", "FDA", "FEE", "FFH", "FFS", "FGMA", "FIG", "FIGMA",
|
||||||
"GAVE", "GBP", "GC", "GDP", "GET", "GG", "GJ", "GL", "GLHF", "GMAT",
|
"FIHTX", "FILES", "FINAL", "FIND", "FING", "FINRA", "FINT", "FINTX", "FINTY", "FIRST",
|
||||||
"GMI", "GMT", "GO", "GOAL", "GOAT", "GOD", "GOING", "GOLD", "GONE", "GONNA",
|
"FKIN", "FLRAA", "FLT", "FLY", "FML", "FOLO", "FOMC", "FOMO", "FOR", "FOREX",
|
||||||
"GPT", "GPU", "GRAB", "GREAT", "GREEN", "GST", "GTA", "GTFO", "GTG", "GUH",
|
"FRAUD", "FREAK", "FRED", "FRG", "FROM", "FRP", "FRS", "FSBO", "FSD", "FSE",
|
||||||
"GUY", "GUYS", "HAD", "HAHA", "HALF", "HANDS", "HAS", "HATE", "HAVE", "HBAR",
|
"FSELK", "FSPSX", "FTD", "FTSE", "FUCK", "FUCKS", "FUD", "FULL", "FUND", "FUNNY",
|
||||||
"HCOL", "HEAR", "HEDGE", "HEGE", "HELD", "HELP", "HEY", "HFCS", "HFT", "HGTV",
|
"FVG", "FWIW", "FX", "FXAIX", "FXIAX", "FXROX", "FY", "FYI", "FZROX", "GAAP",
|
||||||
"HIGH", "HIGHS", "HINT", "HIS", "HITID", "HKD", "HODL", "HODOR", "HOF", "HOLD",
|
"GAIN", "GAVE", "GBP", "GC", "GDP", "GET", "GG", "GGTM", "GIVES", "GJ",
|
||||||
"HOLY", "HOME", "HOUR", "HOW", "HS", "HSA", "HT", "HTF", "HTML", "HUF",
|
"GL", "GLHF", "GMAT", "GMI", "GMT", "GO", "GOAL", "GOAT", "GOD", "GOING",
|
||||||
"HUGE", "HYPE", "IANAL", "IB", "IBS", "ICT", "ID", "IDF", "IDK", "IF",
|
"GOLD", "GONE", "GONNA", "GOODS", "GOPRO", "GPT", "GPU", "GRAB", "GREAT", "GREEN",
|
||||||
"II", "IKKE", "IKZ", "IM", "IMHO", "IMI", "IMO", "IN", "INR", "INTO",
|
"GSOV", "GST", "GTA", "GTC", "GTFO", "GTG", "GUH", "GUNS", "GUY", "GUYS",
|
||||||
"IP", "IPO", "IRA", "IRAS", "IRC", "IRISH", "IRS", "IS", "ISA", "ISIN",
|
"HAD", "HAHA", "HALF", "HAM", "HANDS", "HAS", "HATE", "HAVE", "HBAR", "HCOL",
|
||||||
"ISM", "ISN", "IST", "IT", "ITC", "ITM", "ITS", "ITWN", "IUIT", "IV",
|
"HEAR", "HEDGE", "HEGE", "HELD", "HELL", "HELP", "HERE", "HEY", "HFCS", "HFT",
|
||||||
"IVV", "IWM", "IXL", "JAVA", "JD", "JFC", "JK", "JLR", "JMO", "JOIN",
|
"HGTV", "HIGH", "HIGHS", "HINT", "HIS", "HITID", "HK", "HKD", "HKEX", "HODL",
|
||||||
"JOKE", "JP", "JPOW", "JPY", "JS", "JST", "JUN", "JUST", "KARMA", "KEEP",
|
"HODOR", "HOF", "HOLD", "HOLY", "HOME", "HOT", "HOUR", "HOURS", "HOW", "HS",
|
||||||
"KILL", "KING", "KNEW", "KNOW", "KO", "KOHLS", "KPMG", "KRW", "LANGT", "LARGE",
|
"HSA", "HSI", "HT", "HTF", "HTML", "HUF", "HUGE", "HYPE", "IANAL", "IATF",
|
||||||
"LAST", "LATE", "LATER", "LBO", "LCS", "LDL", "LEADS", "LEAP", "LEAPS", "LEARN",
|
"IB", "IBS", "ICT", "ID", "IDF", "IDK", "IF", "II", "IIRC", "IKKE",
|
||||||
"LEI", "LET", "LETS", "LFG", "LFP", "LIFE", "LIG", "LIGMA", "LIKE", "LIMIT",
|
"IKZ", "IM", "IMHO", "IMI", "IMO", "IN", "INC", "INR", "INTO", "IP",
|
||||||
"LIST", "LLC", "LLM", "LMAO", "LMM", "LMN", "LOKO", "LOL", "LOLOL", "LONG",
|
"IPO", "IQVIA", "IRA", "IRAS", "IRC", "IRISH", "IRMAA", "IRS", "IS", "ISA",
|
||||||
"LOOK", "LOSE", "LOSS", "LOST", "LOVE", "LOW", "LOWER", "LOWS", "LP", "LTCG",
|
"ISIN", "ISM", "ISN", "IST", "IT", "ITC", "ITM", "ITS", "ITWN", "IUIT",
|
||||||
"LUPD", "LYING", "M&A", "MA", "MACD", "MAIL", "MAKE", "MAKES", "MANGE", "MANY",
|
"IV", "IVV", "IWM", "IXL", "IYKYK", "JAVA", "JD", "JDM", "JE", "JFC",
|
||||||
"MAX", "MBA", "MC", "MCAP", "MCP", "ME", "MEME", "MERGE", "MERK", "MES",
|
"JK", "JLR", "JMO", "JOBS", "JOIN", "JOKE", "JP", "JPOW", "JPY", "JS",
|
||||||
"MEXC", "MF", "MFER", "MID", "MIGHT", "MIN", "MIND", "ML", "MLB", "MLS",
|
"JST", "JUN", "JUST", "KARMA", "KEEP", "KILL", "KING", "KK", "KNEW", "KNOW",
|
||||||
"MM", "MNQ", "MOASS", "MOM", "MONEY", "MONTH", "MONY", "MOON", "MORE", "MOU",
|
"KO", "KOHLS", "KPMG", "KRW", "LANGT", "LARGE", "LAST", "LATE", "LATER", "LBO",
|
||||||
"MSK", "MTVGA", "MUCH", "MUSIC", "MUST", "MVA", "MXN", "MY", "MYMD", "NASA",
|
"LBTC", "LCS", "LDL", "LEADS", "LEAP", "LEAPS", "LEARN", "LEI", "LET", "LETF",
|
||||||
"NASDA", "NATO", "NAV", "NBA", "NCAN", "NCR", "NEAR", "NEAT", "NEED", "NEVER",
|
"LETS", "LFA", "LFG", "LFP", "LG", "LGEN", "LIFE", "LIG", "LIGMA", "LIKE",
|
||||||
"NEW", "NEWS", "NEXT", "NFA", "NFC", "NFL", "NFT", "NGMI", "NIGHT", "NIQ",
|
"LIMIT", "LIST", "LLC", "LLM", "LM", "LMAO", "LMAOO", "LMM", "LMN", "LOANS",
|
||||||
"NK", "NO", "NOK", "NONE", "NOPE", "NORTH", "NOT", "NOVA", "NOW", "NQ",
|
"LOKO", "LOL", "LOLOL", "LONG", "LONGS", "LOOK", "LOSE", "LOSS", "LOST", "LOVE",
|
||||||
"NSA", "NSLC", "NTVS", "NULL", "NUT", "NUTS", "NUTZ", "NVM", "NW", "NY",
|
"LOVES", "LOW", "LOWER", "LOWS", "LP", "LSS", "LTCG", "LUCID", "LUPD", "LYC",
|
||||||
"NYSE", "NZ", "NZD", "OBBB", "OBI", "OBS", "OBV", "OCF", "OCO", "ODAT",
|
"LYING", "M&A", "MA", "MACD", "MAIL", "MAKE", "MAKES", "MANGE", "MANY", "MASON",
|
||||||
"OEM", "OF", "OFA", "OFF", "OG", "OH", "OK", "OKAY", "OL", "OLD",
|
"MAX", "MAY", "MAYBE", "MBA", "MC", "MCAP", "MCNA", "MCP", "ME", "MEAN",
|
||||||
"OMFG", "OMG", "ON", "ONE", "ONLY", "OP", "OPEC", "OPENQ", "OPEX", "OPRN",
|
"MEME", "MERGE", "MERK", "MES", "MEXC", "MF", "MFER", "MID", "MIGHT", "MIN",
|
||||||
"OR", "ORB", "ORDER", "OS", "OSCE", "OT", "OTC", "OTM", "OUCH", "OUGHT",
|
"MIND", "MINS", "ML", "MLB", "MLS", "MM", "MMF", "MNQ", "MOASS", "MODEL",
|
||||||
"OUT", "OVER", "OWN", "PA", "PANIC", "PC", "PDT", "PE", "PEAK", "PEG",
|
"MOM", "MONEY", "MONTH", "MONY", "MOON", "MORE", "MOST", "MOU", "MSK", "MTVGA",
|
||||||
"PETA", "PEW", "PFC", "PGHL", "PIMCO", "PITA", "PLAN", "PLAYS", "PLN", "PM",
|
"MUCH", "MUSIC", "MUST", "MVA", "MXN", "MY", "MYMD", "NASA", "NASDA", "NATO",
|
||||||
|
"NAV", "NBA", "NBC", "NCAN", "NCR", "NEAR", "NEAT", "NEED", "NEVER", "NEW",
|
||||||
|
"NEWS", "NEXT", "NFA", "NFC", "NFL", "NFT", "NGAD", "NGMI", "NIGHT", "NIQ",
|
||||||
|
"NK", "NO", "NOK", "NONE", "NOOO", "NOPE", "NORTH", "NOT", "NOVA", "NOW",
|
||||||
|
"NQ", "NRI", "NSA", "NSLC", "NTG", "NTVS", "NULL", "NUT", "NUTS", "NUTZ",
|
||||||
|
"NVM", "NW", "NY", "NYSE", "NZ", "NZD", "OBBB", "OBI", "OBS", "OBV",
|
||||||
|
"OCD", "OCF", "OCO", "ODAT", "OEM", "OF", "OFA", "OFF", "OG", "OH",
|
||||||
|
"OK", "OKAY", "OL", "OLD", "OMFG", "OMG", "ON", "ONDAS", "ONE", "ONLY",
|
||||||
|
"OP", "OPEC", "OPENQ", "OPEX", "OPRN", "OR", "ORB", "ORDER", "ORTEX", "OS",
|
||||||
|
"OSCE", "OT", "OTC", "OTM", "OTOH", "OUCH", "OUGHT", "OUR", "OUT", "OVER",
|
||||||
|
"OWN", "OZZY", "PA", "PANIC", "PC", "PDT", "PE", "PEAK", "PEG", "PETA",
|
||||||
|
"PEW", "PFC", "PGHL", "PIMCO", "PITA", "PLAN", "PLAYS", "PLC", "PLN", "PM",
|
||||||
"PMI", "PNL", "POC", "POMO", "POP", "POS", "POSCO", "POTUS", "POV", "POW",
|
"PMI", "PNL", "POC", "POMO", "POP", "POS", "POSCO", "POTUS", "POV", "POW",
|
||||||
"PPI", "PR", "PRICE", "PROFIT", "PROXY", "PS", "PSA", "PST", "PT", "PTD",
|
"PPI", "PR", "PRICE", "PRIME", "PROFIT", "PROXY", "PS", "PSA", "PST", "PT",
|
||||||
"PUSSY", "PUT", "PWC", "Q1", "Q2", "Q3", "Q4", "QE", "QED", "QIMC",
|
"PTD", "PUSSY", "PUT", "PWC", "Q1", "Q2", "Q3", "Q4", "QE", "QED",
|
||||||
"QQQ", "QR", "RAM", "RATM", "RBA", "RBNZ", "RE", "REACH", "READY", "REAL",
|
"QIMC", "QQQ", "QR", "RAM", "RATM", "RBA", "RBNZ", "RE", "REACH", "READY",
|
||||||
"RED", "REIT", "REITS", "REKT", "RFK", "RH", "RICO", "RIDE", "RIGHT", "RIP",
|
"REAL", "RED", "REIT", "REITS", "REKT", "REPE", "RFK", "RH", "RICO", "RIDE",
|
||||||
"RISK", "RISKY", "ROCE", "ROCK", "ROE", "ROFL", "ROI", "ROIC", "ROTH", "RRSP",
|
"RIGHT", "RIP", "RISK", "RISKY", "RNDC", "ROCE", "ROCK", "ROE", "ROFL", "ROI",
|
||||||
"RSD", "RSI", "RT", "RTD", "RUB", "RUG", "RULE", "RUST", "RVOL", "SAGA",
|
"ROIC", "ROTH", "RPO", "RRSP", "RSD", "RSI", "RT", "RTD", "RUB", "RUG",
|
||||||
"SALES", "SAME", "SAVE", "SAYS", "SBF", "SBLOC", "SC", "SCALP", "SCAM", "SCHB",
|
"RULE", "RUST", "RVOL", "SAGA", "SALES", "SAME", "SAVE", "SAYS", "SBF", "SBLOC",
|
||||||
"SCIF", "SEC", "SEE", "SEK", "SELL", "SELLL", "SEP", "SESG", "SET", "SGD",
|
"SC", "SCALP", "SCAM", "SCHB", "SCIF", "SEC", "SEE", "SEK", "SELL", "SELLL",
|
||||||
"SHALL", "SHARE", "SHELL", "SHIT", "SHORT", "SHOW", "SHTF", "SI", "SICK", "SIGN",
|
"SEP", "SESG", "SET", "SFOR", "SGD", "SHALL", "SHARE", "SHEIN", "SHELL", "SHIT",
|
||||||
"SL", "SLIM", "SLOW", "SMA", "SMALL", "SO", "SOLIS", "SOME", "SOON", "SOUTH",
|
"SHORT", "SHOW", "SHTF", "SI", "SICK", "SIGN", "SL", "SLIM", "SLOW", "SMA",
|
||||||
"SP", "SPAC", "SPDR", "SPEND", "SPLG", "SPX", "SPY", "SS", "START", "STAY",
|
"SMALL", "SMFH", "SNZ", "SO", "SOLD", "SOLIS", "SOME", "SOON", "SOOO", "SOUTH",
|
||||||
"STEEL", "STFU", "STILL", "STOCK", "STOOQ", "STOP", "STOR", "STQQQ", "STUCK", "STUDY",
|
"SP", "SPAC", "SPDR", "SPEND", "SPLG", "SPX", "SPY", "SQUAD", "SS", "SSA",
|
||||||
"SUS", "SUV", "SWIFT", "SWING", "TA", "TAG", "TAKE", "TAM", "TBTH", "TEAMS",
|
"SSDI", "START", "STAY", "STEEL", "STFU", "STILL", "STOCK", "STOOQ", "STOP", "STOR",
|
||||||
"TED", "TERM", "TESLA", "TEXT", "TF", "TFNA", "TFSA", "THANK", "THAT", "THATS",
|
"STQQQ", "STUCK", "STUDY", "SUS", "SUSHI", "SUV", "SWIFT", "SWING", "TA", "TAG",
|
||||||
"THE", "THEIR", "THEM", "THEN", "THERE", "THESE", "THEY", "THING", "THINK", "THIS",
|
"TAKE", "TAM", "TBTH", "TEAMS", "TED", "TEMU", "TERM", "TESLA", "TEXT", "TF",
|
||||||
"TI", "TIA", "TIKR", "TIME", "TINA", "TITS", "TJR", "TL", "TL;DR", "TLDR",
|
"TFNA", "TFSA", "THAN", "THANK", "THAT", "THATS", "THE", "THEIR", "THEM", "THEN",
|
||||||
"TO", "TODAY", "TOLD", "TOO", "TOS", "TOT", "TOTAL", "TP", "TPU", "TRADE",
|
"THERE", "THESE", "THEY", "THING", "THINK", "THIS", "TI", "TIA", "TIKR", "TIME",
|
||||||
"TREND", "TRUE", "TRUMP", "TRUST", "TRY", "TSA", "TSP", "TSX", "TSXV", "TTM",
|
"TIMES", "TINA", "TITS", "TJR", "TL", "TL;DR", "TLDR", "TO", "TODAY", "TOLD",
|
||||||
"TTYL", "TWO", "UAW", "UCITS", "UGH", "UI", "UK", "UNDER", "UNTIL", "UP",
|
"TONS", "TOO", "TOS", "TOT", "TOTAL", "TP", "TPU", "TRADE", "TREND", "TRUE",
|
||||||
|
"TRUMP", "TRUST", "TRY", "TSA", "TSMC", "TSP", "TSX", "TSXV", "TTM", "TTYL",
|
||||||
|
"TWO", "UAW", "UCITS", "UGH", "UI", "UK", "UNDER", "UNITS", "UNTIL", "UP",
|
||||||
"US", "USA", "USD", "USMCA", "USSA", "USSR", "UTC", "VALID", "VALUE", "VAMOS",
|
"US", "USA", "USD", "USMCA", "USSA", "USSR", "UTC", "VALID", "VALUE", "VAMOS",
|
||||||
"VERY", "VFMXX", "VFV", "VI", "VIX", "VLI", "VOO", "VP", "VR", "VRVP",
|
"VEO", "VERY", "VFMXX", "VFV", "VI", "VISA", "VIX", "VLI", "VOO", "VP",
|
||||||
"VSUS", "VTI", "VUAG", "VW", "VWAP", "VWCE", "VXN", "VXUX", "WAGMI", "WAIT",
|
"VPAY", "VR", "VRVP", "VSUS", "VTI", "VUAG", "VW", "VWAP", "VWCE", "VXN",
|
||||||
"WALL", "WANT", "WATCH", "WAY", "WE", "WEB3", "WEEK", "WENT", "WEST", "WHALE",
|
"VXUX", "WAGER", "WAGMI", "WAIT", "WALL", "WANT", "WAS", "WATCH", "WAY", "WBTC",
|
||||||
"WHAT", "WHEN", "WHERE", "WHICH", "WHO", "WHOS", "WHY", "WIDE", "WILL", "WIRE",
|
"WE", "WEB", "WEB3", "WEEK", "WENT", "WERO", "WEST", "WHALE", "WHAT", "WHEN",
|
||||||
"WIRED", "WITH", "WL", "WON", "WOOPS", "WORDS", "WORTH", "WOULD", "WP", "WRONG",
|
"WHERE", "WHICH", "WHILE", "WHO", "WHOS", "WHY", "WIDE", "WILL", "WIRE", "WIRED",
|
||||||
"WSB", "WSJ", "WTF", "WV", "WWII", "WWIII", "X", "XCUSE", "XD", "XEQT",
|
"WITH", "WL", "WON", "WOOPS", "WORDS", "WORTH", "WOULD", "WP", "WRONG", "WSB",
|
||||||
"XMR", "XO", "XRP", "XX", "YEAH", "YEET", "YES", "YET", "YIELD", "YM",
|
"WSJ", "WTF", "WV", "WWII", "WWIII", "X", "XAU", "XCUSE", "XD", "XEQT",
|
||||||
"YMMV", "YOLO", "YOU", "YOUR", "YOY", "YT", "YTD", "YUGE", "ZAR", "ZEN",
|
"XI", "XMR", "XO", "XRP", "XX", "YEAH", "YEET", "YES", "YET", "YIELD",
|
||||||
"ZERO", "ZEV"
|
"YM", "YMMV", "YOIR", "YOLO", "YOU", "YOUR", "YOY", "YT", "YTD", "YUGE",
|
||||||
|
"YUPPP", "ZAR", "ZEN", "ZERO", "ZEV"
|
||||||
}
|
}
|
||||||
|
|
||||||
def format_and_print_list(word_set, words_per_line=10):
|
def format_and_print_list(word_set, words_per_line=10):
|
||||||
|
|||||||
@@ -4,9 +4,9 @@ import argparse
|
|||||||
import json
|
import json
|
||||||
import os
|
import os
|
||||||
import time
|
import time
|
||||||
|
import sys
|
||||||
|
import subprocess
|
||||||
import praw
|
import praw
|
||||||
import yfinance as yf
|
|
||||||
from dotenv import load_dotenv
|
from dotenv import load_dotenv
|
||||||
|
|
||||||
from . import database
|
from . import database
|
||||||
@@ -27,14 +27,6 @@ def load_subreddits(filepath):
|
|||||||
log.error(f"Error loading config file '{filepath}': {e}")
|
log.error(f"Error loading config file '{filepath}': {e}")
|
||||||
return None
|
return None
|
||||||
|
|
||||||
def get_financial_data(ticker_symbol):
|
|
||||||
try:
|
|
||||||
ticker = yf.Ticker(ticker_symbol)
|
|
||||||
data = { "market_cap": ticker.fast_info.get('marketCap'), "closing_price": ticker.fast_info.get('previousClose') }
|
|
||||||
return data
|
|
||||||
except Exception:
|
|
||||||
return {"market_cap": None, "closing_price": None}
|
|
||||||
|
|
||||||
def get_reddit_instance():
|
def get_reddit_instance():
|
||||||
client_id = os.getenv("REDDIT_CLIENT_ID")
|
client_id = os.getenv("REDDIT_CLIENT_ID")
|
||||||
client_secret = os.getenv("REDDIT_CLIENT_SECRET")
|
client_secret = os.getenv("REDDIT_CLIENT_SECRET")
|
||||||
@@ -144,6 +136,7 @@ def main():
|
|||||||
parser.add_argument("-d", "--days", type=int, default=1, help="Number of past days to scan for new posts.\n(Default: 1 for last 24 hours)")
|
parser.add_argument("-d", "--days", type=int, default=1, help="Number of past days to scan for new posts.\n(Default: 1 for last 24 hours)")
|
||||||
parser.add_argument("-p", "--posts", type=int, default=200, help="Max posts to check per subreddit.\n(Default: 200)")
|
parser.add_argument("-p", "--posts", type=int, default=200, help="Max posts to check per subreddit.\n(Default: 200)")
|
||||||
parser.add_argument("-c", "--comments", type=int, default=100, help="Number of comments to scan per post.\n(Default: 100)")
|
parser.add_argument("-c", "--comments", type=int, default=100, help="Number of comments to scan per post.\n(Default: 100)")
|
||||||
|
parser.add_argument("-u", "--update-financials-only", action="store_true", help="Skip Reddit scan and only update financial data for all existing tickers.")
|
||||||
parser.add_argument("--stdout", action="store_true", help="Print all log messages to the console.")
|
parser.add_argument("--stdout", action="store_true", help="Print all log messages to the console.")
|
||||||
|
|
||||||
args = parser.parse_args()
|
args = parser.parse_args()
|
||||||
@@ -167,16 +160,75 @@ def main():
|
|||||||
# --- Initialize and Run ---
|
# --- Initialize and Run ---
|
||||||
database.initialize_db()
|
database.initialize_db()
|
||||||
|
|
||||||
reddit = get_reddit_instance()
|
if args.update_financials_only:
|
||||||
if not reddit: return
|
log.critical("--- Starting Financial Data Update Only Mode (using isolated fetcher) ---")
|
||||||
|
all_tickers = database.get_all_tickers() # No longer need to manage 'conn' here
|
||||||
|
log.info(f"Found {len(all_tickers)} tickers in the database to update.")
|
||||||
|
|
||||||
scan_subreddits(
|
conn = database.get_db_connection()
|
||||||
reddit,
|
for ticker in all_tickers:
|
||||||
subreddits_to_scan,
|
symbol = ticker['symbol']
|
||||||
post_limit=args.posts,
|
log.info(f" -> Fetching financials for {symbol}...")
|
||||||
comment_limit=args.comments,
|
|
||||||
days_to_scan=args.days
|
try:
|
||||||
)
|
# --- THIS IS THE NEW LOGIC ---
|
||||||
|
# Construct the command to run our fetcher script in a new process
|
||||||
|
command = [sys.executable, "-m", "rstat_tool.fetcher", symbol]
|
||||||
|
|
||||||
|
# Run the command, capture the output, and set a timeout
|
||||||
|
result = subprocess.run(
|
||||||
|
command,
|
||||||
|
capture_output=True,
|
||||||
|
text=True,
|
||||||
|
check=True, # This will raise an exception if the script returns a non-zero exit code
|
||||||
|
timeout=30 # Timeout after 30 seconds
|
||||||
|
)
|
||||||
|
|
||||||
|
# The output from the script is a JSON string
|
||||||
|
financials = json.loads(result.stdout)
|
||||||
|
|
||||||
|
database.update_ticker_financials(
|
||||||
|
conn, ticker['id'],
|
||||||
|
financials.get('market_cap'),
|
||||||
|
financials.get('closing_price')
|
||||||
|
)
|
||||||
|
# --- END OF NEW LOGIC ---
|
||||||
|
|
||||||
|
except subprocess.CalledProcessError as e:
|
||||||
|
log.error(f"Fetcher script failed for {symbol}: {e.stderr}")
|
||||||
|
except subprocess.TimeoutExpired:
|
||||||
|
log.error(f"Fetcher script timed out for {symbol}.")
|
||||||
|
except json.JSONDecodeError:
|
||||||
|
log.error(f"Could not parse JSON from fetcher script for {symbol}.")
|
||||||
|
except Exception as e:
|
||||||
|
log.error(f"An unexpected error occurred for {symbol}: {e}")
|
||||||
|
|
||||||
|
conn.close()
|
||||||
|
log.critical("--- Financial Data Update Complete ---")
|
||||||
|
else:
|
||||||
|
# This is the normal Reddit scanning logic
|
||||||
|
log.critical("--- Starting Reddit Scan Mode ---")
|
||||||
|
if args.subreddit:
|
||||||
|
subreddits_to_scan = [args.subreddit]
|
||||||
|
log.info(f"Targeted Scan Mode: Focusing on r/{args.subreddit}")
|
||||||
|
else:
|
||||||
|
log.info(f"Config Scan Mode: Loading subreddits from {args.config}")
|
||||||
|
subreddits_to_scan = load_subreddits(args.config)
|
||||||
|
|
||||||
|
if not subreddits_to_scan:
|
||||||
|
log.error("Error: No subreddits to scan.")
|
||||||
|
return
|
||||||
|
|
||||||
|
reddit = get_reddit_instance()
|
||||||
|
if not reddit: return
|
||||||
|
|
||||||
|
scan_subreddits(
|
||||||
|
reddit,
|
||||||
|
subreddits_to_scan,
|
||||||
|
post_limit=args.posts,
|
||||||
|
comment_limit=args.comments,
|
||||||
|
days_to_scan=args.days
|
||||||
|
)
|
||||||
|
|
||||||
if __name__ == "__main__":
|
if __name__ == "__main__":
|
||||||
main()
|
main()
|
||||||
@@ -5,101 +5,115 @@ import re
|
|||||||
# A set of common English words and acronyms that look like stock tickers.
|
# A set of common English words and acronyms that look like stock tickers.
|
||||||
# This helps reduce false positives.
|
# This helps reduce false positives.
|
||||||
COMMON_WORDS_BLACKLIST = {
|
COMMON_WORDS_BLACKLIST = {
|
||||||
"401K", "403B", "457B", "ABC", "ABOUT", "ABOVE", "ADAM", "ADR", "ADX", "AEDT",
|
"401K", "403B", "457B", "AAVE", "ABC", "ABOUT", "ABOVE", "ACAT", "ADAM", "ADHD",
|
||||||
"AEST", "AF", "AFAIK", "AFTER", "AH", "AI", "AINT", "ALD", "ALGOS", "ALIVE",
|
"ADR", "ADS", "ADX", "AEDT", "AEST", "AF", "AFAIK", "AFTER", "AGENT", "AH",
|
||||||
"ALL", "ALPHA", "ALSO", "AM", "AMA", "AMEX", "AMK", "AND", "ANY", "APES",
|
"AI", "AINT", "AK", "ALD", "ALGOS", "ALIVE", "ALL", "ALPHA", "ALSO", "AM",
|
||||||
"APL", "APPL", "APPLE", "APR", "AR", "ARE", "AREA", "ARH", "ARK", "AROUND",
|
"AMA", "AMEX", "AMK", "AMY", "AND", "ANSS", "ANY", "APES", "APL", "APPL",
|
||||||
"ASAP", "ASK", "ASS", "ASSET", "AST", "AT", "ATH", "ATL", "ATM", "AUD",
|
"APPLE", "APR", "APUS", "APY", "AR", "ARBK", "ARE", "AREA", "ARH", "ARK",
|
||||||
"AUM", "AV", "AVG", "AWS", "BABY", "BAG", "BAGS", "BALLS", "BANG", "BBB",
|
"AROUND", "ART", "ASAP", "ASEAN", "ASK", "ASS", "ASSET", "AST", "AT", "ATH",
|
||||||
"BBBY", "BE", "BEAR", "BEARS", "BECN", "BEER", "BELL", "BELOW", "BETA", "BETS",
|
"ATL", "ATM", "AUD", "AUG", "AUM", "AV", "AVG", "AWS", "BABY", "BAG",
|
||||||
"BF", "BID", "BIG", "BIS", "BITCH", "BLEND", "BNPL", "BOE", "BOJ", "BOLL",
|
"BAGS", "BALLS", "BAN", "BANG", "BASIC", "BBB", "BBBY", "BE", "BEAR", "BEARS",
|
||||||
"BOMB", "BOND", "BONED", "BORN", "BOTH", "BOTS", "BOY", "BOYS", "BRB", "BRICS",
|
"BECN", "BEER", "BELL", "BELOW", "BETA", "BETS", "BF", "BID", "BIG", "BIS",
|
||||||
"BRK", "BRKA", "BRKB", "BRL", "BROKE", "BRRRR", "BS", "BST", "BSU", "BT",
|
"BITCH", "BKEY", "BLEND", "BNPL", "BOE", "BOJ", "BOLL", "BOMB", "BOND", "BONED",
|
||||||
"BTC", "BTS", "BTW", "BULL", "BULLS", "BUST", "BUT", "BUY", "BUZZ", "CAD",
|
"BORN", "BOTH", "BOTS", "BOY", "BOYS", "BRB", "BRICS", "BRK", "BRKA", "BRKB",
|
||||||
"CAFE", "CAGR", "CALL", "CALLS", "CAN", "CAP", "CARB", "CASE", "CBD", "CBGM",
|
"BRL", "BROKE", "BRRRR", "BS", "BSE", "BST", "BSU", "BT", "BTC", "BTS",
|
||||||
"CBS", "CCI", "CD", "CEO", "CEST", "CET", "CEX", "CFD", "CFO", "CHART",
|
"BTW", "BUDDY", "BULL", "BULLS", "BUST", "BUT", "BUY", "BUZZ", "CAD", "CAFE",
|
||||||
"CHATS", "CHECK", "CHF", "CHIPS", "CIA", "CLEAN", "CLICK", "CLOSE", "CMON", "CNBC",
|
"CAGR", "CALL", "CALLS", "CAN", "CAP", "CARB", "CARES", "CASE", "CATL", "CBD",
|
||||||
"CNN", "CNY", "COCK", "COGS", "COIL", "COKE", "COME", "COST", "COULD", "COVID",
|
"CBGM", "CBS", "CCI", "CCP", "CD", "CDN", "CEO", "CEST", "CET", "CEX",
|
||||||
"CPAP", "CPI", "CRA", "CRE", "CRO", "CRV", "CSE", "CSP", "CSS", "CST",
|
"CFD", "CFO", "CFPB", "CHART", "CHASE", "CHATS", "CHECK", "CHF", "CHICK", "CHIP",
|
||||||
"CTB", "CTEP", "CTO", "CUCKS", "CULT", "CUM", "CUV", "CYCLE", "CZK", "DA",
|
"CHIPS", "CIA", "CIC", "CLAIM", "CLEAN", "CLICK", "CLOSE", "CMON", "CN", "CNBC",
|
||||||
"DAILY", "DAO", "DATE", "DAX", "DAY", "DAYS", "DCA", "DCF", "DD", "DEBT",
|
"CNN", "CNY", "COBRA", "COCK", "COGS", "COIL", "COKE", "COME", "COST", "COULD",
|
||||||
"DEEZ", "DEMO", "DET", "DEX", "DIA", "DID", "DIDNT", "DIP", "DITM", "DIV",
|
"COVID", "CPAP", "CPI", "CRA", "CRE", "CRO", "CRV", "CSE", "CSP", "CSS",
|
||||||
"DIY", "DJIA", "DKK", "DL", "DM", "DMV", "DNI", "DNUTZ", "DO", "DOE",
|
"CST", "CTB", "CTEP", "CTO", "CUCKS", "CULT", "CUM", "CUTS", "CUV", "CYCLE",
|
||||||
"DOES", "DOGE", "DOJ", "DOM", "DONT", "DOOR", "DOWN", "DOZEN", "DPI", "DR",
|
"CZK", "DA", "DAILY", "DAO", "DATE", "DAX", "DAY", "DAYS", "DCA", "DCF",
|
||||||
"DUDE", "DUMP", "DUNT", "DUT", "DUTY", "DXYXBT", "DYI", "DYNK", "DYODD", "DYOR",
|
"DD", "DEAL", "DEBT", "DEEZ", "DEMO", "DET", "DEX", "DGAF", "DIA", "DID",
|
||||||
"EACH", "EARLY", "EARN", "EAST", "EASY", "ECB", "EDGAR", "EDIT", "EDT", "EJ",
|
"DIDNT", "DIP", "DITM", "DIV", "DIY", "DJI", "DJIA", "DJTJ", "DKK", "DL",
|
||||||
"EMA", "EMJ", "END", "ENRON", "ENSI", "ENV", "EO", "EOD", "EOW", "EOY",
|
"DM", "DMV", "DNI", "DNUTZ", "DO", "DOD", "DOE", "DOES", "DOGE", "DOING",
|
||||||
"EPA", "EPK", "EPS", "ER", "ESG", "ESPP", "EST", "ETA", "ETF", "ETFS",
|
"DOJ", "DOM", "DONNY", "DONT", "DONUT", "DOOR", "DOWN", "DOZEN", "DPI", "DR",
|
||||||
"ETH", "EU", "EUR", "EV", "EVEN", "EVERY", "EVTOL", "EXTRA", "EYES", "EZ",
|
"DUDE", "DUMP", "DUNT", "DUT", "DUTY", "DXY", "DXYXBT", "DYI", "DYNK", "DYODD",
|
||||||
"FAANG", "FAFO", "FAQ", "FAR", "FAST", "FBI", "FCFF", "FD", "FDA", "FEE",
|
"DYOR", "EACH", "EARLY", "EARN", "EAST", "EASY", "ECB", "EDGAR", "EDIT", "EDT",
|
||||||
"FFH", "FFS", "FGMA", "FIG", "FIGMA", "FIHTX", "FING", "FINRA", "FINT", "FINTX",
|
"EJ", "EMA", "EMJ", "EMT", "END", "ENRON", "ENSI", "ENV", "EO", "EOD",
|
||||||
"FINTY", "FIRST", "FKIN", "FLT", "FLY", "FML", "FOLO", "FOMC", "FOMO", "FOR",
|
"EOM", "EOW", "EOY", "EPA", "EPK", "EPS", "ER", "ESG", "ESPP", "EST",
|
||||||
"FOREX", "FRAUD", "FREAK", "FRG", "FROM", "FRP", "FSBO", "FSD", "FSE", "FSELK",
|
"ETA", "ETF", "ETFS", "ETH", "ETL", "EU", "EUR", "EV", "EVEN", "EVERY",
|
||||||
"FSPSX", "FTD", "FTSE", "FUCK", "FUCKS", "FUD", "FULL", "FUND", "FUNNY", "FVG",
|
"EVTOL", "EXTRA", "EYES", "EZ", "FAANG", "FAFO", "FAQ", "FAR", "FAST", "FBI",
|
||||||
"FWIW", "FX", "FXAIX", "FXIAX", "FXROX", "FY", "FYI", "FZROX", "GAAP", "GAIN",
|
"FCC", "FCFF", "FD", "FDA", "FEE", "FFH", "FFS", "FGMA", "FIG", "FIGMA",
|
||||||
"GAVE", "GBP", "GC", "GDP", "GET", "GG", "GJ", "GL", "GLHF", "GMAT",
|
"FIHTX", "FILES", "FINAL", "FIND", "FING", "FINRA", "FINT", "FINTX", "FINTY", "FIRST",
|
||||||
"GMI", "GMT", "GO", "GOAL", "GOAT", "GOD", "GOING", "GOLD", "GONE", "GONNA",
|
"FKIN", "FLRAA", "FLT", "FLY", "FML", "FOLO", "FOMC", "FOMO", "FOR", "FOREX",
|
||||||
"GPT", "GPU", "GRAB", "GREAT", "GREEN", "GST", "GTA", "GTFO", "GTG", "GUH",
|
"FRAUD", "FREAK", "FRED", "FRG", "FROM", "FRP", "FRS", "FSBO", "FSD", "FSE",
|
||||||
"GUY", "GUYS", "HAD", "HAHA", "HALF", "HANDS", "HAS", "HATE", "HAVE", "HBAR",
|
"FSELK", "FSPSX", "FTD", "FTSE", "FUCK", "FUCKS", "FUD", "FULL", "FUND", "FUNNY",
|
||||||
"HCOL", "HEAR", "HEDGE", "HEGE", "HELD", "HELP", "HEY", "HFCS", "HFT", "HGTV",
|
"FVG", "FWIW", "FX", "FXAIX", "FXIAX", "FXROX", "FY", "FYI", "FZROX", "GAAP",
|
||||||
"HIGH", "HIGHS", "HINT", "HIS", "HITID", "HKD", "HODL", "HODOR", "HOF", "HOLD",
|
"GAIN", "GAVE", "GBP", "GC", "GDP", "GET", "GG", "GGTM", "GIVES", "GJ",
|
||||||
"HOLY", "HOME", "HOUR", "HOW", "HS", "HSA", "HT", "HTF", "HTML", "HUF",
|
"GL", "GLHF", "GMAT", "GMI", "GMT", "GO", "GOAL", "GOAT", "GOD", "GOING",
|
||||||
"HUGE", "HYPE", "IANAL", "IB", "IBS", "ICT", "ID", "IDF", "IDK", "IF",
|
"GOLD", "GONE", "GONNA", "GOODS", "GOPRO", "GPT", "GPU", "GRAB", "GREAT", "GREEN",
|
||||||
"II", "IKKE", "IKZ", "IM", "IMHO", "IMI", "IMO", "IN", "INR", "INTO",
|
"GSOV", "GST", "GTA", "GTC", "GTFO", "GTG", "GUH", "GUNS", "GUY", "GUYS",
|
||||||
"IP", "IPO", "IRA", "IRAS", "IRC", "IRISH", "IRS", "IS", "ISA", "ISIN",
|
"HAD", "HAHA", "HALF", "HAM", "HANDS", "HAS", "HATE", "HAVE", "HBAR", "HCOL",
|
||||||
"ISM", "ISN", "IST", "IT", "ITC", "ITM", "ITS", "ITWN", "IUIT", "IV",
|
"HEAR", "HEDGE", "HEGE", "HELD", "HELL", "HELP", "HERE", "HEY", "HFCS", "HFT",
|
||||||
"IVV", "IWM", "IXL", "JAVA", "JD", "JFC", "JK", "JLR", "JMO", "JOIN",
|
"HGTV", "HIGH", "HIGHS", "HINT", "HIS", "HITID", "HK", "HKD", "HKEX", "HODL",
|
||||||
"JOKE", "JP", "JPOW", "JPY", "JS", "JST", "JUN", "JUST", "KARMA", "KEEP",
|
"HODOR", "HOF", "HOLD", "HOLY", "HOME", "HOT", "HOUR", "HOURS", "HOW", "HS",
|
||||||
"KILL", "KING", "KNEW", "KNOW", "KO", "KOHLS", "KPMG", "KRW", "LANGT", "LARGE",
|
"HSA", "HSI", "HT", "HTF", "HTML", "HUF", "HUGE", "HYPE", "IANAL", "IATF",
|
||||||
"LAST", "LATE", "LATER", "LBO", "LCS", "LDL", "LEADS", "LEAP", "LEAPS", "LEARN",
|
"IB", "IBS", "ICT", "ID", "IDF", "IDK", "IF", "II", "IIRC", "IKKE",
|
||||||
"LEI", "LET", "LETS", "LFG", "LFP", "LIFE", "LIG", "LIGMA", "LIKE", "LIMIT",
|
"IKZ", "IM", "IMHO", "IMI", "IMO", "IN", "INC", "INR", "INTO", "IP",
|
||||||
"LIST", "LLC", "LLM", "LMAO", "LMM", "LMN", "LOKO", "LOL", "LOLOL", "LONG",
|
"IPO", "IQVIA", "IRA", "IRAS", "IRC", "IRISH", "IRMAA", "IRS", "IS", "ISA",
|
||||||
"LOOK", "LOSE", "LOSS", "LOST", "LOVE", "LOW", "LOWER", "LOWS", "LP", "LTCG",
|
"ISIN", "ISM", "ISN", "IST", "IT", "ITC", "ITM", "ITS", "ITWN", "IUIT",
|
||||||
"LUPD", "LYING", "M&A", "MA", "MACD", "MAIL", "MAKE", "MAKES", "MANGE", "MANY",
|
"IV", "IVV", "IWM", "IXL", "IYKYK", "JAVA", "JD", "JDM", "JE", "JFC",
|
||||||
"MAX", "MBA", "MC", "MCAP", "MCP", "ME", "MEME", "MERGE", "MERK", "MES",
|
"JK", "JLR", "JMO", "JOBS", "JOIN", "JOKE", "JP", "JPOW", "JPY", "JS",
|
||||||
"MEXC", "MF", "MFER", "MID", "MIGHT", "MIN", "MIND", "ML", "MLB", "MLS",
|
"JST", "JUN", "JUST", "KARMA", "KEEP", "KILL", "KING", "KK", "KNEW", "KNOW",
|
||||||
"MM", "MNQ", "MOASS", "MOM", "MONEY", "MONTH", "MONY", "MOON", "MORE", "MOU",
|
"KO", "KOHLS", "KPMG", "KRW", "LANGT", "LARGE", "LAST", "LATE", "LATER", "LBO",
|
||||||
"MSK", "MTVGA", "MUCH", "MUSIC", "MUST", "MVA", "MXN", "MY", "MYMD", "NASA",
|
"LBTC", "LCS", "LDL", "LEADS", "LEAP", "LEAPS", "LEARN", "LEI", "LET", "LETF",
|
||||||
"NASDA", "NATO", "NAV", "NBA", "NCAN", "NCR", "NEAR", "NEAT", "NEED", "NEVER",
|
"LETS", "LFA", "LFG", "LFP", "LG", "LGEN", "LIFE", "LIG", "LIGMA", "LIKE",
|
||||||
"NEW", "NEWS", "NEXT", "NFA", "NFC", "NFL", "NFT", "NGMI", "NIGHT", "NIQ",
|
"LIMIT", "LIST", "LLC", "LLM", "LM", "LMAO", "LMAOO", "LMM", "LMN", "LOANS",
|
||||||
"NK", "NO", "NOK", "NONE", "NOPE", "NORTH", "NOT", "NOVA", "NOW", "NQ",
|
"LOKO", "LOL", "LOLOL", "LONG", "LONGS", "LOOK", "LOSE", "LOSS", "LOST", "LOVE",
|
||||||
"NSA", "NSLC", "NTVS", "NULL", "NUT", "NUTS", "NUTZ", "NVM", "NW", "NY",
|
"LOVES", "LOW", "LOWER", "LOWS", "LP", "LSS", "LTCG", "LUCID", "LUPD", "LYC",
|
||||||
"NYSE", "NZ", "NZD", "OBBB", "OBI", "OBS", "OBV", "OCF", "OCO", "ODAT",
|
"LYING", "M&A", "MA", "MACD", "MAIL", "MAKE", "MAKES", "MANGE", "MANY", "MASON",
|
||||||
"OEM", "OF", "OFA", "OFF", "OG", "OH", "OK", "OKAY", "OL", "OLD",
|
"MAX", "MAY", "MAYBE", "MBA", "MC", "MCAP", "MCNA", "MCP", "ME", "MEAN",
|
||||||
"OMFG", "OMG", "ON", "ONE", "ONLY", "OP", "OPEC", "OPENQ", "OPEX", "OPRN",
|
"MEME", "MERGE", "MERK", "MES", "MEXC", "MF", "MFER", "MID", "MIGHT", "MIN",
|
||||||
"OR", "ORB", "ORDER", "OS", "OSCE", "OT", "OTC", "OTM", "OUCH", "OUGHT",
|
"MIND", "MINS", "ML", "MLB", "MLS", "MM", "MMF", "MNQ", "MOASS", "MODEL",
|
||||||
"OUT", "OVER", "OWN", "PA", "PANIC", "PC", "PDT", "PE", "PEAK", "PEG",
|
"MOM", "MONEY", "MONTH", "MONY", "MOON", "MORE", "MOST", "MOU", "MSK", "MTVGA",
|
||||||
"PETA", "PEW", "PFC", "PGHL", "PIMCO", "PITA", "PLAN", "PLAYS", "PLN", "PM",
|
"MUCH", "MUSIC", "MUST", "MVA", "MXN", "MY", "MYMD", "NASA", "NASDA", "NATO",
|
||||||
|
"NAV", "NBA", "NBC", "NCAN", "NCR", "NEAR", "NEAT", "NEED", "NEVER", "NEW",
|
||||||
|
"NEWS", "NEXT", "NFA", "NFC", "NFL", "NFT", "NGAD", "NGMI", "NIGHT", "NIQ",
|
||||||
|
"NK", "NO", "NOK", "NONE", "NOOO", "NOPE", "NORTH", "NOT", "NOVA", "NOW",
|
||||||
|
"NQ", "NRI", "NSA", "NSLC", "NTG", "NTVS", "NULL", "NUT", "NUTS", "NUTZ",
|
||||||
|
"NVM", "NW", "NY", "NYSE", "NZ", "NZD", "OBBB", "OBI", "OBS", "OBV",
|
||||||
|
"OCD", "OCF", "OCO", "ODAT", "OEM", "OF", "OFA", "OFF", "OG", "OH",
|
||||||
|
"OK", "OKAY", "OL", "OLD", "OMFG", "OMG", "ON", "ONDAS", "ONE", "ONLY",
|
||||||
|
"OP", "OPEC", "OPENQ", "OPEX", "OPRN", "OR", "ORB", "ORDER", "ORTEX", "OS",
|
||||||
|
"OSCE", "OT", "OTC", "OTM", "OTOH", "OUCH", "OUGHT", "OUR", "OUT", "OVER",
|
||||||
|
"OWN", "OZZY", "PA", "PANIC", "PC", "PDT", "PE", "PEAK", "PEG", "PETA",
|
||||||
|
"PEW", "PFC", "PGHL", "PIMCO", "PITA", "PLAN", "PLAYS", "PLC", "PLN", "PM",
|
||||||
"PMI", "PNL", "POC", "POMO", "POP", "POS", "POSCO", "POTUS", "POV", "POW",
|
"PMI", "PNL", "POC", "POMO", "POP", "POS", "POSCO", "POTUS", "POV", "POW",
|
||||||
"PPI", "PR", "PRICE", "PROFIT", "PROXY", "PS", "PSA", "PST", "PT", "PTD",
|
"PPI", "PR", "PRICE", "PRIME", "PROFIT", "PROXY", "PS", "PSA", "PST", "PT",
|
||||||
"PUSSY", "PUT", "PWC", "Q1", "Q2", "Q3", "Q4", "QE", "QED", "QIMC",
|
"PTD", "PUSSY", "PUT", "PWC", "Q1", "Q2", "Q3", "Q4", "QE", "QED",
|
||||||
"QQQ", "QR", "RAM", "RATM", "RBA", "RBNZ", "RE", "REACH", "READY", "REAL",
|
"QIMC", "QQQ", "QR", "RAM", "RATM", "RBA", "RBNZ", "RE", "REACH", "READY",
|
||||||
"RED", "REIT", "REITS", "REKT", "RFK", "RH", "RICO", "RIDE", "RIGHT", "RIP",
|
"REAL", "RED", "REIT", "REITS", "REKT", "REPE", "RFK", "RH", "RICO", "RIDE",
|
||||||
"RISK", "RISKY", "ROCE", "ROCK", "ROE", "ROFL", "ROI", "ROIC", "ROTH", "RRSP",
|
"RIGHT", "RIP", "RISK", "RISKY", "RNDC", "ROCE", "ROCK", "ROE", "ROFL", "ROI",
|
||||||
"RSD", "RSI", "RT", "RTD", "RUB", "RUG", "RULE", "RUST", "RVOL", "SAGA",
|
"ROIC", "ROTH", "RPO", "RRSP", "RSD", "RSI", "RT", "RTD", "RUB", "RUG",
|
||||||
"SALES", "SAME", "SAVE", "SAYS", "SBF", "SBLOC", "SC", "SCALP", "SCAM", "SCHB",
|
"RULE", "RUST", "RVOL", "SAGA", "SALES", "SAME", "SAVE", "SAYS", "SBF", "SBLOC",
|
||||||
"SCIF", "SEC", "SEE", "SEK", "SELL", "SELLL", "SEP", "SESG", "SET", "SGD",
|
"SC", "SCALP", "SCAM", "SCHB", "SCIF", "SEC", "SEE", "SEK", "SELL", "SELLL",
|
||||||
"SHALL", "SHARE", "SHELL", "SHIT", "SHORT", "SHOW", "SHTF", "SI", "SICK", "SIGN",
|
"SEP", "SESG", "SET", "SFOR", "SGD", "SHALL", "SHARE", "SHEIN", "SHELL", "SHIT",
|
||||||
"SL", "SLIM", "SLOW", "SMA", "SMALL", "SO", "SOLIS", "SOME", "SOON", "SOUTH",
|
"SHORT", "SHOW", "SHTF", "SI", "SICK", "SIGN", "SL", "SLIM", "SLOW", "SMA",
|
||||||
"SP", "SPAC", "SPDR", "SPEND", "SPLG", "SPX", "SPY", "SS", "START", "STAY",
|
"SMALL", "SMFH", "SNZ", "SO", "SOLD", "SOLIS", "SOME", "SOON", "SOOO", "SOUTH",
|
||||||
"STEEL", "STFU", "STILL", "STOCK", "STOOQ", "STOP", "STOR", "STQQQ", "STUCK", "STUDY",
|
"SP", "SPAC", "SPDR", "SPEND", "SPLG", "SPX", "SPY", "SQUAD", "SS", "SSA",
|
||||||
"SUS", "SUV", "SWIFT", "SWING", "TA", "TAG", "TAKE", "TAM", "TBTH", "TEAMS",
|
"SSDI", "START", "STAY", "STEEL", "STFU", "STILL", "STOCK", "STOOQ", "STOP", "STOR",
|
||||||
"TED", "TERM", "TESLA", "TEXT", "TF", "TFNA", "TFSA", "THANK", "THAT", "THATS",
|
"STQQQ", "STUCK", "STUDY", "SUS", "SUSHI", "SUV", "SWIFT", "SWING", "TA", "TAG",
|
||||||
"THE", "THEIR", "THEM", "THEN", "THERE", "THESE", "THEY", "THING", "THINK", "THIS",
|
"TAKE", "TAM", "TBTH", "TEAMS", "TED", "TEMU", "TERM", "TESLA", "TEXT", "TF",
|
||||||
"TI", "TIA", "TIKR", "TIME", "TINA", "TITS", "TJR", "TL", "TL;DR", "TLDR",
|
"TFNA", "TFSA", "THAN", "THANK", "THAT", "THATS", "THE", "THEIR", "THEM", "THEN",
|
||||||
"TO", "TODAY", "TOLD", "TOO", "TOS", "TOT", "TOTAL", "TP", "TPU", "TRADE",
|
"THERE", "THESE", "THEY", "THING", "THINK", "THIS", "TI", "TIA", "TIKR", "TIME",
|
||||||
"TREND", "TRUE", "TRUMP", "TRUST", "TRY", "TSA", "TSP", "TSX", "TSXV", "TTM",
|
"TIMES", "TINA", "TITS", "TJR", "TL", "TL;DR", "TLDR", "TO", "TODAY", "TOLD",
|
||||||
"TTYL", "TWO", "UAW", "UCITS", "UGH", "UI", "UK", "UNDER", "UNTIL", "UP",
|
"TONS", "TOO", "TOS", "TOT", "TOTAL", "TP", "TPU", "TRADE", "TREND", "TRUE",
|
||||||
|
"TRUMP", "TRUST", "TRY", "TSA", "TSMC", "TSP", "TSX", "TSXV", "TTM", "TTYL",
|
||||||
|
"TWO", "UAW", "UCITS", "UGH", "UI", "UK", "UNDER", "UNITS", "UNTIL", "UP",
|
||||||
"US", "USA", "USD", "USMCA", "USSA", "USSR", "UTC", "VALID", "VALUE", "VAMOS",
|
"US", "USA", "USD", "USMCA", "USSA", "USSR", "UTC", "VALID", "VALUE", "VAMOS",
|
||||||
"VERY", "VFMXX", "VFV", "VI", "VIX", "VLI", "VOO", "VP", "VR", "VRVP",
|
"VEO", "VERY", "VFMXX", "VFV", "VI", "VISA", "VIX", "VLI", "VOO", "VP",
|
||||||
"VSUS", "VTI", "VUAG", "VW", "VWAP", "VWCE", "VXN", "VXUX", "WAGMI", "WAIT",
|
"VPAY", "VR", "VRVP", "VSUS", "VTI", "VUAG", "VW", "VWAP", "VWCE", "VXN",
|
||||||
"WALL", "WANT", "WATCH", "WAY", "WE", "WEB3", "WEEK", "WENT", "WEST", "WHALE",
|
"VXUX", "WAGER", "WAGMI", "WAIT", "WALL", "WANT", "WAS", "WATCH", "WAY", "WBTC",
|
||||||
"WHAT", "WHEN", "WHERE", "WHICH", "WHO", "WHOS", "WHY", "WIDE", "WILL", "WIRE",
|
"WE", "WEB", "WEB3", "WEEK", "WENT", "WERO", "WEST", "WHALE", "WHAT", "WHEN",
|
||||||
"WIRED", "WITH", "WL", "WON", "WOOPS", "WORDS", "WORTH", "WOULD", "WP", "WRONG",
|
"WHERE", "WHICH", "WHILE", "WHO", "WHOS", "WHY", "WIDE", "WILL", "WIRE", "WIRED",
|
||||||
"WSB", "WSJ", "WTF", "WV", "WWII", "WWIII", "X", "XCUSE", "XD", "XEQT",
|
"WITH", "WL", "WON", "WOOPS", "WORDS", "WORTH", "WOULD", "WP", "WRONG", "WSB",
|
||||||
"XMR", "XO", "XRP", "XX", "YEAH", "YEET", "YES", "YET", "YIELD", "YM",
|
"WSJ", "WTF", "WV", "WWII", "WWIII", "X", "XAU", "XCUSE", "XD", "XEQT",
|
||||||
"YMMV", "YOLO", "YOU", "YOUR", "YOY", "YT", "YTD", "YUGE", "ZAR", "ZEN",
|
"XI", "XMR", "XO", "XRP", "XX", "YEAH", "YEET", "YES", "YET", "YIELD",
|
||||||
"ZERO", "ZEV"
|
"YM", "YMMV", "YOIR", "YOLO", "YOU", "YOUR", "YOY", "YT", "YTD", "YUGE",
|
||||||
|
"YUPPP", "ZAR", "ZEN", "ZERO", "ZEV"
|
||||||
}
|
}
|
||||||
|
|
||||||
def extract_tickers(text):
|
def extract_tickers(text):
|
||||||
|
|||||||
50
yfinance_test.py
Normal file
50
yfinance_test.py
Normal file
@@ -0,0 +1,50 @@
|
|||||||
|
# yfinance_test.py
|
||||||
|
# A standalone script to diagnose the persistent yfinance issue.
|
||||||
|
|
||||||
|
import yfinance as yf
|
||||||
|
import logging
|
||||||
|
|
||||||
|
# Set up a simple logger to see detailed error tracebacks
|
||||||
|
logging.basicConfig(
|
||||||
|
level=logging.INFO,
|
||||||
|
format='%(asctime)s - %(levelname)s - %(message)s'
|
||||||
|
)
|
||||||
|
|
||||||
|
# A list of tickers to test. One very common one, and two from your logs.
|
||||||
|
TICKERS_TO_TEST = ["MSFT", "AEBI", "AEHR"]
|
||||||
|
|
||||||
|
print("--- Starting YFINANCE Diagnostic Test ---")
|
||||||
|
|
||||||
|
for ticker_symbol in TICKERS_TO_TEST:
|
||||||
|
print(f"\n--- Testing Ticker: {ticker_symbol} ---")
|
||||||
|
|
||||||
|
# --- Test 1: The Ticker().info method ---
|
||||||
|
try:
|
||||||
|
logging.info(f"Attempting to create Ticker object and get .info for {ticker_symbol}...")
|
||||||
|
ticker_obj = yf.Ticker(ticker_symbol)
|
||||||
|
market_cap = ticker_obj.info.get('marketCap')
|
||||||
|
if market_cap is not None:
|
||||||
|
logging.info(f"SUCCESS: Got market cap for {ticker_symbol}: {market_cap}")
|
||||||
|
else:
|
||||||
|
logging.warning(f"PARTIAL SUCCESS: .info call for {ticker_symbol} worked, but no market cap was found.")
|
||||||
|
except Exception:
|
||||||
|
logging.error(f"FAILURE: An error occurred during the Ticker().info call for {ticker_symbol}.", exc_info=True)
|
||||||
|
|
||||||
|
|
||||||
|
# --- Test 2: The yf.download() method ---
|
||||||
|
try:
|
||||||
|
logging.info(f"Attempting yf.download() for {ticker_symbol}...")
|
||||||
|
data = yf.download(
|
||||||
|
ticker_symbol,
|
||||||
|
period="2d",
|
||||||
|
progress=False,
|
||||||
|
auto_adjust=False
|
||||||
|
)
|
||||||
|
if not data.empty:
|
||||||
|
logging.info(f"SUCCESS: yf.download() for {ticker_symbol} returned {len(data)} rows of data.")
|
||||||
|
else:
|
||||||
|
logging.warning(f"PARTIAL SUCCESS: yf.download() for {ticker_symbol} worked, but returned no data (likely delisted).")
|
||||||
|
except Exception:
|
||||||
|
logging.error(f"FAILURE: An error occurred during the yf.download() call for {ticker_symbol}.", exc_info=True)
|
||||||
|
|
||||||
|
print("\n--- YFINANCE Diagnostic Test Complete ---")
|
||||||
Reference in New Issue
Block a user