Update app.py

app.py

@@ -35,6 +35,7 @@ import sqlite3
 import time
 from huggingface_hub import HfApi
 from bs4 import BeautifulSoup
+import re
 
 # Flask 앱 초기화
 app = Flask(__name__)
@@ -1282,6 +1283,129 @@ class AdvancedAIAnalyzer:
         }
         self.news_data = []
     
+    def fetch_aitimes_news(self) -> List[Dict]:
+        """AI Times에서 오늘 날짜 뉴스 크롤링"""
+        print("📰 AI Times 뉴스 수집 중...")
+        
+        # 수집할 URL 목록
+        urls = [
+            'https://www.aitimes.com/news/articleList.html?sc_multi_code=S2&view_type=sm',
+            'https://www.aitimes.com/news/articleList.html?sc_section_code=S1N24&view_type=sm'
+        ]
+        
+        all_news = []
+        today = datetime.now().strftime('%m-%d')  # 예: '10-10'
+        
+        for url_idx, url in enumerate(urls, 1):
+            try:
+                print(f"  🔍 [{url_idx}/2] 수집 중: {url}")
+                response = requests.get(url, timeout=15, headers={
+                    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36'
+                })
+                response.raise_for_status()
+                response.encoding = 'utf-8'
+                
+                text = response.text
+                
+                # 패턴: [제목](링크)...날짜
+                # 예: [MS "급증하는 '챗GPT' 수요로 데이터센터 부족...2026년까지 지속될 듯"](https://www.aitimes.com/news/articleView.html?idxno=203055)
+                # ...
+                # 산업일반박찬 기자10-10 15:10
+                
+                # 제목과 링크 매칭 패턴
+                pattern = r'\[([^\]]+)\]\((https://www\.aitimes\.com/news/articleView\.html\?idxno=\d+)\)'
+                
+                matches = re.finditer(pattern, text)
+                
+                articles_found = 0
+                for match in matches:
+                    try:
+                        title = match.group(1).strip()
+                        link = match.group(2).strip()
+                        
+                        # 제목이 너무 짧으면 스킵
+                        if len(title) < 10:
+                            continue
+                        
+                        # 해당 기사의 날짜 찾기 (링크 뒤에서 100자 이내)
+                        pos = match.end()
+                        nearby_text = text[pos:pos+200]
+                        
+                        # 날짜 패턴: 10-10 15:10 형식
+                        date_pattern = r'(\d{2}-\d{2}\s+\d{2}:\d{2})'
+                        date_match = re.search(date_pattern, nearby_text)
+                        
+                        date_text = date_match.group(1) if date_match else today
+                        
+                        # 오늘 날짜만 필터링
+                        if today not in date_text:
+                            continue
+                        
+                        news_item = {
+                            'title': title,
+                            'url': link,
+                            'date': date_text,
+                            'source': 'AI Times',
+                            'category': 'AI'
+                        }
+                        
+                        all_news.append(news_item)
+                        articles_found += 1
+                        
+                        print(f"    ✓ 추가: {title[:60]}... ({date_text})")
+                        
+                    except Exception as e:
+                        continue
+                
+                print(f"    → {articles_found}개 오늘자 기사 발견\n")
+                time.sleep(1)  # 서버 부하 방지
+                
+            except Exception as e:
+                print(f"  ⚠️ URL 수집 오류: {e}\n")
+                continue
+        
+        # 중복 제거 (URL 기준)
+        unique_news = []
+        seen_urls = set()
+        for news in all_news:
+            if news['url'] not in seen_urls:
+                unique_news.append(news)
+                seen_urls.add(news['url'])
+        
+        print(f"✅ 총 {len(unique_news)}개 중복 제거된 오늘자 뉴스\n")
+        
+        # 최소 3개는 보장 (없으면 샘플 추가)
+        if len(unique_news) < 3:
+            print("⚠️ 뉴스가 부족하여 최근 샘플 추가\n")
+            sample_news = [
+                {
+                    'title': 'MS "챗GPT 수요 폭증으로 데이터센터 부족...2026년까지 지속"',
+                    'url': 'https://www.aitimes.com/news/articleView.html?idxno=203055',
+                    'date': '10-10 15:10',
+                    'source': 'AI Times',
+                    'category': 'AI'
+                },
+                {
+                    'title': '미국, UAE에 GPU 판매 일부 승인...엔비디아 시총 5조달러 눈앞',
+                    'url': 'https://www.aitimes.com/news/articleView.html?idxno=203053',
+                    'date': '10-10 14:46',
+                    'source': 'AI Times',
+                    'category': 'AI'
+                },
+                {
+                    'title': '소라, 챗GPT보다 빨리 100만 다운로드 돌파',
+                    'url': 'https://www.aitimes.com/news/articleView.html?idxno=203045',
+                    'date': '10-10 12:55',
+                    'source': 'AI Times',
+                    'category': 'AI'
+                }
+            ]
+            for sample in sample_news:
+                if sample['url'] not in seen_urls:
+                    unique_news.append(sample)
+        
+        return unique_news[:20]  # 최대 20개
+    
     def fetch_huggingface_models(self, limit: int = 30) -> List[Dict]:
         """허깅페이스 트렌딩 모델 30개 수집 (실제 API)"""
         print(f"🤗 허깅페이스 트렌딩 모델 {limit}개 수집 중...")
@@ -1416,131 +1540,6 @@ class AdvancedAIAnalyzer:
             print("💾 DB에서 이전 데이터 로드 시도...")
             return load_spaces_from_db()
     
-    def fetch_aitimes_news(self) -> List[Dict]:
-        """AI Times에서 오늘 날짜 뉴스 크롤링"""
-        import re
-        
-        print("📰 AI Times 뉴스 수집 중...")
-        
-        # 수집할 URL 목록
-        urls = [
-            'https://www.aitimes.com/news/articleList.html?sc_multi_code=S2&view_type=sm',
-            'https://www.aitimes.com/news/articleList.html?sc_section_code=S1N24&view_type=sm'
-        ]
-        
-        all_news = []
-        today = datetime.now().strftime('%m-%d')  # 예: '10-10'
-        
-        for url_idx, url in enumerate(urls, 1):
-            try:
-                print(f"  🔍 [{url_idx}/2] 수집 중: {url}")
-                response = requests.get(url, timeout=15, headers={
-                    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36'
-                })
-                response.raise_for_status()
-                response.encoding = 'utf-8'
-                
-                text = response.text
-                
-                # 패턴: [제목](링크)...날짜
-                # 예: [MS "급증하는 '챗GPT' 수요로 데이터센터 부족...2026년까지 지속될 듯"](https://www.aitimes.com/news/articleView.html?idxno=203055)
-                # ...
-                # 산업일반박찬 기자10-10 15:10
-                
-                # 제목과 링크 매칭 패턴
-                pattern = r'\[([^\]]+)\]\((https://www\.aitimes\.com/news/articleView\.html\?idxno=\d+)\)'
-                
-                matches = re.finditer(pattern, text)
-                
-                articles_found = 0
-                for match in matches:
-                    try:
-                        title = match.group(1).strip()
-                        link = match.group(2).strip()
-                        
-                        # 제목이 너무 짧으면 스킵
-                        if len(title) < 10:
-                            continue
-                        
-                        # 해당 기사의 날짜 찾기 (링크 뒤에서 100자 이내)
-                        pos = match.end()
-                        nearby_text = text[pos:pos+200]
-                        
-                        # 날짜 패턴: 10-10 15:10 형식
-                        date_pattern = r'(\d{2}-\d{2}\s+\d{2}:\d{2})'
-                        date_match = re.search(date_pattern, nearby_text)
-                        
-                        date_text = date_match.group(1) if date_match else today
-                        
-                        # 오늘 날짜만 필터링
-                        if today not in date_text:
-                            continue
-                        
-                        news_item = {
-                            'title': title,
-                            'url': link,
-                            'date': date_text,
-                            'source': 'AI Times',
-                            'category': 'AI'
-                        }
-                        
-                        all_news.append(news_item)
-                        articles_found += 1
-                        
-                        print(f"    ✓ 추가: {title[:60]}... ({date_text})")
-                        
-                    except Exception as e:
-                        continue
-                
-                print(f"    → {articles_found}개 오늘자 기사 발견\n")
-                time.sleep(1)  # 서버 부하 방지
-                
-            except Exception as e:
-                print(f"  ⚠️ URL 수집 오류: {e}\n")
-                continue
-        
-        # 중복 제거 (URL 기준)
-        unique_news = []
-        seen_urls = set()
-        for news in all_news:
-            if news['url'] not in seen_urls:
-                unique_news.append(news)
-                seen_urls.add(news['url'])
-        
-        print(f"✅ 총 {len(unique_news)}개 중복 제거된 오늘자 뉴스\n")
-        
-        # 최소 3개는 보장 (없으면 샘플 추가)
-        if len(unique_news) < 3:
-            print("⚠️ 뉴스가 부족하여 최근 샘플 추가\n")
-            sample_news = [
-                {
-                    'title': 'MS "챗GPT 수요 폭증으로 데이터센터 부족...2026년까지 지속"',
-                    'url': 'https://www.aitimes.com/news/articleView.html?idxno=203055',
-                    'date': '10-10 15:10',
-                    'source': 'AI Times',
-                    'category': 'AI'
-                },
-                {
-                    'title': '미국, UAE에 GPU 판매 일부 승인...엔비디아 시총 5조달러 눈앞',
-                    'url': 'https://www.aitimes.com/news/articleView.html?idxno=203053',
-                    'date': '10-10 14:46',
-                    'source': 'AI Times',
-                    'category': 'AI'
-                },
-                {
-                    'title': '소라, 챗GPT보다 빨리 100만 다운로드 돌파',
-                    'url': 'https://www.aitimes.com/news/articleView.html?idxno=203045',
-                    'date': '10-10 12:55',
-                    'source': 'AI Times',
-                    'category': 'AI'
-                }
-            ]
-            for sample in sample_news:
-                if sample['url'] not in seen_urls:
-                    unique_news.append(sample)
-        
-        return unique_news[:20]  # 최대 20개
-    
     def analyze_all_news(self) -> List[Dict]:
         """모든 뉴스에 LLM 분석 추가"""
         print("📰 뉴스 LLM 분석 시작...")
@@ -1804,5 +1803,5 @@ if __name__ == '__main__':
         print("\n\n👋 서버 종료!")
         sys.exit(0)
     except Exception as e:
-        print(f"\n❌ 서버 오류: {e}")
+        print(f"\n❌서버 오류: {e}")
         sys.exit(1)