ازگر کے ساتھ گوگل فنانس ڈیٹا کو کھرچنے کا طریقہ

pip install requests
pip install lxml

import requests

# براؤزر کے دورے کی نقل کرنے کے لئے ہیڈر کی وضاحت کریں اور سرور کے ذریعہ مسدود ہونے سے گریز کریں
headers = {
    'accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7',
    'accept-language': 'en-IN,en;q=0.9',
    'cache-control': 'no-cache',
    'dnt': '1',  # درخواست کے ہیڈر کو ٹریک نہ کریں
    'pragma': 'no-cache',
    'priority': 'u=0, i',
    'sec-ch-ua': '"Not/A)Brand";v="8", "Chromium";v="126", "Google Chrome";v="126"',
    'sec-ch-ua-arch': '"x86"',
    'sec-ch-ua-bitness': '"64"',
    'sec-ch-ua-full-version-list': '"Not/A)Brand";v="8.0.0.0", "Chromium";v="126.0.6478.114", "Google Chrome";v="126.0.6478.114"',
    'sec-ch-ua-mobile': '?0',
    'sec-ch-ua-model': '""',
    'sec-ch-ua-platform': '"Linux"',
    'sec-ch-ua-platform-version': '"6.5.0"',
    'sec-ch-ua-wow64': '?0',
    'sec-fetch-dest': 'document',
    'sec-fetch-mode': 'navigate',
    'sec-fetch-site': 'none',
    'sec-fetch-user': '?1',
    'upgrade-insecure-requests': '1',
    'user-agent': 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/126.0.0.0 Safari/537.36',
}

# یوروونکسٹ پیرس (ای پی اے) ایکسچینج پر بی این پی پریباس (ٹکر بی این پی) کے لئے گوگل فنانس پیج کے یو آر ایل کی وضاحت کریں
url = "https://www.google.com/finance/quote/BNP:EPA?hl=en"

# HTTP کو مخصوص ہیڈرز کے ساتھ URL سے درخواست کریں
response = requests.get(url, headers=headers)

# پراکسی کی ترتیبات کی وضاحت کریں
proxies = {
    'http': 'http://your_proxy_address:port',
    'https': 'https://your_proxy_address:port',
}

# HTTP کو مخصوص ہیڈر اور پراکسیوں کے ساتھ URL سے درخواست کریں
response = requests.get(url, headers=headers, proxies=proxies)

from lxml.html import fromstring

#LXML کے منجمد طریقہ کار کا استعمال کرتے ہوئے ردعمل کے HTML مواد کی تجزیہ کریں
parser = fromstring(response.text)

# آؤٹ پٹ ڈیٹا کو اسٹور کرنے کی فہرست
finance_data_list = []

# مالیاتی آلے کا عنوان نکالنا
title = parser.xpath('//div[@class="zzDege"]/text()')[0]

# اسٹاک کی موجودہ قیمت کو نکالنا
price = parser.xpath('//div[@class="YMlKec fxKbKc"]/text()')[0]

# تاریخ نکالنا
date = parser.xpath('//div[@class="ygUjEc"]/text()')[0]

# نکالا ہوا ڈیٹا اسٹور کرنے کے لئے لغت بنانا
finance_data = {
    'title': title,
    'price': price,
    'date': date
}
# فنانس_ڈیٹا_ لسٹ میں ڈیٹا کو شامل کرنا
finance_data_list.append(finance_data)

# فنانس_ڈیٹا_ لسٹ کو JSON فائل میں محفوظ کریں
output_file = 'finance_data.json'
with open(output_file, 'w') as f:
    json.dump(finance_data_list, f, indent=4)

try:
    # یو آر ایل کو گیٹ کی درخواست بھیجنا
    response = requests.get(url)

    # خراب ردعمل (4xx یا 5xx اسٹیٹس کوڈز) کے لئے ایک Httperror بلد کریں
    response.raise_for_status()

except requests.exceptions.HTTPError as e:
    # HTTP کی غلطیاں سنبھالیں (جیسے 404 ، 500 ، وغیرہ)
    print(f"HTTP error occurred: {e}")

except requests.exceptions.RequestException as e:
    # درخواست کے دوران پیش آنے والی کسی بھی دوسری مستثنیات کو سنبھالیں
    print(f"An error occurred: {e}")

import requests
from lxml.html import fromstring
import json
import urllib3
import ssl

ssl._create_default_https_context = ssl._create_stdlib_context
urllib3.disable_warnings()


# کھرچنے کے لئے یو آر ایل کی فہرست
urls = [
    "https://www.google.com/finance/quote/BNP:EPA?hl=en",
    "https://www.google.com/finance/quote/SPY:NYSEARCA?hl=en",
    "https://www.google.com/finance/quote/SENSEX:INDEXBOM?hl=en"
]

# براؤزر کے دورے کی نقل کرنے کے لئے ہیڈر کی وضاحت کریں
headers = {
    'accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7',
    'accept-language': 'en-IN,en;q=0.9',
    'cache-control': 'no-cache',
    'dnt': '1',
    'pragma': 'no-cache',
    'priority': 'u=0, i',
    'sec-ch-ua': '"Not/A)Brand";v="8", "Chromium";v="126", "Google Chrome";v="126"',
    'sec-ch-ua-arch': '"x86"',
    'sec-ch-ua-bitness': '"64"',
    'sec-ch-ua-full-version-list': '"Not/A)Brand";v="8.0.0.0", "Chromium";v="126.0.6478.114", "Google Chrome";v="126.0.6478.114"',
    'sec-ch-ua-mobile': '?0',
    'sec-ch-ua-model': '""',
    'sec-ch-ua-platform': '"Linux"',
    'sec-ch-ua-platform-version': '"6.5.0"',
    'sec-ch-ua-wow64': '?0',
    'sec-fetch-dest': 'document',
    'sec-fetch-mode': 'navigate',
    'sec-fetch-site': 'none',
    'sec-fetch-user': '?1',
    'upgrade-insecure-requests': '1',
    'user-agent': 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/126.0.0.0 Safari/537.36',
}

# پراکسی اختتامی نقطہ کی وضاحت کریں
proxies = {
    'http': 'http://your_proxy_address:port',
    'https': 'https://your_proxy_address:port',
}

# سکریپڈ ڈیٹا اسٹور کرنے کی فہرست
finance_data_list = []

# ہر یو آر ایل اور کھرچنے والے ڈیٹا کے ذریعے تکرار کریں
for url in urls:
    try:
        # یو آر ایل کو گیٹ کی درخواست بھیجنا
        response = requests.get(url, headers=headers, proxies=proxies, verify=False)
        
        # خراب ردعمل (4xx یا 5xx اسٹیٹس کوڈز) کے لئے ایک Httperror بلد کریں
        response.raise_for_status()
        
        # LXML کے منجمد طریقہ کار کا استعمال کرتے ہوئے ردعمل کے HTML مواد کی تجزیہ کریں
        parser = fromstring(response.text)
        
        # عنوان ، قیمت اور تاریخ نکالنا
        title = parser.xpath('//div[@class="zzDege"]/text()')[0]
        price = parser.xpath('//div[@class="YMlKec fxKbKc"]/text()')[0]
        date = parser.xpath('//div[@class="ygUjEc"]/text()')[0]
        
        # ذخیرہ شدہ ڈیٹا کو لغت میں اسٹور کریں
        finance_data = {
            'title': title,
            'price': price,
            'date': date
        }
        
        # لغت کو فہرست میں شامل کریں
        finance_data_list.append(finance_data)
    
    except requests.exceptions.HTTPError as e:
        # HTTP کی غلطیاں سنبھالیں (جیسے 404 ، 500 ، وغیرہ)
        print(f"HTTP error occurred for URL {url}: {e}")
    except requests.exceptions.RequestException as e:
        # درخواست کے دوران پیش آنے والی کسی بھی دوسری مستثنیات کو سنبھالیں
        print(f"An error occurred for URL {url}: {e}")

# فنانس_ڈیٹا_ لسٹ کو JSON فائل میں محفوظ کریں
output_file = 'finance_data.json'
with open(output_file, 'w') as f:
    json.dump(finance_data_list, f, indent=4)

print(f"Scraped data saved to {output_file}")