شرح مكتبه urllib في بايثون

يمكن من خلال مكتبة urllib في بايثون الحصول علي محتوي صفحة أو التحقق من الصفحة ومرفة تفاصيل الصفحة .
يجب أولا : تثبيت المكتبة من Pypi عبر Pip

pip install urllib.request
مثال : في الكود التالي سيتم طباعة أكواد محتوي الصفحة لموقع Python عبر urllib.request.
import urllib.request<br /> MySite = urllib.request.urlopen(“https://www.python.org”)<br /> online = MySite.read()<br /> print(online)
تستطيع التحكم في عدد الحروف التي يتم طلبها من الصفحة ويمكن إستخدام read().decode(“utf-8”) لعمل ترميز.
import urllib.request<br /> with urllib.request.urlopen(“https://www.python.org”) as url:<br /> print(url.read(300))
التحقق من حالة الصفحة تعمل أو لا .
import urllib.request<br /> request = urllib.request.Request(“https://python.org”)<br /> request.add_header(“Cookie”, “cookie1=value1”)<br /> status = urllib.request.urlopen(request).status<br /> print(status)
عند طباعة محتوي الصفحة لموقع ما ولم يريد أن يرسل طلب للخادم وحدث خطأ ذلك لأن الخادم لا يسمح بلدخول أو الوصول التلقائي الآلي لأنة يكون مخصص للمتصفحات ليتمكن من تحليلها.
تستطيع التغلب علي هذا المشكل عبر إرسال User-Agent header وإرسال طلب.
import urllib.request<br /> Site = “https://www.python.org”<br /> headers = {}<br /> headers[“User-Agent”] = “Mozilla/5.0 (X11; Linux i686) AppleWebKit/537.17 (KHTML, like Gecko) Chrome/24.0.1312.27 Safari/537.17”<br /> request = urllib.request.Request(url, headers=headers)<br /> resp = urllib.request.urlopen(request)<br /> print(resp.read())
جمع معلومات عن الموقع عبر ()info في بايثون .
import urllib.request<br /> response = urllib.request.urlopen(“https://python.org”)<br /> print(response.info())<br /> print(response.info()[“content-type”])