在本指南中,我們將探討如何使用 Python 從法律網站上抓取律師數據,重點關注佐治亞州亞特蘭大的律師。這些資訊對於想要尋找律師、研究律師事務所或收集附近律師資料的人來說非常有價值。我們將使用流行的 Python 庫創建一個強大的抓取工具,可以幫助您收集亞特蘭大地區律師的資訊。
先決條件
在開始之前,請確保您已安裝以下軟體:
您需要安裝這些庫:
pip install requests lxml csv
設定抓取器
首先,讓我們匯入必要的庫並設定標頭和 cookie:
from lxml import html import os import csv import requests cookies = { ‘OptanonAlertBoxClosed’: ‘2024–08–29T14:38:29.268Z’, ‘_ga’: ‘GA1.2.1382693123.1724942310’, ‘_gid’: ‘GA1.2.373246331.1724942310’, ‘_gat’: ‘1’, ‘OptanonConsent’: ‘isIABGlobal=false&datestamp=Fri Aug 30 2024 00:17:14 GMT+0600 (Bangladesh Standard Time)&version=5.9.0&landingPath=NotLandingPage&groups=0_106263:1,0_116595:1,0_104533:1,101:1,1:1,0_116597:1,103:1,104:1,102:1,3:1,0_104532:1,2:1,4:1&AwaitingReconsent=false’, ‘_ga_JHNLZ3FY7V’: ‘GS1.2.1724954588.3.1.1724955436.0.0.0’, } headers = { ‘accept’: ‘text/html,application/xhtml xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7’, ‘accept-language’: ‘en-US,en;q=0.9,bn;q=0.8’, ‘cache-control’: ‘no-cache’, ‘dnt’: ‘1’, ‘pragma’: ‘no-cache’, ‘sec-ch-ua’: ‘“Chromium”;v=”128", “Not;A=Brand”;v=”24", “Google Chrome”;v=”128"’, ‘sec-ch-ua-mobile’: ‘?0’, ‘sec-ch-ua-platform’: ‘“Windows”’, ‘sec-fetch-dest’: ‘document’, ‘sec-fetch-mode’: ‘navigate’, ‘sec-fetch-site’: ‘cross-site’, ‘sec-fetch-user’: ‘?1’, ‘upgrade-insecure-requests’: ‘1’, ‘user-agent’: ‘Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/128.0.0.0 Safari/537.36’, }
提出請求
現在,讓我們向網站發出請求以獲取律師資料:
response = requests.get( ‘https://www.kslaw.com/people?capability_id=&locale=en&office_id=1&page=1&per_page=400&q=&school_id=&starts_with=&title_id', cookies=cookies, headers=headers, )
解析 HTML
我們將使用lxml來解析HTML內容:
webp = html.fromstring(response.content) all_people_elems = webp.xpath(“//*[@id=’people_grid’]/div[@class=’person’]”)
將資料保存到 CSV
讓我們建立一個函數來將抓取的資料儲存到 CSV 檔案中:
def save_csv(filename, data_list, isFirst=False, removeAtStarting=True): “””Save data to csv file””” if isFirst: if os.path.isfile(filename): if removeAtStarting: os.remove(filename) else: pass with open(f’{filename}’, “a”, newline=’’, encoding=’utf-8-sig’) as fp: wr = csv.writer(fp, dialect=’excel’) wr.writerow(data_list) # Initialize the CSV file people_file = f”kslaw_people.csv” save_csv(people_file, [‘URL’, ‘Name’, ‘Status’, ‘Fax’, ‘Telephone’, ‘Email’, ‘Address’], isFirst=True)
擷取律師資料
現在,讓我們循環遍歷律師元素並提取相關資訊:
for each_people in all_people_elems: name = each_people.xpath(“.//h2/a/text()”)[0] href = each_people.xpath(“.//h2/a/@href”)[0] full_url = f”https://www.kslaw.com{href}" if href else “URL not found” status = each_people.xpath(“.//p/text()”)[0].strip() fax = ‘ — ‘ address = ‘ — ‘ # Extract the Atlanta telephone number phone_numbers = each_people.xpath(“.//p[@class=’contacts’]/a[starts-with(@href, ‘tel:’)]/text()”) phone_numbers = [phone.strip() for phone in phone_numbers] phone_numbers_str = ‘, ‘.join(phone_numbers) if phone_numbers else “Phone numbers not found” # Extract the email address email = each_people.xpath(“.//p[@class=’contacts’]/a[contains(@href, ‘mailto:’)]/text()”) email = email[0].strip() if email else “Email not found” data_list = [full_url, name, status, fax, phone_numbers_str, email, address] save_csv(people_file, data_list) print(data_list)
結論
此 Python 腳本可讓您從特定法律網站抓取律師數據,重點關注喬治亞州亞特蘭大的律師。透過執行此腳本,您可以快速編制律師事務所清單並找到附近的律師。對於那些希望與律師聯繫或對亞特蘭大法律環境進行研究的人來說,這些數據非常寶貴。
請記住要負責任地使用這些數據,並遵守網站的服務條款和相關法律。始終尊重您所收集資料的個人的隱私。
對於那些尋求尋找律師或研究律師事務所的人來說,這些抓取的資料可以提供一個起點。然而,重要的是透過額外的研究來補充這些信息,例如閱讀評論、檢查律師協會記錄以及親自聯繫律師以確保他們適合您的法律需求。
透過利用 Python 和網頁抓取技術,您可以有效地收集喬治亞州亞特蘭大律師的信息,從而簡化在法律領域尋找法律代表或進行市場研究的過程。
我專注於建立響應式 React.js Web 應用程序,以滿足您的獨特需求。讓我們將您的願景變為現實!
免責聲明: 提供的所有資源部分來自互聯網,如果有侵犯您的版權或其他權益,請說明詳細緣由並提供版權或權益證明然後發到郵箱:[email protected] 我們會在第一時間內為您處理。
Copyright© 2022 湘ICP备2022001581号-3