requests와 httpx를 사용한 HTTP 요청
웹 페이지를 가져오고 리디렉션, 세션 및 헤더를 처리합니다.
requests와 httpx를 사용한 HTTP 요청은(는) CoddyKit의 무료 Python Academy 강의입니다. 이것은 4개 중 1번째 강의입니다. 아래에서 전체 강의를 무료로 읽을 수 있으며, 내장 코드 에디터와 24/7 AI 튜터와 함께 브라우저에서 직접 실습할 수 있습니다. 이 강의는 Python Academy 학습 경로의 일부이며, 진행 상황이 웹과 CoddyKit 앱에 동기화됩니다. Python Academy 강의에는 총 4개의 강의가 포함되어 있습니다.
requests 라이브러리
requests는 표준 동기 HTTP 라이브러리입니다. 단순하고 충분히 검증되었으며, 스크립트와 일회성 API 호출에 적합합니다.
# pip install requests
import requests
r = requests.get("https://api.github.com/users/octocat")
print(r.status_code) # 200
print(r.json()["login"]) # octocat쿼리 매개변수와 헤더
params=로 쿼리 매개변수를 전달하고 headers=로 사용자 지정 헤더를 전달합니다.
import requests
r = requests.get(
"https://api.example.com/search",
params={"q": "python", "page": 1},
headers={"Authorization": "Bearer my-token"}
)
print(r.url) # full URL with query stringJSON 본문으로 POST 요청 보내기
json=으로 JSON 데이터를 전송하면 requests가 콘텐츠 유형을 application/json으로 자동 설정합니다.
import requests
r = requests.post(
"https://api.example.com/users",
json={"name": "Alice", "email": "alice@example.com"}
)
print(r.status_code) # 201
print(r.json())세션 객체
여러 요청에서 헤더, 쿠키, 연결 풀을 유지하려면 requests.Session을 사용합니다.
import requests
with requests.Session() as s:
s.headers.update({"Authorization": "Bearer token"})
users = s.get("https://api.example.com/users").json()
profile = s.get("https://api.example.com/me").json()시간 초과와 재시도
항상 시간 초과를 설정합니다. 자동 재시도를 사용하려면 urllib3.util.retry.Retry와 HTTPAdapter를 함께 사용합니다.
import requests
from requests.adapters import HTTPAdapter
from urllib3.util.retry import Retry
s = requests.Session()
retry = Retry(total=3, backoff_factor=1)
s.mount("https://", HTTPAdapter(max_retries=retry))
r = s.get("https://api.example.com/data", timeout=5)오류 처리
r.raise_for_status()를 호출하면 4xx/5xx 응답에 대해 HTTPError가 발생합니다.
import requests
try:
r = requests.get("https://api.example.com/data")
r.raise_for_status()
data = r.json()
except requests.HTTPError as e:
print(f"HTTP error: {e.response.status_code}")
except requests.ConnectionError:
print("Network unreachable")파일 다운로드
모든 내용을 메모리에 불러오지 않으려면 stream=True로 대용량 파일을 스트리밍 다운로드합니다.
import requests
with requests.get("https://example.com/large.zip", stream=True) as r:
r.raise_for_status()
with open("large.zip", "wb") as f:
for chunk in r.iter_content(chunk_size=8192):
f.write(chunk)httpx — 최신 비동기 HTTP
httpx는 requests와 같은 API를 제공하면서 비동기를 지원합니다. FastAPI 앱과 비동기 작업 흐름에 사용합니다.
# pip install httpx
import httpx
# Synchronous:
r = httpx.get("https://httpbin.org/get")
print(r.json())
# Asynchronous:
import asyncio
async def main():
async with httpx.AsyncClient() as c:
r = await c.get("https://httpbin.org/get")
print(r.json())
asyncio.run(main())httpx AsyncClient
연결 풀을 공유하려면 여러 요청에서 하나의 AsyncClient를 함께 사용합니다. 시작할 때 만들고 종료할 때 닫습니다.
import httpx, asyncio
CLIENT: httpx.AsyncClient | None = None
async def startup():
global CLIENT
CLIENT = httpx.AsyncClient(timeout=10)
async def shutdown():
await CLIENT.aclose()인증 도우미
requests와 httpx 모두 인증 도우미를 지원합니다. 기본 인증에는 auth=(user, pass)를 사용하고, 토큰 인증에는 사용자 지정 Auth 클래스를 사용합니다.
import httpx
class BearerAuth(httpx.Auth):
def __init__(self, token): self.token = token
def auth_flow(self, request):
request.headers["Authorization"] = f"Bearer {self.token}"
yield request
async with httpx.AsyncClient(auth=BearerAuth("my-token")) as c:
r = await c.get("https://api.example.com/me")테스트에서 HTTP 모킹하기
테스트에서 HTTP 호출을 모킹하려면 httpx에는 respx를, requests에는 responses를 사용합니다.
# pip install respx
import httpx, respx, asyncio
@respx.mock
async def test_api():
respx.get("https://api.example.com/users").mock(
return_value=httpx.Response(200, json=[{"id":1}])
)
async with httpx.AsyncClient() as c:
r = await c.get("https://api.example.com/users")
assert r.json() == [{"id": 1}]빠른 확인
response.raise_for_status()는 무엇을 합니까?
복습
동기 HTTP에는 requests를 사용합니다. 비동기가 필요할 때는 httpx를 사용합니다. 항상 시간 초과를 설정하고, 연결 재사용에는 세션을 사용하며, raise_for_status()를 호출하고, 대용량 다운로드는 스트리밍합니다. 테스트에서는 respx 또는 responses로 HTTP를 모킹합니다.
자주 묻는 질문
“requests와 httpx를 사용한 HTTP 요청” 강의는 무료인가요?
네 — “requests와 httpx를 사용한 HTTP 요청” 전체 내용을 이 웹사이트에서 무료로 읽을 수 있습니다. 인터랙티브하게 실습하려면(내장 코드 에디터와 24/7 AI 튜터), CoddyKit PRO로 업그레이드하면 Python Academy 강의 전체를 잠금 해제할 수 있습니다. Python Academy 강의에는 총 4개의 강의가 포함되어 있습니다.
“requests와 httpx를 사용한 HTTP 요청”에서 뭘 배우나요?
웹 페이지를 가져오고 리디렉션, 세션 및 헤더를 처리합니다. 브라우저에서 직접 실행하는 실습 코드로 Python Academy을(를) 배우며, 24/7 AI 튜터가 강의를 진행하면서 질문에 답변해줍니다.
Python Academy을(를) 시작하는 데 경험이 필요한가요?
사전 경험은 필요하지 않습니다. CoddyKit의 Python Academy은(는) 초급자부터 고급 학습자까지를 위해 구성되어 있으므로, 여기서 시작하거나 처음부터 시작할 수 있으며 자신의 속도대로 진행할 수 있습니다. 이것은 4개 중 1번째 강의입니다.
“requests와 httpx를 사용한 HTTP 요청” 강의는 얼마나 걸리나요?
대부분의 CoddyKit 강의는 약 5~10분이 소요됩니다. 각 강의는 간결하고 인터랙티브하여 꾸준한 진행이 가능하며, 웹과 앱에서 중단한 부분부터 바로 시작할 수 있습니다.
이 Python Academy 강의에서 코드를 작성하고 실행할 수 있나요?
네. 모든 Python Academy 강의에는 내장 코드 에디터가 포함되어 있으므로, 브라우저에서 바로 실제 코드를 작성하고 실행한 후 즉시 AI 피드백을 받을 수 있습니다 — 로컬 설정이 필요 없습니다.
이 강의의 모든 강의
- requests와 httpx를 사용한 HTTP 요청
- BeautifulSoup으로 HTML 파싱하기
- Scrapy 스파이더 구축
- JavaScript와 스크래핑 방지 대책 처리