2024년 Python을 사용하여 Instagram 데이터를 스크랩하는 방법: 단계별 가이드

인스타그램 스크래핑을 사용하면 인스타그램 사용자로부터 공개적으로 사용 가능한 데이터를 수집할 수 있습니다. 데이터를 수동으로 추출하거나 스크래핑 도구 및 Instagram 스크래핑 서비스를 사용할 수 있습니다. 약력, 좋아요, 댓글, 이미지, 전화번호, 이메일 등과 같은 데이터를 스크랩할 수 있습니다. 하지만 먼저 이 데이터를 스크랩해야 하는 이유를 이해해야 합니다.

파이썬을 사용하여 Instagram을 스크랩하는 방법에 대해 자세히 알아보려면 원하는 섹션으로 자유롭게 이동하세요!

Instagram은 패션, 음식, 피트니스, 여행과 같은 다양한 주제를 통해 개인을 하나로 묶고 사람들을 끌어모으고 있습니다. 다음과 같은 특정 사용자 데이터를 스크랩할 수 있습니다:

스크래핑은 풍부한 데이터 세트를 제공하기 때문에 기업들은 매일 Instagram에서 데이터를 스크랩합니다. 또한 스크랩은 비즈니스에 도움이 됩니다:

Instagram 스크레이퍼를 사용하여 필요한 데이터에 액세스할 수 있습니다. 다음과 같은 방법으로 시간을 절약할 수 있습니다.

프로필에서 Instagram 데이터를 빠르게 스크랩하고 사용 가능한 모든 정보를 바로 사용할 수 있는 .csv 파일에 저장할 수 있습니다. 간단히 말해, 스크레이퍼를 사용하여 다음과 같은 작업을 수행할 수 있습니다:

pip 설치 인스톨로더

먼저 인스톨로더 패키지를 가져옵니다.

인스톨로더 가져오기

봇 = instaloader.Instaloader()

위의 클래스 인스턴스에는 bot.context 내에서 이 고유 인스턴스에만 해당하는 많은 기본 제공 속성이 포함되어 있습니다. 여기에는 다음이 포함됩니다:

profile = instaloader.Profile.from_username(bot.context, 'python_scripts')
print(type(profile))

이러한 프로필 객체에는 많은 속성이 있습니다. 아래 코드는 이러한 속성의 몇 가지 예를 보여줍니다.

# 인스타그램 핸들 및 프로필 ID
print("사용자 이름:", profile.username)
print("사용자 아이디", profile.userid)
# 팔로워 및 팔로워 수
print("# 팔로워 수:", profile.팔로워)
print("# 팔로워 수", profile.followees)

인스톨로더의 도움으로 특정 사용자 아이디의 팔로워 및 팔로워의 사용자 아이디 목록을 검색할 수 있습니다. 이 코드를 사용하려면 먼저 로그인해야 한다는 점을 기억하세요.

아래 코드를 사용하여 팔로워와 팔로워의 사용자 아이디를 검색할 수 있습니다.

# 모든 팔로워의 사용자 아이디 검색하기
followers = [profile.get_followers()의 팔로워에 대한 팔로워.사용자 아이디]

# 모든 팔로워의 사용자 아이디를 검색합니다.
followees = [profile.get_followees()의 팔로워에 대한 팔로워.사용자 아이디] # 모든 팔로워의 사용자 아이디를 검색합니다.

해시태그 = instaloader.Hash태그.from_name(bot.context, 'python')

파이썬 태그가 있는 게시물을 생성기 객체에 로드합니다.

python_posts = 해시태그.get_posts()

게시물을 반복해서 읽고 다운로드합니다.

for index, post in enumarate(python_posts, 1):
    bot.download_post(post, target=f'{hashtag.name}_{index}')

login = session.post('https://www.instagram.com/accounts/login/ajax/', data={'password': passwd, 'username': user}, allow_redirects=True)

다음과 같이 "프록시" 변수를 추가하면 됩니다:

login = session.post('https://www.instagram.com/accounts/login/ajax/', data={'password': passwd, 'username': user}, allow_redirects=True, proxies=proxies)

어디

proxies={
'http':'YOUR PROXY',
'https':'YOUR PROXY'
}

Instagram은 시장 분석가, 소셜 미디어 인플루언서, 기업 및 온라인 브랜드 사이에서 큰 인기를 얻고 있습니다. 다음과 같은 이유로 주거 및 데이터센터 프록시를 사용합니다:

따라서 소셜 미디어 관리자와 디지털 마케터는 Instagram에서 차단되는 것을 피하기 위해 프록시를 사용하여 서로 다른 IP 주소에서 여러 계정을 시뮬레이션합니다. 프록시는 Instagram 서버와 사용자 컴퓨터 사이의 중개자 역할을 하여 실제 사용자 IP 주소를 새 IP 주소로 마스킹합니다. 

전용 데이터센터 프록시는 무제한 대역폭 및 동시 연결, 간편한 통신을 위한 전용 HTTP 프록시, 보안 강화를 위한 IP 인증 등 다양한 기능을 제공합니다. 99.9%의 가동 시간으로 어떤 세션 중에도 전용 데이터센터가 항상 작동하므로 안심할 수 있습니다. 마지막으로 ProxyScrape 은 우수한 고객 서비스를 제공하며 영업일 기준 24~48시간 이내에 문제를 해결할 수 있도록 도와드립니다. 

ProxyScrape의 또 다른 기능은 로테이팅 기능입니다. 로테이팅 프록시를 사용하면 주거용 프록시가 IP 주소를 동적으로 변경하여 대상 서버가 프록시 사용 여부를 확인하기 어렵기 때문에 계정이 영구적으로 차단되는 것을 방지할 수 있습니다. 

그 외에도 무제한 대역폭과 동시 연결, 전용 HTTP/s 프록시, 프록시 풀에 있는 700만 개 이상의 프록시를 통해 언제든지 세션에서 프록시, 보안 강화를 위한 사용자 이름 및 비밀번호 인증, 마지막으로 국가 서버 변경 기능 등 다양한 기능이 있습니다. 사용자 아이디 인증에 국가 코드를 추가하여 원하는 서버를 선택할 수 있습니다. 

다음으로 가장 좋은 방법은 국가를 기준으로 프록시 서버를 변경하는 것입니다. IP 인증 또는 사용자 이름 및 비밀번호 인증 끝에 국가 ISO_CODE를 추가하기만 하면 됩니다.

파이썬을 사용하여 Instagram을 스크랩하는 방법에 대한 귀중한 인사이트를 얻으셨기를 바랍니다.