모든 영화 애호가를위한 원 스톱 목적지는 물론 Netflix입니다. 하지만 좋아하는 영화를보고 있는데 가끔 버퍼링이 계속된다면 어떨까요? 응용 프로그램을 종료하고 다른 옵션을 선택하기 만하면됩니다. 그러나 수백만 사용자의 트래픽을 어떻게 신속하게 관리합니까? 감사합니다. . 이 기사에서는 Netflix에서 Python을 사용하는 방법을 살펴 보겠습니다.
이 기사를 채우는 주제에 대해 간단히 살펴 보겠습니다.
그럼 시작하겠습니다. :)
Netflix 소개
Netflix는 주문형 비디오 (VOD) 서비스를 제공하는 미국 회사입니다. 캘리포니아 로스 가토 스에 본사를 둔 Netflix는 전 세계적으로 약 1 억 4,800 만 명의 구독자를 보유하고 있지만 그 수는 매일 계속 증가하고 있습니다. 약 20 년 동안 Netflix는 전 세계에서 가장 큰 TV 시리즈 및 영화의 '클랜의 왕'으로 부상했습니다. 미국에서 가장 빠르게 성장하는 브랜드이고 2019 년에 205 억 달러의 매출을 올리는 것만으로도 '시선을 사로 잡는 사람'이되기에 충분하므로 기술 분야에서 모든 것을 흥미롭게 할 수 있습니다.
동일한 관심 분야를 기반으로 Netflix는 가장 유행하는 언어를 사용하는 방법을 공개했습니다. 파이썬 , 인프라.
그럼 이제 Netflix가 실제로 Python을 어떻게 사용하는지 살펴 보겠습니다.
Netflix는 Python을 어떻게 사용하나요?
“우리는 자금을 조달 할 콘텐츠 결정부터 최종 비디오를 제공하는 CDN 운영에 이르기까지 전체 콘텐츠 수명주기 동안 Python을 사용하여 1 억 4,400 만 명의 회원에게 제공합니다.”– Netflix 엔지니어
범위 f관리 도메인을 안정성 및 데이터 과학 ...에 등, Netflix는 비즈니스의 거의 모든 분야에 Python을 사용합니다.
이제 방법에 대해 자세히 살펴 보겠습니다. Netflix의 다양한 도메인에서 사용됩니다.
연결 열기 :
Netflix에서 사용하는 CDN (Content Delivery Network)은 Open Connect입니다. Open connect는 기본적으로 '재생'버튼을 클릭하면 그림이 나타납니다. 최종 사용자에게 전달되는 모든 콘텐츠는이 CDN에서 관리합니다.
Open connect는 Python으로 작성된 다른 소프트웨어 시스템을 설계, 구축 및 운영해야합니다. 뿐만 아니라이 CDN의 기반이되는 네트워크 장치는 Python이 네트워크 문제를 해결하는 데 탁월하기 때문에 Python 응용 프로그램입니다.
수요 엔지니어링 팀 :
수요 엔지니어링 팀은 Netflix 클라우드의 지역 장애 조치, 트래픽 관리, 용량 운영 관리 (콘텐츠를 서비스 가능하게 만들 수있는 한도 관리) 및 차량 효율성을 처리합니다. 이 팀에서 사용하는 Python의 요소는 다음과 같습니다.
NumPy 및 SciPy :
과 SciPy 과학 컴퓨팅에 사용되는 라이브러리입니다. Netflix는 이러한 Python 라이브러리를 사용하여 수치 분석을 수행함으로써 지역 장애 조치를 관리 할 수 있습니다.
Boto3 :
Boto3는 소프트웨어 개발 키트 (SDK)입니다. Python 용. 이를 통해 Python 개발자는 Python을 AWS에 통합하여 인프라에서 개발할 수 있습니다.
자바에서 mysql 데이터베이스를 연결하는 방법
RQ (Redis 대기열) :
이것은 대기열에있는 작업을 추적하고 실행을 허용하여 비동기 워크로드의 관리를 허용하는 Python 라이브러리입니다.
플라스크:
마지막으로 Netflix는 Flask (Python 웹 개발 라이브러리) API를 사용하여 이전 세그먼트를 모두 결합합니다.
Netflix는 오픈 소스 웹 앱으로, Python 개발과 함께 nteract (Jupyter의 확장) 대규모로. Jupyter는 데이터 분석에 널리 사용되는 것으로 알려져 있습니다. 운영 데이터 분석 및 시각화에서 매우 잘 작동하여 용량 회귀를 감지하는 데 도움이됩니다.
기계 학습 인프라 :
개인화 알고리즘 생성부터 사용 사례 파악에 이르기까지 다양합니다. 개인화 알고리즘은 Netflix 표준에 따라 기계 학습 모델을 훈련하는 데 도움이됩니다. 개인화 된 권장 사항, 일상적인 개요, 라벨 생성 등을 제공합니다.
학습에 필요한 라이브러리 심층 신경망 아르 TensorFlow , 단단한 , 및 파이 토치 이므로 XGBoost 과 LightGBM Gradient Boosted Decision Trees.또한 팩트 로깅, 기능 추출, 게시 등과 같은 작업 영역과 결합하는 데 도움이되는 몇 가지 상위 수준 라이브러리를 개발했습니다.이 모든 것 외에도 Netflix는 MetaFlow 기계 학습 프로젝트를 만들 수 있습니다.
'Metaflow는 Python의 한계를 뛰어 넘습니다. 우리는 잘 병렬화되고 최적화 된 Python 코드를 활용하여 10Gbps에서 데이터를 가져오고, 메모리에서 수억 개의 데이터 포인트를 처리하고, 수만 개의 CPU 코어에 대한 계산을 조정합니다.'– Netflix
빅 데이터:
그만큼 팀은 ETL (추출, 변환,로드) 및 Adhoc 파이프 라인을 실행할 책임이 있습니다. 이 오케스트레이션의 주요 부분은 Python으로 작성되었습니다. 이 팀은 papermill과 함께 Jupyter Notebook에서 실행되는 스케줄러를 사용하여 템플릿으로 작업 유형을 생성합니다. , 곧 등
이 외에도 팀은 완전히 Python에 구축 된 이벤트 기반 플랫폼을 만들었습니다. 그들은 다수의 이벤트를 생성하고이를 하나의 이벤트로 결합하여 Netflix가 이벤트를 필터링, 반응 및 라우팅 할 수 있도록했습니다. 피지 니 Genie (특수 작업 실행 서비스)와 인터페이스하는이 인프라의 일부이기도합니다.
과학적 실험 :
이것은 과학 실험 팀이 만든 플랫폼입니다. A / B 테스트 다른 실험과 함께. 여기에서 과학자와 엔지니어는 데이터, 통계 및 시각화 분야에서 새로운 혁신을 제시 할 수 있습니다.
파이썬 여기에 구현 된 것은 메트릭 저장소 기반으로 PyPika 재사용 가능한 매개 변수화 된 쿼리를 작성할 수 있습니다. 통계 부문의 경우 PyArrow 과 RPy2 Python 또는 R에서 통계를 계산하는 데 사용됩니다. 줄거리 시각화에 도움이됩니다.
비디오 인코딩 / 미디어 클라우드 엔지니어링 :
이 팀은 Netflix 카탈로그의 인코딩 및 재 인코딩 작업을 담당합니다. Python은 다음과 같은 약 50 개의 프로젝트에 사용됩니다. VMAF (Video Multi-Method Assessment Fusion) 및 MezzFS (메 자닌 파일 시스템), 컴퓨터 비전 솔루션 (이미지 거래) 사용 궁수 등
Netflix 애니메이션 및 NVFX :
Python은 Netflix의 모든 애니메이션 및 시각 효과 (VFX)의 기반을 형성합니다. 모든 Maya 및 Nuke 통합은 Python에서 수행됩니다.
IS (정보 보안) :
Netflix는 자동 치료, 보안 자동화, 위험 분류 등에 Python 기반 IS 시스템을 사용합니다.이 팀의 가장 활발한 오픈 소스 Python 프로젝트는 다음과 같습니다. 보안 원숭이 . Netflix에서도 신을 하다 (Bastion의 Lambda Ephemeral SSH 서비스) 보호 SSH (Secure Shell) 리소스. RepoKid 부여하는 데 사용됩니다 이미 권한 및 TLS 인증서는 Lemur를 통해 할당됩니다. 이 두 작업은 주로 Python에 의존합니다.
자바의 인스턴스 변수는 무엇입니까
모니터링 및 자동 치료 :
이 팀을 Insight Engineering 팀이라고합니다. 도구를 만들고 실행합니다.운영 통찰력, 진단, 자동 수정 및 변경을 위해. 대부분의 서비스에서이 팀은 Spectator Python 클라이언트 라이브러리와 같은 Python을 사용합니다. 이 라이브러리는 차원 시계열을 기록하는 데 사용됩니다. 이러한 라이브러리와 함께 Winston 및 Bolt와 같은 제품도 Python 프레임 워크를 기반으로 구축됩니다. , Gunicorn 및 Flask-RestPlus.
요약하면 Python이 Netflix의 원동력이라고 쉽게 주장 할 수 있습니다. 이것으로 'Netflix가 Python을 사용하는 방법'에 대한이 블로그의 끝에 도달했습니다. 논의 된 내용을 모두 이해 하셨기를 바랍니다.
다양한 응용 프로그램과 함께 Python에 대한 심층적 인 지식을 얻으려면 라이브에 등록 할 수 있습니다. 연중 무휴 지원 및 평생 액세스.
질문이 있으십니까? 이 'Python이 Netflix를 사용하는 방법'블로그의 댓글 섹션에 언급 해 주시면 가능한 한 빨리 연락 드리겠습니다.