본문 바로가기
카테고리 없음

Hadoop이 소프트웨어 정의 네트워크 및 가상화에 적합한 경우

by 요리 지식 당담가 2022. 2. 18.

Hadoop 및 기타 빅 데이터 분석 플랫폼은 기업이 정보 저장소를 보는 방식을 크게 변화시켰습니다.

이제 조직의 리더는 아무리 중요해 보이지 않더라도 모든 데이터 조각을 더 큰 퍼즐 조각으로 봅니다.

고급 분석 시스템을 통해 대량의 정보를 처리할 때 기업은 다양한 방식으로 운영을 개선하는 데 도움이 되는 새로운 통찰력을 얻을 수 있습니다. 통신의 경우 Hadoop은 고객의 참여도를 높이고 서비스를 보다 효과적으로 마케팅하며 비즈니스 성장 기회를 식별할 수 있는 기회를 제공합니다. 그러나 빅 데이터 도구의 우려 사항 중 하나는 기술의 총 소유 비용입니다. Hadoop 기반 분석 솔루션을 적절하게 실행하는 데 필요한 처리 능력의 양이 상당할 수 있습니다. 현재 모든 통신 네트워크가 이러한 스트레스가 많은 작업 부하를 처리하도록 구성된 것은 아닙니다. 캐리어는 소프트웨어 정의 네트워킹 도구를 사용하여 네트워크 리소스를 더 잘 활용하여 Hadoop 운영을 강화할 수 있습니다. SDN은 Hadoop 애플리케이션을 지원합니다 .

통신 베테랑이자 네트워크 컴퓨팅 기고가인 Richard Kagan은 Infoblox에서 수행한 실험을 강조했습니다 . 이 애플리케이션은 SDN의 동적 유연성을 활용하여 해당 트래픽이 발생한 HTTP 포트에 따라 다른 트래픽보다 먼저 특정 트래픽의 우선 순위를 지정할 수 있었습니다. 이 기능을 통해 연구원은 다른 트래픽 유형보다 중요한 데이터를 먼저 처리할 수 있었고 결과적으로 분석 도구를 더 빠르고 효율적으로 사용할 수 있었습니다.

Kagan은 "Hadoop과 같은 애플리케이션은 허용 가능한 성능을 달성하기 위해 분산 컴퓨팅에 의존합니다."라고 썼습니다. "분산 컴퓨팅에는 네트워크가 필요합니다. SDN을 통해 응용 프로그램이 분산 처리 리소스를 더 잘 사용할 수 있다면 빅 데이터 응용 프로그램은 훨씬 적은 수의 컴퓨팅 하드웨어를 사용하여 수용 가능한 성능을 제공할 수 있으므로 더 많은 조직에서 저렴하게 사용할 수 있습니다." Clemson University의 연구원들은 SDN 지원 네트워크에서 실행될 때 Hadoop 의 효율성을 테스트하기 위해 유사한 실험을 수행했습니다 . 그 결과 SDN 기술을 통해 사용자가 실시간으로 데이터 트래픽을 보고 필요에 따라 변경할 수 있다는 결론이 나왔습니다.

또한 연구팀은 정보의 흐름을 효과적으로 모니터링할 수 있어 빅 데이터 볼륨을 저장하는 데 필요한 방대한 수의 노드에 대한 감독을 강화할 수 있다는 사실을 발견했습니다. 통신 회사가 운영을 개선하기 위한 수단으로 데이터 분석을 점점 더 많이 고려함에 따라 Hadoop과 같은 엄격한 빅 데이터 프레임워크를 처리하기 위해 네트워크 기능을 구축해야 할 수도 있습니다. SDN은 고객 대면 서비스를 향상하고 가속화할 수 있을 뿐만 아니라 이동통신사 분석 프로젝트도 개선할 수 있는 기회를 제공합니다.