빅 데이터: 시간 경과에 따른 시나리오 변화, 그 영향 및 미래 전망

세계는 매일 점점 더 많은 데이터가 생성되면서 데이터 공간이 되어가고 있습니다. 한 연구에 따르면 사용자는 매일 5,500만 장의 사진, 3억 4,000만 개의 트윗, 10억 개의 문서를 업로드하며, 이는 총 250000조 개의 데이터에 해당합니다. 네, 잘 읽으셨습니다!

이제 문제는 기존 데이터 처리 응용 프로그램이 동일한 데이터에 적합하지 않을 때 이 많은 데이터를 관리하는 방법입니다. 계속해서 강화되는 데이터 생성은 우리가 빅 데이터 라고 부르는 새로운 기술을 탄생시켰습니다 . 이는 단순히 많은 데이터 가치를 저장, 관리 및 공유하는 새로운 기술입니다. 빅 데이터는 2000년대 초반에 모멘텀을 얻었지만 현재 시나리오에서 그 중요성은 급증하고 있습니다. 초심자를 위해, 그것은 세 가지 Vs- Volume , Velocity 및 Variety를 포함 합니다.

• 볼륨: 데이터는 비즈니스 거래, 소셜 미디어, 기계 간 데이터 및 기타 소스와 같은 여러 소스에서 수집됩니다. 함께, 그것은 Hadoop과 같은 새로운 기술을 통해 관리되는 거대한 데이터 수집으로 바뀝니다. 분산 컴퓨팅 환경에서 대량의 데이터를 처리할 수 있는 오픈 소스 소프트웨어입니다. 다시 말해, Hadoop을 사용하면 짧은 시간에 수많은 데이터를 원활하게 저장하고 관리할 수 있습니다.
• 속도: 데이터가 수신/수집되고 조치되는 속도입니다. Search Cloud Computing 은 "모든 빅 데이터 분석 프로젝트는 데이터 소스를 수집, 상관 관계 분석 및 분석한 다음 가장 중요한 쿼리를 기반으로 답변 또는 결과를 렌더링합니다. 이는 인간 분석가가 사용 가능한 데이터에 대해 자세히 이해하고 그들이 찾고 있는 답이 무엇인지 어느 정도 이해해야 함을 의미합니다.” 이제부터 적절한 데이터 스트리밍을 위해 거의 실시간 및 실시간 데이터 분석을 이해합니다.
• 다양성: 데이터는 일반적으로 기존 데이터베이스의 숫자 데이터와 문서, 이메일, 오디오, 비디오, 금융 거래 및 주식 시세 데이터를 각각 포함하는 정형 및 비정형 데이터와 같은 다양한 형태로 제공됩니다. 구조화된 데이터는 처리하기 위해 전제 조건이 필요하지 않지만 구조화되지 않은 데이터는 필요합니다. 처리하려면 대칭 구조가 필요합니다.

이러한 V는 빅 데이터의 전통적인 정의를 구성합니다. 그러나 현대 연구에서는 다음과 같은 추가 V를 추가했습니다.

• Veracity: 데이터의 진실성은 데이터의 의미를 나타냅니다. 즉, 데이터의 편향, 노이즈 및 비정상. 데이터 값이 폭격을 받고 있지만 모든 것이 중요한 것은 아닙니다. 추가 스트리밍을 위해 데이터를 수집하고 분석하는 단계에서 데이터를 필터링해야 합니다. 분명히 데이터 선별에는 구체적인 팀과 파트너가 필요하며 중요한 정보만 처리되고 중요하지 않은 정보는 무시됩니다.

참조:  빅 데이터의 13가지 상용 데이터 추출 도구

• 유효성: 데이터 유효성은 빅 데이터의 또 다른 측면입니다. 데이터의 진실성과 마찬가지로 유효성도 중요한 역할을 합니다. 의도된 사용에 대한 데이터의 정확성과 정확성을 나타냅니다. 필터링되면 추가로 분석 및 처리됩니다.

• 변동성: 빅 데이터 변동성은 시간 및 유용성 측면에서 데이터의 유효성을 나타냅니다. 이 측면에는 데이터의 유효 기간 및 저장 기간과 같은 변형이 포함됩니다.

• 가변성: 가변성은 의미가 지속적으로 변하는 데이터를 나타냅니다. 더 자주 이것은 소셜 미디어의 추세 또는 특정 기간과 관련된 정보와 같이 특정 시간에 나타나는 데이터에서 발생합니다. 이러한 종류의 데이터는 중요도에 따라 분석 및 처리됩니다.

빅 데이터가 시간 경과에 따라 시나리오와 그 영향을 어떻게 변화시켰는지

계속 증가하는 데이터 수집은 조직이 빅 데이터 기술을 채택하는 것을 불변하게 만듭니다. 현재 빅데이터는 특정한 변화를 가져왔습니다. 분명히 우리는 이러한 변화를 기술의 시대와 시대라고 부르기도 합니다.

• 소셜 네트워크/미디어: 여러 매체를 통한 소셜 네트워킹은 현재 주류가 되었습니다. 수십억 명의 사람들이 소셜 미디어를 통해 주변 사람들과 연결하고 워드 비즈니스, 광고 및 교류 등을 전파합니다. 이후 소셜 미디어와 네트워크를 통해 엄청난 데이터가 생성되며 빅 데이터의 표현입니다.

참조:  26가지 빅 데이터 분석 기법에 대한 통찰력

• 데이터 소스 - 공개/공개 데이터: 많은 민간 및 공공 기관에서 이전과 달리 사용자가 읽거나 사용할 수 있는 데이터를 많이 만들었습니다. 더 자주 이 정보는 지역 및 국가 데이터, 경제 활동 관련 데이터, 공공 서비스, 인구 통계 또는 환경 현상, 정보 이동성 및 운송에 대한 정보의 구성 요소입니다.

• 사물 인터넷: 시대의 모든 제품과 요소에는 전자 장치의 소형화와 보급형, 모바일 및 "유비쿼터스" 연결 기능이 포함되므로 사물을 디지털 방식으로 제어할 수 있습니다. 예를 들어, 자동차와 기타 국내 제품은 어떤 면에서 인터넷과 기술을 중심으로 합니다. 또한 Ingenium Magazine 은 "우리 환경의 모든 부분은 행동 및 사회적 현상(예: 도시 지역의 교통, 사람 흐름 등) 모두에서 자연 현상(예: 산사태, 기후 변화, 자연 현상)에 대한 데이터 및 정보를 수집하기 위해 "풍부화"될 수 있다고 말합니다. , 안전 수준 및 커뮤니티 모니터링). 오늘날 세계의 모든 영역은 디지털화될 수 있으며 거의 ​​무제한의 데이터 및 정보 소스가 될 수 있습니다.”

• 인터넷, 웹, 전자 상거래 및 앱: 오늘날 생성되는 정보는 인터넷/웹 또는 급증하는 앱에서 보다 구체적으로 사용할 수 있습니다. 빅데이터의 일부로 형성되면서 인터넷/웹, 전자상거래, 앱 등도 무시할 수 없다. 사용자가 데이터 사용과 관련하여 일반적으로 의존하는 영역입니다.

빅 데이터의 영향

빅 데이터가 시나리오를 바꾸면서 특정 산업이 큰 영향을 미쳤습니다. 이러한 영향 중 일부는 업계에 따라 아래에 나열되어 있습니다.

• 마케팅에 대한 영향: 마케팅과 관련하여 빅 데이터는 소비자 참여, 유지 및 충성도를 높이고 마케팅 전략에서 최적의 결과/성과를 도출하는 데 도움이 됩니다. 빅데이터가 마케팅 시나리오를 완전히 바꿔놓았다고 해도 과언이 아닙니다.

이미지 출처: forbes.com

• 기업에 미치는 영향: Matisia Consultants의 CEO 겸 설립자인 Kristina Roth는 "기업은 빅 데이터를 통해 각 개선 프로젝트에서 교훈을 배우고 다음 프로젝트에 통합함으로써 더 빠르고 더 나은 개선을 더 빠르고 더 저렴한 비용으로 배울 수 있습니다."라고 말합니다. 또한 조직이 데이터를 안전하게 보호하는 데 도움이 되었습니다. 설문 조사 중 하나는 다음과 같은 측면을 촉발했습니다.
  • IT 기업의 64%가 빅 데이터에 막대한 투자를 하고 있습니다.
  • 응답자의 69%는 '빅데이터가 중요하고 우선순위가 높다고 확인했습니다.
  • CIO의 75%는 빅이 생산성과 전반적인 효율성에 긍정적인 영향을 미쳤다고 밝혔습니다.
  • 참가자의 70%는 자신의 비즈니스가 빅 데이터 투자에 긍정적인 영향을 미쳤다고 밝혔습니다.

 

• 사회에 미치는 영향: 무엇보다도 빅 데이터는 일상 생활과 사회에도 영향을 미치고 있습니다. 좀 더 명확하게 하기 위해 우리는 인티테크를 통해 모든 것을 탐색하는 자율주행 자동차와 같이 지능으로 삶을 더 쉽게 만드는 새로운 기술을 관찰할 수 있습니다. 가까운 장래에 문제가 표면화되기 전에 해결될 것입니다. 지능형 앱과 가젯도 기존 앱과 교체될 가능성이 높습니다.

이 모든 것 외에도 빅 데이터는 의료, 소셜 미디어 마케팅, 광고 및 기타 경제 측면에도 큰 영향을 미칩니다.

참조:  빅 데이터 회색 영역 – 해야 할 일과 하지 말아야 할 일

빅 데이터의 미래 전망

이 모든 것을 말하지만, 점점 더 많은 회사가 가까운 시일 내에 빅 데이터를 채택할 것입니다. 또한 연구자들은 향후 빅데이터에 대한 다양한 전망도 내놓고 있다. 다음은 그 중 일부입니다.

• 운영에서 분석으로의 전환: 기존 기술이 데이터 스트리밍 운영에 도움이 되었지만 향후에는 캡처하는 도메인 전반에서 데이터를 분석하는 경향이 더 커질 것입니다. 즉, 실시간 스트리밍은 빅 데이터의 미래 측면이 될 것입니다.

• 개인 정보 보호는 도전 과제가 될 것입니다 . 중단 없이 데이터 증가가 계속 심화될 때 이 신생 기술에서 개인 정보 보호는 도전 과제가 될 것입니다. 이는 사용자 정보가 필요하고 중요한 역할을 하는 은행, 소셜 미디어 등과 같은 산업에서 더욱 그러할 것입니다.

• 기업은 이를 통해 엄청난 혜택을 보게 될 것입니다. 위에서 논의한 바와 같이 기업은 빅 데이터의 혜택을 받고 있습니다. 이것은 앞으로 더욱 그럴 것입니다. 향상된 최적화 및 생산성이 주요 이점이 될 것입니다. 보다 구체적으로 기업은 4,300억 달러를 생산성 이점으로 볼 것으로 예상됩니다.

참조:  빅 데이터에 대한 놀라운 사실 40가지

지금 우리가 바라보고 있는 빅 기술이 있다면, 빅데이터 외에는 없을 것입니다. 즉, 빅 데이터는 시간이 지남에 따라 개선되고 더 나은 세상을 위해 혁명을 일으킬 것입니다.