블록체인이 어떻게 빅데이터를 개선할 수 있나 (번역)

zero2one (40)in #kr • 7 years ago (edited)

클라우드 스토리지의 증가는 기업이 엄청난 양의 데이터를 수집하고 관리하는데 도움이 되었습니다. 데이터는 회사 시스템, IoT오브젝트와 인터넷 포럼과 같은 구조화되지 않은 소스로부터 온 것입니다. Hadoop과 같은 새로운 분석 도구는 해당 데이터를 이해하는데 도움이 됩니다.

그러나 단순히 데이터 및 분석 도구를 사용한다고해서 분석 결과가 의미있는 것은 아닙니다. 데이터로부터 진정한 통찰력을 얻는 것은 정확한 데이터에 달려 있습니다. 데이터 레이크로 데이터가 유입되고 빅데이터가 처리되는 과정에서 실수로 또는 의도적으로 오류가 발생할 수있는 경우들이 있습니다. 설문 조사에 따르면 경영진 중 3분의1만이 분석 프로그램을 신뢰하고있는 것으로 나타났습니다.

데이터에 대한 신뢰의 결여는 데이터를 수집 한 기업 내에서의 사용을 제한 할뿐만 아니라 회사가 다른 사람들과 데이터를 공유함으로써 수익을 창출 할 가능성을 제한합니다.

이러한 문제에 대한 해결책은 Bitcoin과 같은 암호화화폐를 지원하는 블록 체인 기술과 같이 예기치 못한 곳에서 찾을 수 있습니다.

[ 블록체인과 데이터 퀄리티 ]

기술로서 Bitcoin과 함께 블록 체인 (blockchain)이 유명 해졌고 대부분의 회사는 관련성이있을 경우 다른 지불 기술이라고 생각할 것입니다.

그러나 블록 체인을 보는 올바른 방법은 블록 체인을 기술 및 암호화화폐가 성공적으로 적용된 첫 번째 비즈니스 도메인으로 간주하는 것입니다. 블록 체인의 기능은 모든 산업 분야에 적용 할 수 있으며 특히 빅 데이터의 사용 및 공유를 제한하는 데이터 정확성 및 보안에 대한 우려를 해결합니다.

결국 블록 체인은 본질적으로 원장을 형성하는 분산 데이터베이스입니다. 원장에 대한 변경은 PoW이나 PoS과 같은 합의 메커니즘을 통해 도달한 블록 체인의 모든 참가자가 합의해야합니다. 또한 해시 알고리즘 및 타임 스탬프는 블록 체인의 데이터가 변경 불가능하고 검증 가능하며 추적 가능하도록 보장합니다. 그러나 저품질 데이터가 마술처럼 고품질 데이터로 변환되지는 않습니다. 쓰레기는 여전히 쓰레기를 의미합니다. 따라서 나쁜 데이터가 블록 체인에 기록되지 않도록 데이터를 획득 할 때 데이터를 검증하는 것이 중요합니다.

따라서 조직 내에서 블록 체인을 적용하려는 조직은 빅데이터가 정확하고 가장 높은 표준을 보장해야합니다. 한 번 블록 체인에서 더 이상 변경할 수 없기 때문입니다. 올바르게 수행되면 Blockchain이 더 나은 데이터를위한 촉매제가되어 더 나은 통찰력을 얻을 수 있습니다.

[ 블록체인에서의 데이터 획득 및 분석 ]

빅데이터에 블록 체인을 적용하는 방법을 처음부터 살펴 보는 곳은 금융입니다. 모든 Bitcoin 트랜잭션은 Bitcoin의 블록 체인에서 유지됩니다. Bitcoin은 익명성을 제공하지만 거래 데이터는 비공개가 아닙니다. Bitcoin은 가짜 익명입니다. 충분한 데이터가 있으면 Bitcoin 트랜잭션에서 패턴을 찾아서 결국 사람들과 연결시킬 수 있습니다. 최근에 Bloq가 구매 한 Skry와 같은 솔루션을 개발하는 여러 회사가 있습니다. Skry는 대형 데이터 Bitcoin 분석을 제공하여 기업이 범죄자(criminal counterparties)와의 거래하는 것을 피할 수 있도록 도와줍니다.

블록 체인을 단순히 데이터베이스로 보는 것은 금융뿐만 아니라 모든 산업에 적용 가능하다는 것을 의미합니다. 정교한 거래 데이터를 저장함으로써 모든 업계는 공급 업체 및 고객과의 상호 작용을 이해할 수 있습니다. 이러한 거래 데이터의 출현은 조직에 많은 가능성을 제공합니다.
이는 제품 수명주기 동안 사용량에 대한 데이터를 수집하기 위해 센서를 제품에 추가 할 때 특히 그렇습니다. Walmart는 이미 제품의 출처에서 소비자로의 추적성을 높여 식품 안전을 강화하기 위해 블록 체인 (blockchain)을 사용하고 있습니다. 월마트가 매일 40 페타 바이트의 데이터를 생산하므로 대용량 데이터를 관리하는 것이 매장의 지속적인 성공에 필수적이며 불변하고 검증 가능하며 추적 가능한 제품 데이터를 블록 체인에 적용하면 Walmart의 고객에게 식량 원천에 대한 통찰력을 제공하고 데이터의 신뢰성을 확보 할 수 있습니다.

특히 private한 데이터가 관련되어있을 때, 블록 체인은 많은 잠재력을 가지고 있습니다. 예를 들어, 의사 - 환자 상호 작용은 비공개로 유지하려는 많은 레코드를 생성하는 트랜잭션입니다. 오늘날의 전자 건강 기록은 데이터 공유를 어렵게 만들고 많은 오류를 포함하고 환자 데이터 보호가 부족한 것으로 알려져 있습니다. 의료 데이터 출처는 환자 및 다른 치료법에 대한 의약품의 영향에 대한 연구 가치있는 통찰력을 제공 할 수 있지만, 사람들은 이 데이터가 private하고 안전하게 유지되고 있는지 확인하고 싶어합니다. 영국에서는 Google DeepMind와 NHS가 환자 데이터를 암호화하고 안전하게 저장하기 위해 블록 체인을 사용하도록 파트너십을 맺고 있습니다. 이 데이터의 한 가지 용도는 연구 프로젝트에 사용 된 데이터가 연구에 사용할 수있는 적절한 권한을 갖도록하는 검증 가능한 데이터 감사(audit)를 만드는 것입니다.

[ 블록체인을 위한 빅데이터 도구 ]

빅데이터와 블록체인을 사용하고자하는 회사는 MongoDB 위에 구축 된 BigChainDB와 같이 이를 지원하기 위해 개발 된 새로운 도구를 발견하게 될 것입니다. 확장성, 쿼리 가능성 및 감사(audit) 내역을 비롯한 엔터프라이즈 개발에 필요한 기능을 추가함으로써 기업에서는 회사 표준을 준수하는 블록 체인 기반 응용 프로그램을보다 쉽게 구축 할 수 있습니다. 이러한 도구의 보급과 기업이 디지털 방식으로 생성되고 수집 된 데이터를보다 효율적으로 사용하도록 요구하는 디지털 변환에 대한 지속적인 추진과 함께 기업은 다른 산업과의 경쟁에서 효과적으로 경쟁하기 위해 블록 체인을 채택하게됩니다.

데이터 출처를 분석 할 수 있고 변경 가능하고 검증 가능하며 추적 가능한 데이터로 신뢰할 수 있다는 것이 패러다임 전환입니다. 블록 체인은 데이터 품질의 촉매제가 될 수 있으므로 빅데이터와 블록 체인의 융합은 조직과 소비자에게 엄청난 기회를 제공합니다.

이 기사는 원래 Datafloq에 의해 작성되었습니다.