‫Được chứ.
‫Vì vậy, trong video trước, chúng ta đã hiểu rằng một kỹ sư dữ liệu về cơ bản tạo ra đường dẫn dữ
‫liệu này cho chúng ta, để những người như nhà khoa học dữ liệu có sẵn dữ liệu để làm việc.
‫Nhưng tôi muốn sử dụng một ví dụ khác.
‫Hãy giả sử rằng Keiko Corp. có nhu cầu, và nhu cầu đó là về nước.
‫Các nhân viên cần nước.
‫Để làm việc chăm chỉ, phải không?
‫Vì vậy, hãy coi đây là một vấn đề mà một kỹ sư dữ liệu giải quyết.
‫Bây giờ, chịu đựng với tôi.
‫Chúng ta sẽ nói về nước trong vài phút, nhưng tôi hứa nó liên quan đến dữ liệu.
‫Bạn thấy đấy, điều đầu tiên để chúng ta lấy nước là tỷ lệ mưa.
‫Chúng ta cần mưa.
‫Và điều này tương tự với các nguồn dữ liệu mà chúng tôi đã có.
‫Đó là các trang web, điện thoại di động, máy ảnh, ô tô, máy bay không người lái.
‫Tất cả những điều này đang thu thập dữ liệu.
‫Hạt mưa là vậy đó.
‫Vì vậy, để chúng tôi có được nước cho nhân viên của mình, chúng tôi phải lấy nước từ một nơi nào đó.
‫Và nước đến từ mưa.
‫Tiếp theo, nước được thu thập vào các con sông và suối khác nhau từ khắp nơi, từ khắp nơi trên thế giới, giống như dữ liệu
‫từ tất cả các nơi khác nhau.
‫Các dòng nước này bắt đầu hình thành.
‫Và điều gì xảy ra tiếp theo?
‫Chà, những dòng nước này biến thành hồ.
‫Tất cả chúng đều chảy vào một loại hồ nào đó.
‫Và cái hồ đó đứng yên.
‫Nhưng một lần nữa, chúng tôi với tư cách là một công ty chỉ muốn nhân viên có nước.
‫Rõ ràng là chúng ta có một cái đập trên một cái hồ và cái đập đó trên một cái hồ hoặc một hệ thống để sử dụng cái hồ đó.
‫Chà, chúng tôi vận chuyển nước đó đến một nơi nào đó như khu vực vệ sinh lọc để chúng tôi có thể làm
‫sạch nước, khử trùng, để mọi người uống được an toàn.
‫Vì vậy, chúng tôi xử lý nước đã được thu thập đó.
‫Và cuối cùng, sau tất cả những điều đó, chúng tôi tạo ra tất cả hệ thống ống nước và đường ống để chúng tôi cung cấp nước
‫cho Keiko Corp.
‫Đó là cách chúng tôi đáp ứng nhu cầu cung cấp nước cho nhân viên của KeyCorp.
‫Và đây là cách dữ liệu hoạt động.
‫Và đây là những gì một kỹ sư dữ liệu xây dựng.
‫Một kỹ sư dữ liệu.
‫Bắt đầu với cái mà chúng tôi gọi là nhập dữ liệu.
‫Đó là thu thập dữ liệu từ nhiều nguồn khác nhau.
‫Và chúng tôi thu thập tất cả các nguồn dữ liệu khác nhau này và nhập nó vào cái mà chúng tôi gọi là hồ dữ liệu.
‫Hồ dữ liệu là một tập hợp tất cả dữ liệu này vào một vị trí.
‫Từ đó, chúng tôi có thể để lại hồ như nó vốn có.
‫Nhưng có một vấn đề.
‫Chúng tôi không muốn hồ bị tràn, khô cạn.
‫Chúng ta cần phải quản lý hồ này bằng cách nào đó.
‫Chúng tôi không muốn làm ngập ngôi làng.
‫Chúng ta cần những con đập.
‫Chúng tôi cần các đường ống dẫn đến các ngôi nhà.
‫Chúng ta cần lọc và làm sạch nước và chúng ta cần đường ống dẫn đến các ngôi nhà.
‫Vì vậy, sau khi chúng tôi nhập dữ liệu này từ nhiều nguồn khác nhau, chúng tôi thu thập dữ liệu đó trong một hồ dữ liệu.
‫Sau đó, chúng tôi thực hiện một cái gì đó được gọi là chuyển đổi dữ liệu đang chuyển đổi dữ liệu từ định dạng này sang định dạng
‫khác, thường thành một thứ mà chúng tôi gọi là kho dữ liệu.
‫Kho dữ liệu là nơi lưu trữ dữ liệu có thể truy cập được, hữu ích cho doanh nghiệp.
‫Đó là, mặc dù hồ thu thập rất nhiều nước, rất nhiều dữ liệu, nhưng đó là loại ở khắp nơi.
‫Kỹ sư dữ liệu xem xét dữ liệu này và hình thành hoặc sử dụng các phần của dữ liệu hữu ích và đưa nó
‫vào kho dữ liệu để các bộ phận khác của doanh nghiệp có thể sử dụng lại.
‫Một cách hay để nghĩ về nó là data lake là một tập hợp dữ liệu thô.
‫Mục đích mà chúng ta vẫn chưa biết phải làm gì với kho dữ liệu là vị trí cho dữ liệu có cấu trúc,
‫đã được lọc, đã được xử lý và có mục đích cụ thể.
‫Đó là, chúng tôi có dữ liệu hữu ích cho doanh nghiệp ở đây.
‫Vì vậy, điều đó có nghĩa là các hồ dữ liệu thường được tổ chức ít hơn và ít lọc dữ liệu hơn một thứ như
‫kho dữ liệu.
‫Bây giờ, tại sao các doanh nghiệp muốn làm điều đó?
‫Đầu tiên, việc phân tích dữ liệu dễ dàng hơn rất nhiều khi nó được tổ chức tốt.
‫Chúng tôi cũng có thể có dữ liệu ở đây mà chúng tôi không thực sự cần.
‫Chúng tôi cũng tiết kiệm không gian lưu trữ, phải không?
‫Bởi vì chúng tôi không phải lưu trữ tất cả dữ liệu này và chỉ lưu trữ dữ liệu có cấu trúc chỉ hữu ích cho chúng
‫tôi.
‫Chúng tôi cũng tiết kiệm cho mình một số tiền.
‫Vì vậy, để đánh giá một kỹ sư dữ liệu chỉ cần xây dựng đường ống này bao gồm việc tạo dữ liệu và thu thập dữ liệu,
‫sử dụng các phương pháp kỹ thuật dữ liệu để xây dựng đường ống này sao cho dữ liệu hiện có thể được phân tích bởi các nhà khoa học dữ liệu và nhà
‫phân tích dữ liệu.
‫Nhưng chúng ta vẫn còn một chút nữa để đi.
‫Vì vậy, tôi sẽ gặp bạn trong video tiếp theo.