Android

Yahoo tìm kiếm Hadoop Boost với phiên bản nội bộ

The Boy Who Bakes is #SoOutOfOffice with Yahoo Mail

The Boy Who Bakes is #SoOutOfOffice with Yahoo Mail
Anonim

Để thúc đẩy việc áp dụng công nghệ Hadoop để xử lý các tập dữ liệu khổng lồ, Yahoo sẽ phát hành một phiên bản phần mềm mà nó đã hoàn thiện để cung cấp cho nhiều trang web và dịch vụ chính của nó. Hội nghị thượng đỉnh, do Yahoo tổ chức và được một số nhà cung cấp chính hỗ trợ công nghệ này, bao gồm IBM, Sun và Amazon.com.

Công cụ tìm kiếm, hệ thống quảng cáo và dịch vụ webmail của Yahoo sử dụng Hadoop, một triển khai mã nguồn mở của mô hình lập trình MapReduce

[Đọc thêm: Các dịch vụ truyền hình trực tuyến tốt nhất]

Tại Yahoo, Hadoop chạy trên hơn 25.000 máy chủ để thu thập dữ liệu trên hàng chục tỷ trang web, hàng chục con vật cưng

Bằng cách phát hành mã nguồn của bản phân phối Hadoop của mình, Yahoo hy vọng sẽ thúc đẩy sự phát triển của dự án Quỹ phần mềm Apache này.

Yahoo, người sử dụng nhà sáng lập Hadg của Hadoop, đóng góp lại Cải tiến Hadoop cho dự án Apache, nhưng bây giờ đang phát hành triển khai Hadoop đầy đủ của nó, đó là lớn nhất trên thế giới và đã được thử nghiệm rộng rãi và hoàn thiện để sử dụng trong các hệ thống sản xuất trực tiếp. Theo ông Shelton Shugar, phó chủ tịch cấp cao về điện toán đám mây, có rất nhiều quan tâm bày tỏ rằng nếu chúng tôi thực hiện điều này, nó sẽ hữu ích cho những người dùng khác. Yahoo đang ngày càng củng cố các nền tảng xử lý trên các cụm Hadoop vì chúng có thể mở rộng quy mô tốt hơn và cung cấp việc xử lý dữ liệu quy mô lớn mà các trang web và dịch vụ của công ty yêu cầu, "Chúng tôi rất hài lòng với cách Hadoop Amazon đã tung ra một dịch vụ lưu trữ được thiết kế để đơn giản hóa cho các nhà phát triển sử dụng Hadoop gọi là Amazon Elastic MapReduce, trong khi các công ty như các bản phân phối Hadoop thương mại của thị trường Cloudera được thiết kế để triển khai doanh nghiệp.