Car-tech

Facebook chuẩn bị sử dụng 'kho lạnh' để xử lý lượng dữ liệu khổng lồ

Top comment phần 211 ? - Những bình luận bá đạo hài hước troll nhất nhì trên Facebook

Top comment phần 211 ? - Những bình luận bá đạo hài hước troll nhất nhì trên Facebook

Mục lục:

Anonim

Facebook đang xem xét lại cách lưu trữ dữ liệu để đối phó với 7 petabyte ảnh mới mà người dùng mạng xã hội tải lên mỗi tháng. Khi số lượng ảnh tăng lên, Facebook cần tìm những cách rẻ hơn, ít tốn kém hơn để lưu trữ tất cả, theo phó chủ tịch kỹ thuật hạ tầng của công ty.

Người dùng tải lên khoảng 300 triệu ảnh mỗi ngày, trong những dịp đặc biệt, Jay Parikh của Facebook nói với hội nghị về cấu trúc châu Âu tại Amsterdam hôm thứ Tư. "Halloween là một trong những ngày tải lên ảnh lớn nhất trong năm của chúng tôi. Chúng tôi sẽ kiếm được khoảng từ 1 đến 2 tỷ bức ảnh được tải lên chỉ trong một ngày", anh nói., không ai nhìn vào chúng sau vài ngày hoặc vài tuần, nhưng "Hợp đồng của chúng tôi với người dùng của chúng tôi là chúng tôi không thể xóa dữ liệu khi nó không được truy cập, chúng tôi phải giữ nó", ông nói. Điều đó dẫn đến ý tưởng đưa những bức ảnh này vào một loại "kho lạnh", Parikh nói.

[Đọc thêm: Các dịch vụ truyền hình trực tuyến tốt nhất]

Để làm điều đó, Facebook dự định xây dựng một trung tâm dữ liệu mới với các loại lưu trữ khác nhau, phần cứng máy chủ và thiết bị mạng tiêu thụ ít năng lượng hơn và chi phí ít hơn so với các trung tâm dữ liệu hiện có - mà không thay đổi thời gian phản hồi của máy chủ,

Khi chi phí và mức tiêu thụ năng lượng tại các trung tâm dữ liệu được giảm xuống, điều này thường xảy ra ở tốc độ truy cập.

Lưu trữ dữ liệu trên băng, chẳng hạn, làm giảm mức tiêu thụ điện nhưng làm chậm quá trình truy cập dữ liệu. một con đường trung gian với dịch vụ lưu trữ đám mây Glacier của nó, mà nó làm nổi bật như một sự thay thế cho băng. Dịch vụ này được tối ưu hóa cho dữ liệu được truy cập thường xuyên và thời gian truy xuất trong vài giờ là chấp nhận được.

Điều đó quá chậm đối với Facebook, theo Parikh. "Tôi không thể có một bức ảnh mà bạn truy cập từ năm hoặc mười năm trước, và để tôi hiển thị một biểu ngữ cho người dùng nói rằng:" Này, tại sao bạn không thử lại sau 24 giờ? "

Hình ảnh: Lịch sự của Trung tâm dữ liệu KnowledgeFacebook Trung tâm dữ liệu ở Oregon

Hầu hết các trung tâm dữ liệu được sử dụng ngày nay được tối ưu hóa để sử dụng rất nhiều sức mạnh để đối phó với các nhiệm vụ cần sức mạnh tính toán lớn. Công nghệ "kho lạnh" mà Facebook đang nghĩ đến là cực đoan khác, Parikh nói. "Bạn cần rất nhiều không gian, nhưng bạn không cần nhiều quyền lực", ông nói thêm rằng mọi thứ về trung tâm dữ liệu cần được xem xét lại để xử lý vấn đề ở quy mô Facebook.

Ở mức cao, Facebook đang làm việc trên phần mềm sẽ tìm ra cách thức và nơi lưu trữ một phần nội dung trong cơ sở hạ tầng khi nó có tuổi, Parikh nói. "Điều đó có nghĩa là các bản sao của dữ liệu sẽ di chuyển theo thời gian và sử dụng các phần cơ sở hạ tầng khác nhau mà chúng tôi sẽ tối ưu hóa cho độ tuổi của nội dung".

Kho lạnh sẽ là một phần của cơ sở hạ tầng của Facebook trong một hoặc hai năm tới, ông nói. Facebook có kế hoạch tiết lộ và chia sẻ các phần mà nó cho là có liên quan thông qua Open Compute Project, một sáng kiến ​​do Facebook bắt đầu áp dụng mô hình hợp tác phần mềm nguồn mở cho thế giới phần cứng trung tâm dữ liệu.