VOZ-Tìm hiểu xem Facebook xây dựng hệ thống máy chủ dữ liệu

http://vozforums.com/showthread.php?t=3520392

 

Nghe giọng cứ như kenh14 .

 

Trung tâm dữ liệu bọn này lôm côm nhỉ, vừa xấu vừa nhìn như không quy hoạch gì cả. Nhìn còn lởm hơn công ty ta.

 

HDD server có hay gặp bad sector ko nhở ?

Trung tâm xây dựng, chứ có phải data center đâu nhở

 

đâu phải đồ của fb mà cùi như đồ của nhà mi đâu bảo

 

HDD tụi nó xài bao lâu thì thay mới nhĩ , mình xài ổ green 24/7 được hơn 1 năm là chết một cái. Giờ đang chuyển qua ổ black xài xem sao

 

Chạy raid khả năng khó lắm, nhưng bọn này dùng 1 năm update 1 lần thì tỉ lệ cũng chắc là thấp

 

Winterfell

chắc mấy ba chế ra nó cuồn Game of Thrones. .

 

À đây là trung tâm xây dựng phần cứng, bọn này sẽ thiết kế xem dữ liệu được lưu trữ như thế nào, ko phải kho phần cứng đang lưu trữ của Facebook.

Bảo quái sao cứ thấy ít thế

 

Nghe nhạc rock nhiều quá nên có vẻ não bị mất nếp nhăn chăng

 

Lão phúc đạt bích taòn chửi thắng mặt, bựa vãi

 

bọn fb chắc xây hầm riêng sâu dưới lòng đất để trữ data quá, mỗi ngày data phải tăng vài nghìn TB ấy chứ

 

Toàn text là chính, ảnh quá lắm thì lên được 1TB, phim quá lắm thì lên được 10TB. Mà ko biết nó làm thế nào chứ nếu chuyển ảnh qua mã nhị phân rồi lưu luôn trên db thì còn nhẹ nữa. :)

 

Có, nhưng thường là ko phát hiện ra bad sector nên đa phần gọi là ko thấy, đấy là lí do các hệ thống lớn ko bao giờ dùng RAID mà có cơ chế failover

Ko ai dùng RAID cho mấy hệ thống này cả

 

Hiểu một cách gần đúng, failover na ná như redundancy, tức là cơ chế dự phòng, đảm bảo an toàn cho một hệ thống, ở đây, chính là hệ thống lưu trữ (ổ cứng).
RAID, chức năng chính là ghép nhiều ổ cứng vật lý (N ổ cùng thông số - dung lượng mỗi ổ là G) thành một ổ cứng "ảo" có dung lượng đủ lớn để đáp ứng các nhu cầu lưu trữ:
RAID-0 thuần túy chỉ ghép ổ, hoàn toàn không có cơ chế "redundancy". Dung lượng của ổ RAID-0 bằng tổng dung lượng của N ổ cứng đơn (N*G).
RAID-1 dùng cho ghép 2 ổ cứng, cơ chế dự phòng 1-1, dung lượng của ổ RAID-1 đúng bằng ổ đơn.
RAID-10 là kết hợp RAID-0 (dung lượng) và RAID-1 (redundancy), dự phòng 1-1, dung lượng của ổ RAID-10 là N*G/2 ở đây, N phải là số chẵn và không nhỏ hơn 4.
RAID-5 được dùng khá phổ biến với cơ chế "ghi trên 3 ổ vật lý", dung lượng ổ RAID-5 là (N-2)*G. Đây là cơ chế "ghép ổ" có độ an toàn và chi phí đầu tư ổ cứng ở mức "chấp nhận được".

Ngoài ra, theo tớ được biết thì RAID cho phép thiết lập "Hot spare", ở đây, theo tớ hiểu, "hot spare" tương đương với failover.

 

Nói đến cơ chế fail over ở đây là cơ chế trên tầng ứng dụng, tức là việc ngắt 1 server ra khỏi hệ thống ko ảnh hưởng gì hoặc ảnh hưởng ít đến ứng dụng.
Còn RAID đối với hệ thống nhỏ thì nó có ý nghĩa, đối với hệ thống lớn ko có ý nghĩa gì, vì 1 là phí ổ, 2 là cái redundancy của nó ko được tận dụng khi mà có redundancy cấp cao hơn ở tầng ứng dụng.
RAID là cái ẩn chứa rất nhiều vấn đề, hệ thống RAID được expect là khi 1 ổ fail thì những ổ còn lại là hoạt động bình thường, tuy nhiên trong thực tế thì thường khi fail 1 ổ và các ổ còn lại warm-up để rebuild lại gặp lỗi, cái này tìm hiểu sâu về RAID sẽ hiểu, còn đọc 3 cái định nghĩa thì nghe nó xuôi tai là đúng thôi.

 

nhớ đọc ở đâu là ổ cứng của mấy thằng to này 3 - 6 tháng thay 1 lần phải ko các bác?

 

^trong bài nó có nó đấy, đọc lại đê

 

Chuyển ảnh qua mã nhị phân rồi lưu trên db? Bạn không học CNTT hoặc có học nhưng chưa/ít tiếp xúc với mảng xử lý ảnh phải không?

 

toàn mấy tên CNTT, vào đọc mà chả hiểu cái mù gì