´óÊý¾Ý¼¼Êõ

µÚ1Õ Ð÷ÂÛ 1

1.1 ´óÊý¾ÝµÄ¼¼ÊõÌôÕ½ 1

1.1.1 ´óÊý¾ÝµÄ"´ó"1

1.1.2 Êý¾Ý"´ó"µÄ¼¼ÊõÌôÕ½ 3

1.1.3 ´óÊý¾Ý¾ö²ßµÄ¼¼ÊõÌôÕ½ 5

1.1.4 Êý¾Ý°²È«µÄ¼¼ÊõÎÊÌâ 7

1.2 ´óÊý¾Ý¼ÆËã 8

1.2.1 ´óÊý¾ÝÎļþ 9

1.2.2 ´óÊý¾Ý¼ÆËã¿ò¼Ü 10

1.2.3 ´óÊý¾Ý¹ÜÀí 11

1.3 Êý¾Ý¿ª·¢ 12

1.3.1 Êý¾Ý»ñÈ¡ 12

1.3.2 Êý¾Ý·ÖÎö 13

1.3.3 Êý¾Ý¿ÉÊÓ»¯ 14

1.4 Êý¾Ý²úÒµÖ§³Ö 15

1.4.1 Êý¾Ý²úÒµÐèÒªµÄ¼¼ÊõÖ§³Ö 15

1.4.2 Êý¾Ý×ʲú»¯ 16

1.4.3 Êý¾Ý²úÆ·¼°ÆäÖÊÁ¿ 17

1.4.4 Êý¾ÝÁ÷ͨÓ밲ȫ 18

1.5 С½á 19

²Î¿¼ÎÄÏ× 19

µÚ 2Õ ´óÊý¾Ý¼ÆËã 21

2.1 Êý¾Ý·ÃÎÊ21

2.1.1 °²È«Ä£ÐÍ 21

2.1.2 ·ÃÎÊ¿ØÖƲßÂÔ 23

2.1.3 ·ÃÎÊ¿ØÖÆÓëÊÚȨ 24

2.1.4 ·ÃÎÊ¿ØÖÆÓëÉó¼Æ 24

2.2 ·Ö²¼Ê½Îļþϵͳ 24

2.2.1 GoogleFS 25

2.2.2 HDFS 27

2.2.3 GlusterFS 28

2.2.4 CephFS 29

2.3 ´óÊý¾Ý¼ÆËã¿ò¼Ü 30

2.3.1 Åú´¦Àí 30

2.3.2 Á÷Êý¾Ý¼ÆËã 38

2.3.3 ÔöÁ¿¼ÆËãÄ£ÐÍ 41

2.3.4 ÐÂÐ˼ÆËã¿ò¼Ü 44

2.3.5 ´óÊý¾Ý¼ÆËã¿ò¼ÜµÄ·¢Õ¹ 46

2.4 ¶àµØ¼ÆËãÒìµØ¼ÆËãģʽ 48

2.4.1 ¸ÅÄî48

2.4.2 ¼ÆËãÄ£ÐÍ 49

2.4.3 Ìصã 49 2.5 С½á 49

²Î¿¼ÎÄÏ× 49

µÚ 3Õ ´óÊý¾Ý¹ÜÀí 51

3.1 ¸ÅÊö 51

3.2 ·Ö²¼Ê½Îļþϵͳ HDFS 52

3.2.1 Ç°ÌáºÍÉè¼ÆÄ¿±ê 53

3.2.2 Êý¾Ý¿é 53

3.2.3 HDFS¼Ü¹¹ 54

3.2.4 HDFSÈÝ´í»úÖÆ 54

3.3 ÁÐʽ´æ´¢¸ñʽ Parquet 55

3.3.1 Ðд洢ÓëÁд洢Îļþ¸ñʽ 55

3.3.2 Parquet ¸ÅÊö 56

3.3.3 Êý¾ÝÄ£ÐÍ 56

3.3.4 Parquet ÎļþµÄ´æ´¢¸ñʽ 57

3.4 NOSOL 58

3.4.1 ¼üÖµ¶ÔÊý¾Ý¿â 58

3.4.2 »ùÓÚÁÐ×åµÄÊý¾Ý¿â 59

3.4.3 »ùÓÚÎĵµµÄÊý¾Ý¿â 59

3.4.4 »ùÓÚͼµÄÊý¾Ý¿â 60

3.5 ¼üÖµÊý¾Ý¿â Redis 60

3.5.1 Redis¼ò½é 60

3.5.2 RedisÊý¾ÝÀàÐÍ 61 3.5.3 RedisÊÂÎñ 63

3.5.4 Redis ³Ö¾Ã»¯»úÖÆ 63

3.6 HBase 63

3.6.1 HBase¼ò½é 63

3.6.2 HBase·ÃÎÊ½Ó¿Ú 64

3.6.3 HBaseÊý¾ÝÄ£ÐÍ 64

3.6.4 HBaseϵͳ¼Ü¹¹ 65

3.6.5 HBase´æ´¢¸ñʽ 66

3.7 Dynamo67

3.7.1 DynamoϵͳÉè¼Æ¼ÙÉèºÍÇ°Ìá 67

3.7.2 DynamoÊý¾Ý·Ö²¼²ßÂÔ 68

3.7.3 CAPÔ­Àí 68

3.7.4 Dynamo µÄÒ»ÖÂÐÔʵÏÖ¼¼Êõ 69

3.7.5 Dynamoϵͳ·ÃÎÊ½Ó¿Ú 69

3.8 Cassandra 69

3.9 MongoDB 70

3.9.1 MongoDB¼ò½é 70

3.9.2 MongoDBÊý¾ÝÄ£ÐÍ70

3.9.3 MongoDB»ù´¡²Ù×÷71

3.9.4 MongoDB¾Û¼¯²Ù×÷ 73

3.9.5 MongoDB¸´ÖÆ»úÖÆ75

3.9.6 MongoDB·ÖƬ»úÖÆ 76

3.10 Neo4j 76

3.10.1 Neo4j¼ò½é 76

3.10.2 Neo4j»ù´¡¸ÅÄî 77

3.10.3 NeO4jµÄCypher²éѯÓïÑÔºÍģʽ 78

......