• 5.6 NOSQL数据库操作
    • redis
    • mongoDB
    • links

    5.6 NOSQL数据库操作

    NoSQL(Not Only SQL),指的是非关系型的数据库。随着Web2.0的兴起,传统的关系数据库在应付Web2.0网站,特别是超大规模和高并发的SNS类型的Web2.0纯动态网站已经显得力不从心,暴露了很多难以克服的问题,而非关系型的数据库则由于其本身的特点得到了非常迅速的发展。

    而Go语言作为21世纪的C语言,对NOSQL的支持也是很好,目前流行的NOSQL主要有redis、mongoDB、Cassandra和Membase等。这些数据库都有高性能、高并发读写等特点,目前已经广泛应用于各种应用中。我接下来主要讲解一下redis和mongoDB的操作。

    redis

    redis是一个key-value存储系统。和Memcached类似,它支持存储的value类型相对更多,包括string(字符串)、list(链表)、set(集合)和zset(有序集合)。

    目前应用redis最广泛的应该是新浪微博平台,其次还有Facebook收购的图片社交网站instagram。以及其他一些有名的互联网企业

    Go目前支持redis的驱动有如下

    • https://github.com/garyburd/redigo (推荐)
    • https://github.com/go-redis/redis
    • https://github.com/hoisie/redis
    • https://github.com/alphazero/Go-Redis
    • https://github.com/simonz05/godis

    我以redigo驱动为例来演示如何进行数据的操作:

    1. package main
    2. import (
    3. "fmt"
    4. "os"
    5. "os/signal"
    6. "syscall"
    7. "time"
    8. "github.com/garyburd/redigo/redis"
    9. )
    10. var (
    11. Pool *redis.Pool
    12. )
    13. func init() {
    14. redisHost := ":6379"
    15. Pool = newPool(redisHost)
    16. close()
    17. }
    18. func newPool(server string) *redis.Pool {
    19. return &redis.Pool{
    20. MaxIdle: 3,
    21. IdleTimeout: 240 * time.Second,
    22. Dial: func() (redis.Conn, error) {
    23. c, err := redis.Dial("tcp", server)
    24. if err != nil {
    25. return nil, err
    26. }
    27. return c, err
    28. },
    29. TestOnBorrow: func(c redis.Conn, t time.Time) error {
    30. _, err := c.Do("PING")
    31. return err
    32. },
    33. }
    34. }
    35. func close() {
    36. c := make(chan os.Signal, 1)
    37. signal.Notify(c, os.Interrupt)
    38. signal.Notify(c, syscall.SIGTERM)
    39. signal.Notify(c, syscall.SIGKILL)
    40. go func() {
    41. <-c
    42. Pool.Close()
    43. os.Exit(0)
    44. }()
    45. }
    46. func Get(key string) ([]byte, error) {
    47. conn := Pool.Get()
    48. defer conn.Close()
    49. var data []byte
    50. data, err := redis.Bytes(conn.Do("GET", key))
    51. if err != nil {
    52. return data, fmt.Errorf("error get key %s: %v", key, err)
    53. }
    54. return data, err
    55. }
    56. func main() {
    57. test, err := Get("test")
    58. fmt.Println(test, err)
    59. }

    另外以前我fork了最后一个驱动,更新了一些bug,目前应用在我自己的短域名服务项目中(每天200W左右的PV值)

    https://github.com/astaxie/goredis

    接下来的以我自己fork的这个redis驱动为例来演示如何进行数据的操作

    1. package main
    2. import (
    3. "fmt"
    4. "github.com/astaxie/goredis"
    5. )
    6. func main() {
    7. var client goredis.Client
    8. // 设置端口为redis默认端口
    9. client.Addr = "127.0.0.1:6379"
    10. //字符串操作
    11. client.Set("a", []byte("hello"))
    12. val, _ := client.Get("a")
    13. fmt.Println(string(val))
    14. client.Del("a")
    15. //list操作
    16. vals := []string{"a", "b", "c", "d", "e"}
    17. for _, v := range vals {
    18. client.Rpush("l", []byte(v))
    19. }
    20. dbvals,_ := client.Lrange("l", 0, 4)
    21. for i, v := range dbvals {
    22. println(i,":",string(v))
    23. }
    24. client.Del("l")
    25. }

    我们可以看到操作redis非常的方便,而且我实际项目中应用下来性能也很高。client的命令和redis的命令基本保持一致。所以和原生态操作redis非常类似。

    mongoDB

    MongoDB是一个高性能,开源,无模式的文档型数据库,是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系数据库的。他支持的数据结构非常松散,采用的是类似json的bjson格式来存储数据,因此可以存储比较复杂的数据类型。Mongo最大的特点是他支持的查询语言非常强大,其语法有点类似于面向对象的查询语言,几乎可以实现类似关系数据库单表查询的绝大部分功能,而且还支持对数据建立索引。

    下图展示了mysql和mongoDB之间的对应关系,我们可以看出来非常的方便,但是mongoDB的性能非常好。

    NOSQL数据库操作 - 图1

    图5.1 MongoDB和Mysql的操作对比图

    目前Go支持mongoDB最好的驱动就是mgo,这个驱动目前最有可能成为官方的pkg。

    安装mgo:

    1. go get gopkg.in/mgo.v2

    下面我将演示如何通过Go来操作mongoDB:

    1. package main
    2. import (
    3. "fmt"
    4. "log"
    5. "gopkg.in/mgo.v2"
    6. "gopkg.in/mgo.v2/bson"
    7. )
    8. type Person struct {
    9. Name string
    10. Phone string
    11. }
    12. func main() {
    13. session, err := mgo.Dial("server1.example.com,server2.example.com")
    14. if err != nil {
    15. panic(err)
    16. }
    17. defer session.Close()
    18. // Optional. Switch the session to a monotonic behavior.
    19. session.SetMode(mgo.Monotonic, true)
    20. c := session.DB("test").C("people")
    21. err = c.Insert(&Person{"Ale", "+55 53 8116 9639"},
    22. &Person{"Cla", "+55 53 8402 8510"})
    23. if err != nil {
    24. log.Fatal(err)
    25. }
    26. result := Person{}
    27. err = c.Find(bson.M{"name": "Ale"}).One(&result)
    28. if err != nil {
    29. log.Fatal(err)
    30. }
    31. fmt.Println("Phone:", result.Phone)
    32. }

    我们可以看出来mgo的操作方式和beedb的操作方式几乎类似,都是基于struct的操作方式,这个就是Go Style。

    • 目录
    • 上一节: 使用Beego orm库进行ORM开发
    • 下一节: 小结