将数据保存到mongodb，将数据保存到csv文件中

如何把hash数据存入mongodb

1、如果对日志保存的时间没有特别严格的要求，只是在总的存储空间上有限制，则可以考虑使用capped collection来存储日志数据。指定一个最大的存储空间或文档数量，当达到阈值时，MongoDB会自动删除capped collection里最老的文档。

2、③内置GridFS，支持大容量的存储。④内置Sharding。⑤第三方支持丰富。

3、MongoDB Shell Script mongoDB的命令行使用的是类似JavaScript脚本的命令行交互，所以我们可以在shell当中使用JS的一些命令、函数等。 输入mongo命令启动mongo控制台 然后参考官方文档操作mongo数据。

4、你不能直接存储一个类的实例啊，mongodb用bson存储数据，bson是json的binary形式，所以你只能存储javascript的基本类型、Object和Array这些东西。

5、因为Java操作mongodb需要使用相关的ORM驱动，所以你最好是读取json数据后转成Java对象然后调用驱动方法存入到数据库中即可。

相关问答

Q1: Python如何把爬虫爬的数据存到mongodb里

1、你不能直接存储一个类的实例啊，mongodb用bson存储数据，bson是json的binary形式，所以你只能存储javascript的基本类型、Object和Array这些东西。

2、spider 爬虫文件，制定抓取规则主要是利用xpath items.py 主要指定抓取的内容 pipeline.py 有一个指向和存储数据的功能，这里我们还会增加一个store.py的文件，文件内部就是创建一个MongoDB的数据库。

3、使用高效的二进制数据存储，包括大型对象（如视频等）。自动处理碎片，以支持云计算层次的扩展性。支持RUBY，PYTHON，JAVA，C，PHP，C#等多种语言。文件存储格式为BSON（一种JSON的扩展）。可通过网络访问。

Q2: python写了一个爬虫,内容储存到mongodb数据库,遇到一个错误不知怎么改...

你不能直接存储一个类的实例啊，mongodb用bson存储数据，bson是json的binary形式，所以你只能存储javascript的基本类型、Object和Array这些东西。

mongodb是可以直接存的。这种写法没有问题。问题还是出在变量名与变量值上。很简单就可以定位。你先将img换成一个字符串，如果成功了，就是img本身的格式问题。

后面百度，google了一下，原来是新的pymongo中取消了Connection这个方法。新的版本需要新建一个client，然后才是连接。

MySQL是一种关系数据库管理系统，关系数据库将数据保存在不同的表中，而不是将所有数据放在一个大仓库内，这样就增加了速度并提高了灵活性。MySQL所使用的SQL语言是用于访问数据库的最常用标准化语言。

推荐使用NoSQL的数据库，比如mongodb，因为爬虫抓到的数据一般是都字段-值得对应，有些字段有的网站有有的网站没有，mongo在这方面比较灵活，况且爬虫爬到的数据关系非常非常弱，很少会用到表与表的关系。

将数据保存到mongodb的介绍就聊到这里吧，感谢你花时间阅读本站内容，更多关于将数据保存到csv文件中、将数据保存到mongodb的信息别忘了在本站进行查找喔。