1
mazesoul 2013-07-26 17:43:52 +08:00
文件系统
|
2
pubby 2013-07-26 17:47:42 +08:00 1
看多大量以及后续怎么用
我这边是直接扔leveldb中 |
3
linzhi 2013-07-26 18:17:20 +08:00
放到文件系统是什么意思 求科普
|
4
reusFork 2013-07-26 18:18:36 +08:00
文件系统也是数据库
|
8
JimGee 2013-07-26 20:39:33 +08:00
图片放在数据库中好像是二进制形式的。存入和读出还要经过转换的。
|
10
loveminds 2013-07-26 21:19:51 +08:00
当然是文件系统中,把图片丢进数据库不太方便
|
11
soli 2013-07-26 21:23:32 +08:00
如果是小图片,则几个图片写到一个文件中,然后在数据库里记录文件名和偏移。
|
12
JimGee 2013-07-27 23:18:33 +08:00
|
13
scusjs 2013-07-27 23:25:34 +08:00 1
文件系统+数据库索引
|
15
refresh 2013-07-28 09:12:55 +08:00
mongodb欢迎你
|
16
zzWinD 2013-07-28 09:38:59 +08:00 via Android
我们用的是mongodb grifs 不知道
|
17
mckelvin 2013-07-28 10:50:15 +08:00 via Android
总共5G左右的图,笔者后来选择了存文件系统,分目录。
|
18
shoumu OP |
19
Alexisused 2013-07-28 17:03:39 +08:00
请问你爬的是煎蛋的妹子图么^_^ , 如果是跟大家分享一下呗
|
20
shoumu OP @Alexisused
爬人人的头像相册,爬妹子图是个好想法,你写个呗,^_^ |
22
Alexisused 2013-07-28 21:08:05 +08:00
@shoumu 最近压力大啊 都是加班的节奏 没心思爬 靠你了
|
23
lewisc402 2013-07-28 22:30:16 +08:00
咨询下LZ 用的是什么样的爬虫啊??是基于scrapy这样的框架的基础上的?还是全部自己写的?
|
24
xinrui5577 2013-07-29 12:04:02 +08:00
求楼主的代码。。我也想要一个。
|
25
ospider 2013-07-29 13:53:04 +08:00 via Android
很早之前爬过煎蛋妹子图,过了好久了,再爬一次试试
|
26
cevincheung 2013-07-29 14:32:57 +08:00
mongodb路过
|
27
xdyl 2013-07-30 11:17:44 +08:00
FastDFS
|
28
cxshun 2013-07-30 13:29:50 +08:00
@Alexisused 哈哈,这个好想法,这段时间正好在想有啥东西可以去做做,构思一下。
|
29
wodemyworld 2013-07-30 13:33:50 +08:00 1
请扔mongodb,分布式存储,这对将来的分析和综合都有好处,要不以后改起来的话能头痛死你
以往的做法是,每张图片有很多的tag,全靠tag来提供信息,检索、分类等都有很好的效果,当然了,前提是你已经有tag系统了,这个你要是没有的话就先别做了,这个工作量不小~ |
30
Alexisused 2013-07-31 10:09:55 +08:00
@cxshun 好好搞 骚年 我坐等现成的了
|