这是一个创建于 4169 天前的主题，其中的信息可能已经有所发展或是发生改变。
 |
1
mazesoul 2013-07-26 17:43:52 +08:00
文件系统
|
 |
2
pubby 2013-07-26 17:47:42 +08:00  1
看多大量以及后续怎么用
我这边是直接扔leveldb中 |
 |
3
linzhi 2013-07-26 18:17:20 +08:00
放到文件系统是什么意思 求科普
|
 |
4
reusFork 2013-07-26 18:18:36 +08:00
文件系统也是数据库
|
 |
8
JimGee 2013-07-26 20:39:33 +08:00
图片放在数据库中好像是二进制形式的。存入和读出还要经过转换的。
|
 |
10
loveminds 2013-07-26 21:19:51 +08:00
当然是文件系统中,把图片丢进数据库不太方便
|
 |
11
soli 2013-07-26 21:23:32 +08:00
如果是小图片，则几个图片写到一个文件中，然后在数据库里记录文件名和偏移。
|
|
12
JimGee 2013-07-27 23:18:33 +08:00
|
 |
13
scusjs 2013-07-27 23:25:34 +08:00 1
文件系统+数据库索引
|
 |
15
refresh 2013-07-28 09:12:55 +08:00
mongodb欢迎你
|
 |
16
zzWinD 2013-07-28 09:38:59 +08:00 via Android
我们用的是mongodb grifs 不知道
|
 |
17
mckelvin 2013-07-28 10:50:15 +08:00 via Android
总共5G左右的图，笔者后来选择了存文件系统，分目录。
|
 |
18
shoumu OP |
 |
19
Alexisused 2013-07-28 17:03:39 +08:00
请问你爬的是煎蛋的妹子图么^_^ , 如果是跟大家分享一下呗
|
|
20
shoumu OP 1
@Alexisused
爬人人的头像相册，爬妹子图是个好想法，你写个呗，^_^ |
|
22
Alexisused 2013-07-28 21:08:05 +08:00
@shoumu 最近压力大啊 都是加班的节奏 没心思爬 靠你了
|
 |
23
lewisc402 2013-07-28 22:30:16 +08:00
咨询下LZ 用的是什么样的爬虫啊？？是基于scrapy这样的框架的基础上的？还是全部自己写的？
|
 |
24
xinrui5577 2013-07-29 12:04:02 +08:00
求楼主的代码。。我也想要一个。
|
 |
25
ospider 2013-07-29 13:53:04 +08:00 via Android
很早之前爬过煎蛋妹子图，过了好久了，再爬一次试试
|
 |
26
cevincheung 2013-07-29 14:32:57 +08:00
mongodb路过
|
 |
27
xdyl 2013-07-30 11:17:44 +08:00
FastDFS
|
 |
28
cxshun 2013-07-30 13:29:50 +08:00
@Alexisused 哈哈，这个好想法，这段时间正好在想有啥东西可以去做做，构思一下。
|
 |
29
wodemyworld 2013-07-30 13:33:50 +08:00 1
请扔mongodb，分布式存储，这对将来的分析和综合都有好处，要不以后改起来的话能头痛死你
以往的做法是，每张图片有很多的tag，全靠tag来提供信息，检索、分类等都有很好的效果，当然了，前提是你已经有tag系统了，这个你要是没有的话就先别做了，这个工作量不小~ |
|
30
Alexisused 2013-07-31 10:09:55 +08:00
@cxshun 好好搞 骚年 我坐等现成的了
|
Select Language