设计一个对从网站爬到的数据进行筛选操作的数据库的思路

Question

本帖最后由 hnuwz 于 2014-11-18 01:25:51 编辑

Answer 1

首先谢谢您的指点！我有如下几个疑惑想再和您交流下：
1。如您所说，将步骤1得到的图片视频等存储到硬盘上，那如果量比较大怎么处理？也可以满足需求么？
2。MD5算法用于作为消息来源认证和消息完整性的认证，将大容量的数据“压缩”成固定长度的信息，这一过程是不可逆的。那么是否不能满足对步骤3中筛选出来的数据进行安全存储且可再次读取出来的需求？
3。我目前主要比较茫然的是数据库的整个架构和实现，因为是零基础，请问想要实现3个步骤的功能应如何学习呢？再次感谢您的帮助！1。如您所说，将步骤1得到的图片视频等存储到硬盘上，那如果量比较大怎么处理？也可以满足需求么？
     现在T级别的磁盘也蛮实惠的，然后有些图片可以做缩小处理。
     
2。MD5算法用于作为消息来源认证和消息完整性的认证，将大容量的数据“压缩”成固定长度的信息，这一过程是不可逆的。那么是否不能满足对步骤3中筛选出来的数据进行安全存储且可再次读取出来的需求？
     可以的。3。我目前主要比较茫然的是数据库的整个架构和实现，因为是零基础，请问想要实现3个步骤的功能应如何学习呢？
    如何学习？如果是0基础的话，那比较麻烦了，不过你可以先从数据库入手，先学数据库设计，然后安全加密解密、网站架构、文件存储、系统架构等等，一口吃不成一个大胖子，你得慢慢来。如果着急的话可以先请一个有经验的高手来帮你弄。

Answer 2

首先谢谢您的指点！我有如下几个疑惑想再和您交流下：
1。如您所说，将步骤1得到的图片视频等存储到硬盘上，那如果量比较大怎么处理？也可以满足需求么？
2。MD5算法用于作为消息来源认证和消息完整性的认证，将大容量的数据“压缩”成固定长度的信息，这一过程是不可逆的。那么是否不能满足对步骤3中筛选出来的数据进行安全存储且可再次读取出来的需求？
3。我目前主要比较茫然的是数据库的整个架构和实现，因为是零基础，请问想要实现3个步骤的功能应如何学习呢？再次感谢您的帮助！1。如您所说，将步骤1得到的图片视频等存储到硬盘上，那如果量比较大怎么处理？也可以满足需求么？
     现在T级别的磁盘也蛮实惠的，然后有些图片可以做缩小处理。
     
2。MD5算法用于作为消息来源认证和消息完整性的认证，将大容量的数据“压缩”成固定长度的信息，这一过程是不可逆的。那么是否不能满足对步骤3中筛选出来的数据进行安全存储且可再次读取出来的需求？
     可以的。3。我目前主要比较茫然的是数据库的整个架构和实现，因为是零基础，请问想要实现3个步骤的功能应如何学习呢？
    如何学习？如果是0基础的话，那比较麻烦了，不过你可以先从数据库入手，先学数据库设计，然后安全加密解密、网站架构、文件存储、系统架构等等，一口吃不成一个大胖子，你得慢慢来。如果着急的话可以先请一个有经验的高手来帮你弄。您好！嗯。。如下几点再和您交流下>_<
1。在开发阶段，大量的数据存储之类的会需要用到服务器么？还是只需要磁盘和PC就行？
2。关于数据库的加密我正查阅相关资料学习，谢谢您提供的思路。不过貌似MD5算法主要用于用户口令的存储和匹配？
3。我正学习密码学的课程，加密解密方面的应该可以请教老师。但是数据库方面没有什么思路，能不能向您请教呢？比如指导下数据库学习的思路提纲（针对我需要实现的功能），学习上具体的问题的指导？再次感谢您！

Answer 3

首先谢谢您的指点！我有如下几个疑惑想再和您交流下：
1。如您所说，将步骤1得到的图片视频等存储到硬盘上，那如果量比较大怎么处理？也可以满足需求么？
2。MD5算法用于作为消息来源认证和消息完整性的认证，将大容量的数据“压缩”成固定长度的信息，这一过程是不可逆的。那么是否不能满足对步骤3中筛选出来的数据进行安全存储且可再次读取出来的需求？
3。我目前主要比较茫然的是数据库的整个架构和实现，因为是零基础，请问想要实现3个步骤的功能应如何学习呢？再次感谢您的帮助！1。如您所说，将步骤1得到的图片视频等存储到硬盘上，那如果量比较大怎么处理？也可以满足需求么？
     现在T级别的磁盘也蛮实惠的，然后有些图片可以做缩小处理。
     
2。MD5算法用于作为消息来源认证和消息完整性的认证，将大容量的数据“压缩”成固定长度的信息，这一过程是不可逆的。那么是否不能满足对步骤3中筛选出来的数据进行安全存储且可再次读取出来的需求？
     可以的。3。我目前主要比较茫然的是数据库的整个架构和实现，因为是零基础，请问想要实现3个步骤的功能应如何学习呢？
    如何学习？如果是0基础的话，那比较麻烦了，不过你可以先从数据库入手，先学数据库设计，然后安全加密解密、网站架构、文件存储、系统架构等等，一口吃不成一个大胖子，你得慢慢来。如果着急的话可以先请一个有经验的高手来帮你弄。您好！嗯。。如下几点再和您交流下>_<
1。在开发阶段，大量的数据存储之类的会需要用到服务器么？还是只需要磁盘和PC就行？
2。关于数据库的加密我正查阅相关资料学习，谢谢您提供的思路。不过貌似MD5算法主要用于用户口令的存储和匹配？
3。我正学习密码学的课程，加密解密方面的应该可以请教老师。但是数据库方面没有什么思路，能不能向您请教呢？比如指导下数据库学习的思路提纲（针对我需要实现的功能），学习上具体的问题的指导？再次感谢您！1，开发阶段磁盘和PC即可，如果条件允许还是准备服务器比较好。
2，嗯，是的。
3，可以的，保持联系。

Answer 4

首先谢谢您的指点！我有如下几个疑惑想再和您交流下：
1。如您所说，将步骤1得到的图片视频等存储到硬盘上，那如果量比较大怎么处理？也可以满足需求么？
2。MD5算法用于作为消息来源认证和消息完整性的认证，将大容量的数据“压缩”成固定长度的信息，这一过程是不可逆的。那么是否不能满足对步骤3中筛选出来的数据进行安全存储且可再次读取出来的需求？
3。我目前主要比较茫然的是数据库的整个架构和实现，因为是零基础，请问想要实现3个步骤的功能应如何学习呢？再次感谢您的帮助！1。如您所说，将步骤1得到的图片视频等存储到硬盘上，那如果量比较大怎么处理？也可以满足需求么？
     现在T级别的磁盘也蛮实惠的，然后有些图片可以做缩小处理。
     
2。MD5算法用于作为消息来源认证和消息完整性的认证，将大容量的数据“压缩”成固定长度的信息，这一过程是不可逆的。那么是否不能满足对步骤3中筛选出来的数据进行安全存储且可再次读取出来的需求？
     可以的。3。我目前主要比较茫然的是数据库的整个架构和实现，因为是零基础，请问想要实现3个步骤的功能应如何学习呢？
    如何学习？如果是0基础的话，那比较麻烦了，不过你可以先从数据库入手，先学数据库设计，然后安全加密解密、网站架构、文件存储、系统架构等等，一口吃不成一个大胖子，你得慢慢来。如果着急的话可以先请一个有经验的高手来帮你弄。您好！嗯。。如下几点再和您交流下>_<
1。在开发阶段，大量的数据存储之类的会需要用到服务器么？还是只需要磁盘和PC就行？
2。关于数据库的加密我正查阅相关资料学习，谢谢您提供的思路。不过貌似MD5算法主要用于用户口令的存储和匹配？
3。我正学习密码学的课程，加密解密方面的应该可以请教老师。但是数据库方面没有什么思路，能不能向您请教呢？比如指导下数据库学习的思路提纲（针对我需要实现的功能），学习上具体的问题的指导？再次感谢您！1，开发阶段磁盘和PC即可，如果条件允许还是准备服务器比较好。
2，嗯，是的。
3，可以的，保持联系。能不能麻烦你给个针对这些功能的学习提纲呢？主要是数据库的，比如学习的顺序、参考书目资料之类的。
麻烦您了！

Answer 5

数据库的，先看基础书籍比如 数据库系统概论，学会怎么设计数据库，
然后看一些数据库开发的书籍比如MySQL开发者SQL权威指南等等，
然后看mysql底层的数据比如mysql高性能第三版，
最后看mysql innodb存储引擎内幕。
最后看mysql源码

Answer 6

这种技术性的东西，没有人现场指导，哪来的快速啊。
如果仅仅工作的话，学前两样：
数据库的，先看基础书籍比如 数据库系统概论，学会怎么设计数据库，
然后看一些数据库开发的书籍比如MySQL开发者SQL权威指南等等，