推荐你看看酷壳的那篇冰与火的文章。里面有一句非常的精辟。做挖掘之前首先你要洗数据，很多很多的数据都是脏的，不完整或者不够精确的。而这个东西常常需要你不停的人肉，不停的改进过滤算法。

被日本人带坏了，现在都是用excel写文档。好处在于表格类型的东西非常容易区分。有一些模糊的分割，最主要的是格式比较容易排版。

不是很理解你的要求，但是看情况猜测你可能只是需要一个记录的软件。通常来说，这个我推荐wiz。当然，还有evernote，但是就我个人感官来说，wiz做的要比evernote好的多，尤其是在网页截取方面。另外，还有一个方向可能你可以考虑下，就是ifttt这个网站。这个网站的核心作用就是一个触发器，你可以预设某些动作，当你做了a动作，之后ifttt这个网站就自动帮你触发b动作。比如，你关联了gtalk跟twitter。当你在gtalk上说喜欢一个人之后，自动的就会在twitter上发一个推，说你喜欢某人。

我知道很多人已经开始在用vps了。事实上我工作的环境里面就有vps的设置，但是就我个人来说，以练手的情况下，还是先从免费的开始。真的网站有了一定的点击量，再转到vps也可以。

真心有钱人啊。我用了pycharm，感觉太高级了。除了会启动django之外，啥都不会。最后还是老实的用的st2了。

to est。纠正你一个错误，大数据并不表示数据一定要上T。大数据最主要的思想在于把已有的但是以前没有交集的数据做一个联系，以此来寻找其中的关系。我说过当初有人用大数据发现日本相扑界的作弊现象，他用的整个数据就是历年的所有相扑选手的胜负场次。整个数据加起来可能都不到10m。按你的说法这都不叫大数据了？可是他通过胜负场次，结合当时选手的升段时间点，外带计算两位相扑选手的胜率，然后发现了作弊现象。
我这是想这么做玩玩，从来没觉得这个得出的数据有多么的准确，事实上我想的是另外一个问题。
假设，按有黑幕的说法，每一次的双色球都是按照购买人数最少的那一组出来的。那么从另外一个角度来说，为什么那一期的这个号没有很多人买？假设有什么样的数据能发现这种关系，是不是可以生成一组号码，就搏我生成的号是这一期里面买的人最少的可不可以？那么如果要想生成这样的号，需要分析什么呢？

不知道为什么，打不开。我现在一直用的newszeit。一个很小众的rss服务器。还不能手机阅读。不过用wiz转一下之后也没什么问题。关键是偏门，不容易被封

上古系列，机器人大战系列，英雄无敌3，当然，如果你算dota 啊。cs sc这样的，别说100小时。1k小时好像都超了。

呵呵。如果是当天的数据，那么也就是说当天的彩票已经不允许卖了。你出号码有什么用？

哈哈。说不定哦。不过当初查日本相扑作弊的，就是这样的方式。

额。大数据只是一个思想，总的来说应该通过已有的数据发现为知的联系。大数据不是人。

说下我个人的理解。
首先，爬虫不可能搜集到这些信息。说到底，爬虫只是一个管道，负责把页面上的信息传递给搜索引擎，这个信息不可能那么多，那么详细，通常都是就是几十个字大小的内容。soe就是干这个的。
其次，数据挖掘不是无中生有，基础数据一定是存在的，再挖掘整理之后，才会出现结果。
结论：用户购买原因的这个结果，应该是通过问卷形式出现得到的。但是这个问卷可能不是通常意义上的纸质问卷，可能是通过一些诱导，比如退货的时候吐槽给几个选项，购买成功的时候炫耀几个选项。这样的零散的结果，然后再总结起来，形成了一个报告。

everythong 我也用。但是我最推荐sublimt text，你把整个工程放进去sublimt text里面去。然后再按 ctrl+p。就会有一个窗口，只要你记得某个文件的名字，都不用全部打出来，他的候选项里面就会出现，跳转之后就可以直接编辑，非常的方便。另外，关于复制粘贴,你应该装一个clipx。专门记忆复制的内容。最大可以到45项，非常的有用。

@akalanala 人家有心就是好的。不要浇灭人家的热情

@AntiGameZ 不是一般的坑爹啊。最坑的是我那个还是。4.0版本的连个拖拽的东西都没有，纯手写控件啊。

说说我吧。本来学外语的，后来实在受不了各种推来推去的托词，不干翻译了，开始去青鸟学编程（很傻是吧，但是最少有系统），后来进公司，从测试干起，之后delphi，c++，c#什么项目需要就去学什么。开始的时候你会很烦躁，什么东西都不会，每次进新项目都要重新学起，最关键的是由于项目忙，还没办法让你学深入。
但是等你经历的多了，见的多了，就会发现，可能语言不一样，可能调用api不一样，但是那种编程的思想是一致的，要解决的问题是相似的。不同的语言会有不同的变化，但是最终的目的都是为了解决问题。
你迷茫非常正常，其实可以换个角度来想问题：如果你是用人公司，你会指着一个完全没有经验的新手来担当一个非常重要的项目么，你会要求这个新手面面俱到，编程实力雄厚么？
用人公司找你的时候，就已经考虑到你的实际情况了。所以不要特别担心，作为一个新人，不懂，不会都非常的正常。用人公司招你来的目的其实很简单，希望你能分担一些项目组的工作，基本上这些工作技术含量都不会太高，都是些体力活，所以你只要保证能完成这些体力活，不要再让项目组因为你产生其他的劳动，你就是成功的。再往上，你能有提升，有更大的能力接手更有难度的工作，是所有人都希望看到的。但是初期，没人会要求你特别的严格）
建议你记住两个要点：1.尽可能的思考之后再提问，最好google之后再提问（这里也包括尽最大努力试错，这点很重要）
2.相类似的错误不要犯第二次（要求你有很好的总结能力，当然你记忆力超常更好）
这样你哪怕没有提高（做到这两点没提高来找我^_^)最少也不会给团队增加负担。记住，新人不是可耻的，可耻的是什么都不会，还不知道怎么学习。

molokai死忠。黑色的致命吸引力啊。

刚下了一个别人的破解bate版，坦白说，除了启动速度快，还没发现比2更加进步的地方。