@michaeljackson #64 昆山咋不在上海找工作啊，周末回家，你这经验找个两万的应该能找？

我只写十年 Linux 用户

“会提问什么水平的，基本都是家里很穷，从小穷到大，看见同学吃好的穿好的，自己只能卑微的觉得努力学习之后就能超越那些富二代官二代的同学，于是在十年寒窗之后进入到一家互联网公司当拉磨的驴，舍不得吃舍不得穿，攒了几十几百万，这点钱在自己眼里其实内心已经非常满意，于是通过发帖来让陌生人夸自己，来弥补自己从小受到的创伤。殊不知这点钱，别人在上大学前家长就已经花了超越这些钱的几十倍帮当年的同学买好了房，买好了车，那些同学一毕业就从事家里安排好的非互联网行业，结婚生子，老婆漂亮，孩子可爱，而你只能躲在破烂的城中村里，到社交媒体上发一句: xx 万，什么水平？所以为了你那穷了十几年的可悲心理，夸你一句:牛逼大发了，你怎么这么牛逼!”

遇到这种老哥姐妹，我都不吝啬真心褒扬，真 jb 牛逼，人中龙凤，百里挑一，逆天改命，吊炸了。这本来就是一件非常值得自豪、值得炫耀的事，我怎么这么吊，你们这些个黄四郎看不惯我挣钱翻身了，贬低我、打击我是吧，呵呵。

此处“我”不是我，我只是个小卡拉咪、农村错题家，没这吊。

看了你的背景和想法，难住了，你具体是要换哪个方向？

恭喜恭喜！

@qianckjuan 谬赞了老哥，我就看了嘉峪关选调生小作文气不过有感而发，嘲讽一下武大黑奴、文科妓女

在这里问不如去问大头鹰

Streamlit 挺不错的，而且提供免费的类似云上一键部署，分享分布很方便，不过如果复杂的前端展示和交互需求，建议就不要折腾了，很费解不讨好，直接前端写。
我前端时间试了用 streamlit 写了个小 web 应用，哈哈，可以参考： https://navisearch.streamlit.app/

@drymonfidelia 能不能补充，对于这样的数据量，你给的已知条件不够
1. 什么类型的数据，给个 sample ，或类似的 sample?
2. 试过切块压缩后的存储占用吗，比如切 10GB 一块，再行存压缩或者列存压缩后分布占用？
3. 最高有 256G 内存，那么计算资源（ CPU 核）能有多少，SSD 读写达到多少？
4. 如果服务器为多台，带宽达到多少？
5. 结果文件是否要求为同样单个 CSV 文件？
6. 处理时间要求多少？
7. 任务为一次性的，还是后续有同样的需求，方案要能复用？

我有个想法可以讨论下：
1. Spark 或者 Hadoop 之类计算框架先做数据预处理，追加行号、数据值编码为整数，切块和压缩后存储（比如 10 GB 一块，parquet 格式 snappy 压缩）
2. 真正的计算任务就是对先前预处理后的数据进行处理，可以用 Spark ，或者 PrestoDB DB 这种 MPP 计算引擎

我想到的主要问题和瓶颈：
1. 数据量太大，还是单个文件，磁盘 IO 是主要耗时，所以要预处理做切块、编码、压缩，减轻任务计算时的 IO 压力；
2. 串行处理无法充分利用计算资源，所以要数据切块分区、利用成熟的分布式计算框架，比如 Spark

感觉这是一个工程问题，重在如何优化。

非常希望你能分享下后续，是否解决了，解决方案，感觉很有意思。

校园招聘上会找，抓住校招机会，本地企业单位政府会对这个学校有一定扶持
1. 海外运营（苏州有不少要出海的制造业、科技企业）
2. 苏州本地小学老师，不行就下面县
3. 考研机构助理老师（跟着考研，本校就行，下次校招可以去园区当中学老师）
https://i.imgur.com/io2SM1h.png 我就这学校毕业的，有需要可以留个联系方式我帮你问问

你投投专门做数据的公司，技能比较匹配，这些全部都用得上。杭州知道一个微风企，类似这种，找到匹配的企业，直接 25k+ 要。

@kkk9 #18 你谈包工头那就说工地啦，也是个具体实例来讨论你这个大层面，也可以问问各行各业的 v 友，是干活的同事多，还是派活的领导多很多。
你换话题好奇赚多少，实话实说赚多赚少或者亏损都是常事，这是生意。
说实话没理解你的逻辑，思维太跳跃我跟不上。
感谢回复。

@chuck1in #19 江浙沪水电工最低 350 一天

我觉得他在拍你马屁，刚来不熟多抱你大腿

丁克不谈，现在好多年轻小姑娘都不想生小孩，就算退步结婚了也不坚持不生小孩。唉

什么 Java 开发，那叫后端开发，直接海投，各种招聘网站都试，找各种内推渠道。拿到一个 offer 就算成功了。

@kkk9 #7 我爸包工头，我也在工地搬砖过，你在瞎扯，工头和工人的比例最少也是 1/10 ，工头也要干活，还要做管理