首页 注册 登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  liprais  ›  全部回复第 141 页 / 共 163 页
回复总数  3249
1 ... 137  138  139  140  141  142  143  144  145  146 ... 163  
❮ ❯
2016-05-19 21:12:26 +08:00
回复了 hooli 创建的主题 › 北京 › ［北京招聘］如果你是一个大数据、搜索、算法工程师，那你不能不知道互利科技
去这家公司面过，人很 nice ，事情也挺有意思的，就是办公室旁边是个月嫂公司，楼道里的味道很感人
2016-05-19 13:39:08 +08:00
回复了 LedChang 创建的主题 › 程序员 › 最近比较火的， A 站 92 年产品总监简历造假时间大家看了吗？
@liprais 想起来， id 叫 pt195
2016-05-19 13:37:34 +08:00
回复了 LedChang 创建的主题 › 程序员 › 最近比较火的， A 站 92 年产品总监简历造假时间大家看了吗？
@realpg 好像是叫什么生活家的吧，感觉晒物还是晒的很猛的，其他没啥印象
2016-05-18 13:02:24 +08:00
回复了 openbaby 创建的主题 › Linux › 如何在单核 256M 内存下压榨出 nginx 的极限性能？
@openbaby 不是写了么,cached 226
2016-05-17 10:13:38 +08:00
回复了 Email 创建的主题 › 问与答 › 如果你结婚.有差不多 20 个朋友距离酒席地 400 公里,是周六,你安排住宿,应该安排一天,还是两天
这么鸡贼还有朋友愿意来也是服了
2016-05-08 20:55:29 +08:00
回复了 patrickstar 创建的主题 › 程序员 › 请教 数据可视化系统的 Web 解决方案
https://github.com/airbnb/caravel
穷人的 tableau
2016-04-18 19:28:43 +08:00
回复了 jiezhi 创建的主题 › 问与答 › [求助]数据库操作
建个视图，把表名改成视图名
2016-04-12 08:30:36 +08:00
回复了 oglop 创建的主题 › Linux › 渲染农场有一大堆的 log，应该用什么工具来快速的搜索／统一管理？
我公司用的 splunk
2016-04-11 15:11:00 +08:00
回复了 youchoudeyu 创建的主题 › 问与答 › 处理数据量较大的项目一般会用哪套语言和工具？
100w 自己装个 mysql 很随意的
2016-03-18 13:07:48 +08:00
回复了 anonymoustian 创建的主题 › Hadoop › Spark 读取 Hive 数据库的代码谁能提供一份， Java 实现的
@anonymoustian
YOUR_SPARK_HOME/conf
拷到这个目录下就行了
2016-03-18 11:02:26 +08:00
回复了 anonymoustian 创建的主题 › Hadoop › Spark 读取 Hive 数据库的代码谁能提供一份， Java 实现的
@anonymoustian
"Configuration of Hive is done by placing your hive-site.xml, core-site.xml (for security configuration), hdfs-site.xml (for HDFS configuration) file in conf/. Please note when running the query on a YARN cluster (cluster mode), the datanucleus jars under the lib directory and hive-site.xml under conf/ directory need to be available on the driver and all executors launched by the YARN cluster. The convenient way to do this is adding them through the --jars option and --file option of the spark-submit command."
把上述三个文件(hive-site.xml,core-site.xml,hdfs-site.xml)拷到 spark 的 conf 下面就行了
然后读写的时候代码如下

// sc is an existing JavaSparkContext.
HiveContext sqlContext = new org.apache.spark.sql.hive.HiveContext(sc.sc);


// Queries are expressed in HiveQL.
sqlContext.sql("select * from YOUR_HIVE_TABLE_NAME").collect();
2016-03-18 09:26:16 +08:00
回复了 anonymoustian 创建的主题 › Hadoop › Spark 读取 Hive 数据库的代码谁能提供一份， Java 实现的
@anonymoustian

SparkConf conf = new SparkConf().setAppName("JavaRFormulaExample");
JavaSparkContext jsc = new JavaSparkContext(conf);
HiveContext hiveContext = new HiveContext(jsc);
2016-03-18 09:00:15 +08:00
回复了 anonymoustian 创建的主题 › Hadoop › Spark 读取 Hive 数据库的代码谁能提供一份， Java 实现的
文档看了么?
把 hive 的配置拷到 conf 下面，再 new 一个 hivecontext 就可以了
2016-03-17 16:50:59 +08:00
回复了 shawnall 创建的主题 › 云计算 › 腾讯云 · 升级公告— Linux 系统盘容量升级&弹性扩容公告
从去年八月骂到现在，终于上线了
2016-03-17 11:16:03 +08:00
回复了 garyzhang 创建的主题 › 问与答 › 大公司究竟比小公司强在哪里？
大公司你做的产品可能出错了客户就要上门来砍死你,感受一下
小公司出错了可能你都不知道
2016-03-15 14:03:54 +08:00
回复了 madfrog1984 创建的主题 › Hadoop › 15 台规模的 hadoop 集群的机器的硬件配置选择问题
aws 搞定收工
2016-03-08 10:19:05 +08:00
回复了 Dagundelv 创建的主题 › 云计算 › 牛逼的腾讯云
腾讯云的技术实力简直呵呵
2016-02-01 17:19:31 +08:00
回复了 whahuzhihao 创建的主题 › 问与答 › 为什么一个 10M 的纯文本 html 可以瞬间加载完毕？
开了压缩了吧
1 ... 137  138  139  140  141  142  143  144  145  146 ... 163  
❮ ❯
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2718 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 54ms · UTC 13:42 · PVG 21:42 · LAX 06:42 · JFK 09:42
Developed with CodeLauncher
♥ Do have faith in what you're doing.