按类别查询搜索结果
关于关键词 的检测结果,共 199
lsj0922al | 2019-04-16 15:42:28 | 阅读(730) | 评论(0)
关于大数据开发套件DataIDE使用的详细内容:大数据开发套件DataIDE使用教程(大数据开发套件(Data IDE) 是阿里云数加重要的Paas平台产品,是”DataWorks”中最重要的核心组件。提供全面托管的工作流服务,一站式开发管理的界面,帮助企业专注于数据价值的挖掘和探索。)阿里云大数据开发平台(Data IDE)是一款集...【阅读全文】
jelon521 | 2019-04-10 19:45:00 | 阅读(5570) | 评论(0)
简介Hive为我们提供了众多的内置函数,但是在实际的运用过程中仍然不能满足我们所有的需求.hive是用java开发的,本身提供了使用java去开发UDF的方式.而这里我们采用python的方式去实现UDF函数.DEMO实现我们这里用python自定义函数,去实现一个方法,利用身份证号去判断性别(18位身份证的倒数第二位偶数为女,奇数为男....【阅读全文】
多多安迪 | 2019-03-29 09:31:00 | 阅读(10) | 评论(0)
  3月28日,中国人民银行发布公告称,考虑到季末财政支出力度较大,银行体系流动性总量处于较高水平,当日不开展逆回购操作。这也是央行连续第7个交易日未开展逆回购。  兴业银行首席经济学家、华福证券首席经济学家鲁政委对《证券日报》记者表示,本周公开市场操作有1100亿元逆回购到期,跨季时点流动性面临一定冲击...【阅读全文】
【大数据】 启text汇聚排序
hxl | 2019-03-15 14:01:02 | 阅读(0) | 评论(0)
开启text汇聚排序curl -X PUT "http://192.168.1.136:19200/hxl_test/_mapping/tb_test" -H 'Content-Type: application/json' -d'{  "properties": {    "name": {        "type":     "text",      "fielddata": true    }&nb...【阅读全文】
支付宝技术团队 | 2019-03-14 14:15:01 | 阅读(3080) | 评论(0)
为此,本文策划了“春节红包”系列文章,以期为读者剖析各大平台的红包活动背后的技术细节。本文为支付宝篇。项目保障体系虽然心里不是很有谱,但也没那么担心,信心来自于两方面。团队在拿到中标信息后,我们迅速决策,达成了以下指导原则:优先确保核心链路,保证核心链路上用户体验顺畅。万一出现...【阅读全文】
涂涂的涂 | 2019-03-05 17:49:48 | 阅读(280) | 评论(0)
3月4日,2019年第一场阿里巴巴数据分析沙龙在杭州西溪园区圆满召开。 本次沙龙共邀请了40位数据领域的专业观众,一同探讨数据分析的技术与产品。  会上阿里巴巴高级产品专家晓草为大家介绍了阿里巴巴内部的数据团队演变历程,同时也给企业的BI选型提供了思考方向和能力建议。 ...【阅读全文】
hxl | 2018-12-18 08:53:17 | 阅读(0) | 评论(0)
#!/usr/bin/python# -*- coding: UTF-8 -*-# 文件名:indiceCreate.pyimport sysimport base64import timeimport httplibimport json## 老集群host(ip+port)oldClusterHost = "old-cluster.com"## 老...【阅读全文】
【大数据】 es设置机自启
hxl | 2018-12-13 16:43:27 | 阅读(0) | 评论(0)
环境:OS:Centos 71.在/etc/systemd/system目录下创建elasticsearch.service文件[Unit]Description=elasticsearch[Service]User=elasticsearchLimitNOFILE=100000LimitNPROC=100000ExecStart=/opt/elasticsearch-6.5.0/bin/elasticsearch -d[Install]WantedBy=multi-user.target2.设置开启启动systemctl ena...【阅读全文】
【大数据】 es数据迁同步
hxl | 2018-12-11 15:04:44 | 阅读(0) | 评论(0)
1.elasticdump安装su - rootcd /optyum install epel-releaseyum install nodejsyum install npmnpm install elasticdumpcd node_modules/elasticdump/bin  后便可以执行操作。#拷贝analyzer如分词./elasticdump \  --input=http://192.168.1.85:9200/db_customer \  --output=http://192.16...【阅读全文】
【大数据】 hbse集群
码农528 | 2018-11-18 23:06:32 | 阅读(0) | 评论(0)
# 在192.168.65.140 主节点运行脚本# 启动hdfs(在namenode所在节点上)cd /opt/install/hadoop-2.5.2sbin/sbin/start-dfs.sh# 启动MapReduce(在resourcemanager所在节点上)# 切换到192.168.65.142节点上ssh 192.168.65.142cd /opt/install/hadoop-2.5.2sbin/sbin/start-yarn.sh# 启动zookeeper (每个节点)cd /...【阅读全文】
hxl | 2018-09-29 15:38:49 | 阅读(0) | 评论(0)
配置mongodb开启自启动root用户下操作1.在/lib/systemd/system/目录下新建mongodb.service文件,内容如下vi /lib/systemd/system/mongodb.service输入如下内容[Unit] Description=mongodb After=network.target remote-fs.target nss-lookup.target [Service]Type=forkingExecStart=...【阅读全文】
【大数据】 cratedb启问题
hxl | 2018-09-10 18:20:48 | 阅读(0) | 评论(0)
[1]: initial heap size [268435456] not equal to maximum heap size [2843738112]; this can cause resize pauses and prevents mlockall from locking the entire heap该问题解决办法如下:cd /cratedb_data/crate-2.4.0/binvi  crate.in.sh添加如下两行CRATE_MIN_MEM=2gCRATE_MAX_MEM=2g[2]: max file desc...【阅读全文】
浅色年华 | 2018-08-06 14:19:41 | 阅读(1100) | 评论(0)
一下科技从成立至今一直专注于短视频领域,我们希望分发给用户更多的优质视频,让用户看到这个世界上的美好。我带领团队尝试多次转型,最终我们想到一点,我们需要大数据基础平台,更多的不是走到平台化或智能化,而是简单够用就好。一直播、小咖秀大数据架构我们先看一下一直播和小咖秀大数据的现状。当我...【阅读全文】
浅色年华 | 2018-08-01 16:30:16 | 阅读(930) | 评论(0)
saiheyi | 2018-07-31 17:06:11 | 阅读(670) | 评论(0)
如今各种API接口层出不穷,一个API的好与不好有很多方面可以考量,其中“安全性”是一个API接口最基本也是最重要的一个特点。尤其是对于充值缴费类的API接口来说,如话费充值API接口、流量充值API接口、游戏Q币充值、水电煤缴费接口等,安全与否直接影响到个人或企业的财产,所以做好API接口的安全性问题尤为重要,本篇文章我们就来聊聊关于API接口的安全性。【阅读全文】
浅色年华 | 2018-07-23 16:39:29 | 阅读(1170) | 评论(0)
随着项目版本的快速迭代、APP测试有以下几个特点:为节省成本,保证高效及高质量迭代,我们需采用更高效的测试方式,App自动化测试是较高效的手段。之前自动测试实践过程中遇到的诸多问题(代码复用率低,Case开发及数据构造繁琐,问题定位困难,学习成本高等),为解决相关痛点问题,我们重新实现了一套AP...【阅读全文】
浅色年华 | 2018-07-12 15:51:01 | 阅读(830) | 评论(0)
本文首发自“Docker公司”公众号(ID:docker-cn)编译丨小东每周一、三、五 与您不见不散!DockerCon 的闭幕演讲通常是最精华的演讲。在本次的 DockerCon 闭幕演讲中,我们想要强调一些可以代表容器工作负载未来趋势的应用程序。同时,我们还希望展示一些应用程序,让大家看到如何使用 Docker 推动创新。...【阅读全文】
浅色年华 | 2018-07-05 15:20:45 | 阅读(940) | 评论(0)
搭建 Java 开发环境安装 JDKyum list java*yum install java-1.7.0-openjdk* -yjava -versionTomcat 是一个应用服务器,是开发和调试 jsp 程序的首选,可以利用它来响应 HTML 页面的访问请求。cd /usr/localwget https://mc.qcloudimg.com/static/archive/fa66329388f85c08e8d6c12ceb8b2ca3/apache-tomcat-...【阅读全文】
帅得不敢出门 | 2018-07-05 10:31:51 | 阅读(2120) | 评论(0)
参考https://www.tensorflow.org/tutorials/image_retraining【阅读全文】
浅色年华 | 2018-07-03 15:23:57 | 阅读(820) | 评论(0)
但是我们一直在考虑如何将这个功能带给所有的开发人员。我们希望让容器化变得更加易用,而且我们也希望让共享和协作变得更加容易,并将基于容器的开发集成到更多开发人员的工具集中。这项新的指导性工作流程功能就是今天我们想要展示的,我们会在这里分享更多细节,并畅想未来。当您单击“Custom applicatio...【阅读全文】