分布式爬取京东商品信息及评价
分布式爬取京东商品信息及评价1、主要思路获取京东所有商品列表：https://www.jd.com/allSort.aspx，大概有分类1190条 连接格式为：https://list.jd.com/list.html?cat=xxx页面如下： 此页面可以从该页面直接获取商品价格、商品标题、商品UR...
京东ES支持ZSTD压缩算法上线了:高性能，低成本 | 京东云技术团队-6 参考文档
[1] https://github.com/facebook/zstd [2] https://lucene.apache.org/core/8_11_2/core/org/apache/lucene/codecs/lucene87/package-summary.html#package.de...
ElasticSearch集群灾难：别放弃，也许能再抢救一下 | 京东云技术团队
1 前言Elasticsearch作为一个分布式搜索引擎，自身是高可用的；但也架不住一些特殊情况的发生，如：集群超过半数的master节点丢失，ES的节点无法形成一个集群，进而导致集群不可用；索引shard的文件损坏，分片无法被正常恢复，进而导致索引无法正常提供服务本地盘节点，多数据节点故障，旧节点...
用scrapy爬取京东的数据
本文目的是使用scrapy爬取京东上所有的手机数据,并将数据保存到MongoDB中。 一、项目介绍 主要目标1、使用scrapy爬取京东上所有的...
利用Python爬虫爬取京东商品的简要信息
一、前言本文适合有一定Python基础的同学学习Python爬虫，无基础请点击：慕课网——Python入门 申明：实例的主体框架来自于慕课网——Python开发简单...
京东Alpha平台开发笔记系列（二）
京东Alpha平台开发笔记系列（二）第一篇博文简单讲了一下京东Alpha平台与个人idea技能，本篇将讲解Alpha平台与个人开发需要的一些知识，下面开篇——》》》上图就是京东Alpha技能平台的首页，Skill平台（技能平台），官方介绍：Alpha技能的开发平台，提供全套的自助式开发工具；帮开发者...
剑指Offer——京东校招笔试题+知识点总结
剑指Offer——京东校招笔试题+知识点总结笔试感言经过一系列的笔试，发觉自己的基础知识还是比较薄弱的，尤其是数据结构和网络，还有操作系统。工作量还是很大的。做到精确制导的好方法就是在网上刷题，包括牛客和赛马网。另外，赛马网的编程IDE实在是不敢恭维。在本地运行正确，在他那居然提示全部数据未通过。关...
首届京东自有品牌科技周“京东点亮生活”圆满成功 - 课程公告板 - 京东内部论坛 - Powered by Discuz!
首届京东自有品牌科技周“京东点亮生活”圆满成功 - 课程公告板 - 京东内部论坛 - Powered by Discuz!首届京东自有品牌科技周“京东点亮生活”圆满成功 [复制链接] bjchenliye发短消息加为好友bjchenliye 当前离线 注册时间2011-11-10 最后登录201...
爬虫实战【10】利用Selenium自动登陆京东签到领金币
今天我们来讲一下如何通过python来实现自动登陆京东，以及签到领取金币。如何自动登陆京东？我们先来看一下京东的登陆页面，如下图所示：【插入图片，登陆页面】登陆框就是右面这一个框框了，但是目前我们遇到一个困呐，默认的登陆方式是扫码登陆，如果我们想要以用户民个、密码的形式登陆，就要切换一下。我们看一下...
京东云罗玉杰：OpenResty 在直播场景中的应用
2019 年 3 月 23 日，OpenResty 社区联合又拍云，举办 OpenResty × Open Talk 全国巡回沙龙·北京站，京东云技术专家罗玉杰在活动上做了《 OpenResty 在直播场景中的应用 》的分享。OpenResty x Open Talk 全国巡回沙龙是由 OpenRe...
solr_架构案例【京东站内搜索】(附程序源代码)
注意事项：首先要保证部署solr服务的Tomcat容器和检索solr服务中数据的Tomcat容器，它们的端口号不能发生冲突，否则web程序是不可能运行起来的。一：solr服务的端口号、我这里的solr服务的tomcat容器的端口号已经修改为8083：二：检索solr服务中数据的tomcat容器的端口...
京东架构师的showtime京东个性化推荐系统实战
推荐系统核心任务是排序，从线上服务角度看，就是将数据从给定集合中数据选择出来，选出后根据一定规则策略方法进行排序。线上服务要根据一定规则进行架构设计，架构设计是什么？每一次权衡取舍都是设计，设计需要理解需求、深入理解需求基础上做权衡取舍。复杂系统架构需要需求方与研发人员反复沟通探讨。这需要技术领导者...
商城项目实战 | 2.2 Android 仿京东商城——自定义 Toolbar (二)
本文为菜鸟窝作者刘婷的连载。”商城项目实战”系列来聊聊仿”京东淘宝的购物商城”如何实现。上一篇文章《商城项目实战 | 2.1 Android 仿京东商城——自定义 Toolbar (一)》中已经对 Toolbar 的一些基本属性以及简单使用做了介绍了，这篇文章就开始介绍如何定义属于自己的 Style...
jvm内存模型-和内存分配以及jdk、jre、jvm是什么关系(阿里，美团，京东)
参考：JVM的垃圾回收机制 总结(垃圾收集、回收算法、垃圾回收器)1.什么是jvm?（1）jvm是一种用于计算设备的规范，它是一个虚构出来的机器，是通过在实际的计算机上仿真模拟各种功能实现的。（2）jvm包含一套字节码指令集，一组寄存器，一个栈，一个垃圾回收堆和一个存储方法域。（3）JVM屏蔽了与具...
算法工程师：双非渣硕是如何获得百度、京东双SP
本人本科硕士皆双非，和牛客大佬们没得比，目前拿到的还可以的offer就是百度SP和京东SP，都是做的推荐算法，其他的不说了。先说一下个人经历吧，学校比较水，实验室没有项目，实习经历：腾讯实习+滴滴实习 比赛经历：几个数据挖掘竞赛Top5的名次。个人感觉，算法岗确实看学校，但如果简历还可以的话，还...
京东2015年应届生招聘笔试题（A）卷答案选择题部分
1.操作系统死锁的必要条件（多选题）：（） A.相互排斥条件 B.系统资源有限 C.进程调度不合理 D.环路等待条件答：A,C,D參考资料：http://blog.sina.com.cn/s/blog_5e3604840100ddgq.html2.定义根节点深度为1，有n个元素的全然二叉树的...
剑指Offer——京东实习笔试题汇总
剑指Offer——京东实习笔试题汇总编程题1题目的详细信息已经记不住，只能大致描述一下，就是求最有价值的的委托信息。 n、s、B、S其中n代表委托信息，s要求的最有价值的委托信息的个数，B代表买入、S代表卖出，S条卖出按照从小到大，买入按照从大到小。 输出： 6 2 B 50 2 S 50 1 ...
BAT、网易、京东等如何做大数据风控的？
大数据风控目前应该是前沿技术在金融领域的最成熟应用，相对于智能投顾、区块链等还在初期的金融科技应用，大数据风控目前已经在业界逐步普及，从BATJ这样的大企业，到交易规模比较大的网贷平台，再到做现金贷、消费金融的创业公司，都在通过大数据风控技术来...
python爬虫爬取京东、淘宝、苏宁上华为P20购买评论
爬虫爬取京东、淘宝、苏宁上华为P20购买评论1.使用软件Anaconda32.代码截图三个网站代码大同小异，因此只展示一个3.结果（部分）京东淘宝苏宁4.分析这三个网站上的评论数据是动态的，无法直接获取html解析出来。这些数据是通过数据包的传输获取到这些评论信息，其中通过浏览器开发者模式对数据包的...
doubleclick cookie、动态脚本、用户画像、用户行为分析和海量数据存取 推荐词 京东 电商 信息上传 黑洞 https://blackhole.m.jd.com/getinfo
doubleclick cookiehttps://mp.weixin.qq.com/s/vZUj-Z9FGSSWXOodGqbYkA揭密Google的网络广告技术：基于互联网大数据视角原创： 曾剑平 互联网大数据处理技术与应用 2018-04-11相信每个人在上网时都被各种网络广告所困扰，不断地消...