回答:你要做啥了，这几个都选的话，够呛。mysql是后端，就是存储数据的数据库，其余三个是前端，爬虫的话，c++，java，python都可以，我个人使用python，scrapy框架，高级爬虫都需要框架的，多线程。如果要学爬虫的话，需要数据库+一门语言，组合使用，至于数据分析，那就另当别论了，比如hadoop什么的
Jaden
|
903人阅读
回答:Python是一种极少数能兼具简单与功能强大的编程语言，易于学习理解，入门容易，代码更接近于自然语言和平时的思维方式，据统计显示是世界上最受欢迎的语言之一。爬虫就是利用爬虫技术去抓取各论坛、网站数据，将所需数据保存到数据库或是特定格式文件。具体学习：1）首先是学习Python基本常识学习，了解网络请求原理、网页结构。2）视频学习或者找一本专业网络爬虫的书进行学习。所谓前人栽树后人乘凉，跟着大神的步...
yanest
|
624人阅读
回答:使用SQL处理数据时，数据会在数据库内直接进行处理，而且sql处理本身可以对sql语句做优化，按照最优的策略自动执行。使用Java处理时，需要把数据从数据库读入到Java程序内存，其中有网络处理和数据封装的操作，数据量比较大时，有一定的延迟，所以相对来说数据处理就慢一些。当然，这个只是大体示意图，实际根据业务不同会更复杂。两者侧重的点不同，有各自适合的业务领域，需要根据实际情况选用合适的方式。
stefanieliang
|
1646人阅读
回答:大数据是我的主要研究方向之一，我使用Java的时间也比较久，多年前（2008年）还出版过Java的书籍，所以我来说一说Java与大数据的结合都需要学习哪些内容。大数据平台与Java首先Java是一门编程语言，而大数据则是一个产业领域，简单的说做大数据的相关研发可以使用Java语言来实现，Java是大数据领域的一个重要工具。大数据行业涉及到诸多岗位，这些岗位主要围绕数据展开，包括数据采集、数据整理、...
Yujiaao
|
672人阅读
回答:虽然不一定需要java 语言基础，但是选择java 语言是一条比较好的捷径。首先，大数据的很多组件都是java 语言写的，想要加深学习，就必须去啃源码，要啃源码，那java 语言就近水楼台先得月了。其次，大多数做大数据的公司都是招聘java 开发人员的，这样就业方面，就比较机会多一些。当然，除了java 语言，python 语言，shell 脚本语言，都是需要掌握的，能为工作带来不少便捷。最后，要...
tunny
|
899人阅读
介绍 在博客：Python爬虫——爬取中国高校排名前100名并写入MySQL中，我们利用Python来写爬虫，将http://gaokao.xdf.cn/201702/1... 中的大学排名表格爬取出来，并存入到MySQL中。 本次分享将用Java的Jsoup API来实现相同的功能，...
介绍 在博客：Python爬虫——爬取中国高校排名前100名并写入MySQL中，我们利用Python来写爬虫，将http://gaokao.xdf.cn/201702/1... 中的大学排名表格爬取出来，并存入到MySQL中。 本次分享将用Java的Jsoup API来实现相同的功能，...
... WebMagic虽然差不多两年没有维护，但其本身是一个优秀的爬虫框架的实现，源码中有很多值得参考的地方，特别是对爬虫多线程的控制。另外，由于页面爬取到的是非结构化数据，所以数据保存到MongoDB。 技术准备 IDE：IntelliJ ID...
cockroach 爬虫：又一个 java 爬虫实现 原文 简介 cockroach[小强] 当时不知道为啥选了这么个名字，又长又难记，导致编码的过程中因为单词的拼写问题耽误了好长时间。 这个项目算是我的又一个坑吧，算起来挖的坑多了去了，多...
...度百科的介绍部分，具体的功能介绍可以参考博客：Python爬虫——自制简单的搜索引擎。在上篇爬虫中我们用Python进行爬取，这次，我们将用Java来做爬虫，你没看错，就是Java. 在Eclipse中加入Jsoup包，下载网址为：https://jsoup.o...
大快搜索数据爬虫技术实例安装教学篇 爬虫安装前准备工作：大快大数据平台安装完成、zookeeper、redis、elasticsearch、mysql等组件安装启动成功。 1、修改爬虫安装配置文件(最好在线下修改好后再上传平台) 2、修改crawlerdkcrwjdb...
...示?福利? Java入门到就业学习路线规划? 小白快速入门Python爬虫路线 ?前言 Code皮皮虾 一个沙雕而又有趣的憨憨少年，和大多数小伙伴们一样喜欢听歌、游戏，当然除此之外还有写作的兴趣，emm…，日子还很长，让我们一起加...
前言 任何语言都是可以爬虫的，只要你懂的常用的http协议啥的就可以模仿浏览器的行为获取你想要的数据。这里我将教大家一个简单实用的案例：如何获取全民K歌的下载链接。 ps: 这主要是教大家一个入门级的爬虫，不是希...
前言 任何语言都是可以爬虫的，只要你懂的常用的http协议啥的就可以模仿浏览器的行为获取你想要的数据。这里我将教大家一个简单实用的案例：如何获取全民K歌的下载链接。 ps: 这主要是教大家一个入门级的爬虫，不是希...
工具和资料 QQ群 - Javascript高级爬虫 - 作者自建群，欢迎加入！ awesome-java-crawler - 作者收集的爬虫相关工具和资料 简介 CUrl类是以命令行工具CUrl为参考，使用标准Java的HttpURLConnection实现的Http工具类。 项目地址: https://github....
... ? 收藏 ⭐留言 ? 如有错误敬请指正！ 本文重点： 1、爬虫获取csdn大佬之间的关系 2、可视化分析暧昧关系，复杂堪比娱乐圈 大佬简介 ? Java李杨勇：一个性感的计算机专业毕业的3年java开发者。 ? 沉默王二：CSDN 头牌博主，J...
问题来源 今天与同学聊天，得知他有个任务是抓取同花顺网站上的股票数据，有点兴趣，便做了相关实验。 介绍 网站地址：http://q.10jqka.com.cn/ 网站界面： 爬取内容：图中全部股票专栏表格中的数据 观察 浏览器：Firefox ...
ChatGPT和Sora等AI大模型应用，将AI大模型和算力需求的热度不断带上新的台阶。哪里可以获得...
大模型的训练用4090是不合适的，但推理（inference/serving）用4090不能说合适，...
图示为GPU性能排行榜，我们可以看到所有GPU的原始相关性能图表。同时根据训练、推理能力由高到低做了...
张率功
