Java——网络编程
网络编程:
IP: 定位节点,区分节点
端口: 区分软件
URL: 统一资源定位符
协议: 交流方式,更加畅通,更加规范,更加标准.
传输协议: TCP UDP,称为传输层协议
TCP: 相当于打电话 相对比较安全 效率低
UDP: 相当于写信 不安全 效率高
IP:定位每一个节点,计算机,手机,pad…通讯设备等
IPV4: 4个字节 32位
IPV6: 128位
129.168.0.0~192.168.255.255 非注册IP,专门为组织内部使用
127.0.0.1 本机IP
localhost 本机域名
IP->域名之间,通过域名解析,DNS服
java提供一个类,InetAddress表示IP
InetAddress 此类表示互联网协议 (IP) 地址。
import java.net.InetAddress;
import java.net.UnknownHostException;
public class IPDemo01 {
public static void main(String[] args) throws UnknownHostException {
//static InetAddress getLocalHost() 返回本地主机。
InetAddress ip1 = InetAddress.getLocalHost();
System.out.println(ip1); //AB-2019052508**/192.168.3.1**
System.out.println(ip1.getHostAddress()); //192.168.3.1**
System.out.println(ip1.getHostName()); //AB-2019052508**
//static InetAddress getByName(String host) 在给定主
机名的情况下确定主机的 IP 地址。
InetAddress ip2 = InetAddress.getByName("www.baidu.com");
System.out.println(ip2); //www.baidu.com/123.56.138.186
System.out.println(ip2.getHostAddress());
System.out.println(ip2.getHostName());
ip2 = InetAddress.getByName("123.56.138.176");
System.out.println(ip2);
}
}
端口:
- 1.区分软件
- 2.2个字节 0~65535
- 3.统一协议下端口号不能冲突
- 4.定义越大越好
- 常见的端口号: 预留端口号 8000以下的端口号
- 80: http
- 8080: tomcat
- 1521: oracle
- 3306: mysql
- java表示端口,InetSocketAddress 此类实现 IP 套接字地址(IP 地址 + 端口号)。
import java.net.InetSocketAddress;
public class PORTDemo02 {
public static void main(String[] args) {
//InetSocketAddress(String hostname, int port)
InetSocketAddress in = new InetSocketAddress("127.0.0.1",8888);
InetSocketAddress in2 = new InetSocketAddress("localhost",9000);
System.out.println(in);///127.0.0.1:8888
System.out.println(in.getHostName());
System.out.println(in.getAddress());
System.out.println(in2.getHostName());
System.out.println(in2.getAddress());
System.out.println(in2.getPort());
}
}
url: 统一资源定位符
- 互联网的三大基石: html http url
- 1.协议
- 2.域名
- 3.端口: 80默认
- 4.请求资源
- http://www.baidu.com:80/index.html?uname=shsxt&pwd=123#a
import java.net.MalformedURLException;
import java.net.URL;
public class URLDemo03 {
public static void main(String[] args) throws MalformedURLException {
// URL(String spec) 根据 String 表示形式创建 URL 对象。
URL url = new URL("http://www.baidu.com:80/index.html?uname=shsxt&pwd=123#a");
System.out.println(url);
System.out.println("协议"+url.getProtocol());
System.out.println("域名"+url.getHost());
System.out.println("端口"+url.getPort());
System.out.println("请求资源"+url.getFile());
System.out.println("请求资源"+url.getPath());
System.out.println("参数"+url.getQuery());
System.out.println("锚点"+url.getRef());
}
}
网络爬虫
import java.io.BufferedReader;
import java.io.IOException;
import java.io.InputStream;
import java.io.InputStreamReader;
import java.io.Reader;
import java.net.MalformedURLException;
import java.net.URL;
public class SpiderDemo04 {
public static void main(String[] args) throws IOException {
//1.获取url
URL url = new URL("https://www.taobao.com");
//2.下载资源
//InputStream openStream()
InputStream is = url.openStream();
//InputStreamReader转换流: 把参数字节流转为字符流
BufferedReader rd = new BufferedReader(new InputStreamReader(is,"UTF-8"));
String msg=null;
while((msg=rd.readLine())!=null) {
System.out.println(msg);
}
rd.close();
}
}
爬去指定页面,把html写入本地
import java.io.BufferedReader;
import java.io.BufferedWriter;
import java.io.FileWriter;
import java.io.IOException;
import java.io.InputStream;
import java.io.InputStreamReader;
import java.io.Reader;
import java.net.MalformedURLException;
import java.net.URL;
public class SpiderDemo04 {
public static void main(String[] args) throws IOException {
//1.获取url
URL url = new URL("https://www.dianping.com");
//2.下载资源
//InputStream openStream()
InputStream is = url.openStream();
//InputStreamReader转换流: 把参数字节流转为字符流
BufferedReader rd = new BufferedReader(new InputStreamReader(is,"UTF-8"));
BufferedWriter rw = new BufferedWriter(new FileWriter("src/index.html"));
String msg=null;
while((msg=rd.readLine())!=null) {
System.out.println(msg);
rw.write(msg);
}
rw.flush();
rw.close();
rd.close();
}
}
网络爬虫原理+模拟浏览器
import java.io.BufferedReader;
import java.io.BufferedWriter;
import java.io.FileWriter;
import java.io.IOException;
import java.io.InputStreamReader;
import java.net.HttpURLConnection;
import java.net.MalformedURLException;
import java.net.ProtocolException;
import java.net.URL;
public class SpiderDemo05 {
public static void main(String[] args) throws IOException {
//1.获取URL
URL url = new URL("https://www.dianping.com");
//2.下载资源
HttpURLConnection conn = (HttpURLConnection) url.openConnection();
//请求方式
conn.setRequestMethod("GET");
conn.setRequestProperty("User-Agent", "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74.0.3729.131 Safari/537.36");
BufferedReader rd = new BufferedReader(new InputStreamReader(conn.getInputStream(),"UTF-8"));
BufferedWriter rw = new BufferedWriter(new FileWriter("src/index.html"));
String msg=null;
while((msg=rd.readLine())!=null) {
System.out.println(msg);
rw.write(msg);
}
rw.flush();
rw.close();
rd.close();
}
}
网络编程:
- IP: 定位节点,区分节点
- 端口: 区分软件
- URL: 统一资源定位符
- 协议: 交流方式,更加畅通,更加规范,更加标准.
- 传输协议: TCP UDP,称为传输层协议
- TCP: 相当于打电话 相对比较安全 效率低
- UDP: 相当于写信 不安全 效率高
- IP:定位每一个节点,计算机,手机,pad…通讯设备等
- IPV4: 4个字节 32位
- IPV6: 128位
- 129.168.0.0~192.168.255.255 非注册IP,专门为组织内部使用
- 127.0.0.1 本机IP
- localhost 本机域名
- IP->域名之间,通过域名解析,DNS服务
- java提供一个类,InetAddress表示IP
- InetAddress 此类表示互联网协议 (IP) 地址。
import java.net.InetAddress;
import java.net.UnknownHostException;
public class IPDemo01 {
public static void main(String[] args) throws UnknownHostException {
//static InetAddress getLocalHost() 返回本地主机。
InetAddress ip1 = InetAddress.getLocalHost();
System.out.println(ip1); //AB-201905250842/192.168.3.105
System.out.println(ip1.getHostAddress()); //192.168.3.105
System.out.println(ip1.getHostName()); //AB-201905250842
//static InetAddress getByName(String host) 在给定主机名的情况下确定主机的 IP 地址。
InetAddress ip2 = InetAddress.getByName("www.shsxt.com");
System.out.println(ip2); //www.shsxt.com/123.56.138.186
System.out.println(ip2.getHostAddress());
System.out.println(ip2.getHostName());
ip2 = InetAddress.getByName("123.56.138.186");
System.out.println(ip2);
}
}
端口:
- 1.区分软件
- 2.2个字节 0~65535
- 3.统一协议下端口号不能冲突
- 4.定义越大越好
- 常见的端口号: 预留端口号 8000以下的端口号
- 80: http
- 8080: tomcat
- 1521: oracle
- 3306: mysql
- java表示端口,InetSocketAddress 此类实现 IP 套接字地址(IP 地址 + 端口号)。
public class PORTDemo02 {
public static void main(String[] args) {
//InetSocketAddress(String hostname, int port)
InetSocketAddress in = new InetSocketAddress("127.0.0.1",8888);
InetSocketAddress in2 = new InetSocketAddress("localhost",9000);
System.out.println(in);///127.0.0.1:8888
System.out.println(in.getHostName());
System.out.println(in.getAddress());
System.out.println(in2.getHostName());
System.out.println(in2.getAddress());
System.out.println(in2.getPort());
}
}
协议: 合同
-
udp: 写信 非面向连接的 不安全的|不可靠 协议简单,开销小,效率高 只管写只管发 大小有限制 一般不超过60k
-
tcp: 打电话 面向连接 安全性高 效率低 3次握手:1.拨号 2.回应 3.发送数据
-
Socket 套接字
传输层为应用层开辟的小口子 不同的协议下Socket的实现不同 tcp和udp面向socket编程
-
udp:
DatagramSocket 套接字(发送端,接收端) DatagramPacket 数据包
-
基础流程: 发送端
1.DatagramSocket定义发送端 指定端口,ip 2.准备数据 3.封装成数据包 4.发送 send(DatagramPacket) 5.释放资源
import java.io.IOException;
import java.net.DatagramPacket;
import java.net.DatagramSocket;
import java.net.InetSocketAddress;
import java.net.SocketException;
public class UDPDemo01 {
public static void main(String[] args) throws IOException {
System.out.println("----------发送方启动中---------");
//1.DatagramSocket定义发送端
DatagramSocket client = new DatagramSocket(8888);
//2.准备数据
String data = "上海尚学堂";
byte[] arr = data.getBytes();
//3.打包
DatagramPacket packet = new DatagramPacket(arr,0,arr.length,new InetSocketAddress("127.0.0.1",9999));
//4.发送数据
client.send(packet);
//5.释放资源
client.close();
}
}
基础流程: 接收端
1.DatagramSocket定义发接收端
2.准备容器 封装成DatagramPacket ,用来接收数据
3.阻塞式接收包裹
4.分析数据
5.释放资源
import java.io.IOException;
import java.net.DatagramPacket;
import java.net.DatagramSocket;
import java.net.InetSocketAddress;
public class UDReceive02 {
public static void main(String[] args) throws IOException {
System.out.println("----------接收方启动中---------");
//1.DatagramSocket定义发接收方
DatagramSocket client = new DatagramSocket(9999);
//2.准备容器
byte[] arr = new byte[1024];
//3.打包 DatagramPacket(byte[] buf, int offset, int length) 构造 DatagramPacket,用来接收长度为 length 的包,在缓冲区中指定了偏移量。
DatagramPacket packet = new DatagramPacket(arr,0,arr.length);
//4.发送数据
client.receive(packet);
//5.处理数据
System.out.println(packet.getData());
System.out.println(packet.getLength());
System.out.println(new String(arr,0,arr.length));
//6.释放资源
client.close();
}
}