爬取<script id="js-initialdata" type="text/json"数据 
时间: 2023-05-10 10:54:34 浏览: 39
爬取网页是指通过编写代码来自动获取网页上的内容。在一般的爬虫过程中,获取网页上的数据可以采用多种方式,如通过网页源码获取、API获取等。而在本文中,我们需要获取网页上的一个json数据,这个数据是存放在一个type为"text/json"的script标签中,id为"js-initialdata"。
首先,我们需要使用一个HTTP客户端库,如requests,去请求网页。接着,获取到网页源代码后就可以从中找到这个script标签了。可以使用BeautifulSoup库来解析网页源代码,然后使用find()或find_all()方法来找到script标签,并指定type和id属性的值。通过BeautifulSoup获取到script标签后,我们就可以从中提取出这个json数据了。
由于json数据的特殊格式,我们需要使用json库来转换和解析数据。可以使用json.loads()方法来将json数据转化为python中的对象,然后就可以进行进一步的操作了。
总结来说,爬取<script id="js-initialdata" type="text/json"数据的步骤为:请求网页、解析网页源代码、找到指定的script标签、提取json数据、使用json库解析数据。
相关问题
<h1>通讯录</h1> <button class="add-btn">添加联系人</button> <input type="text" id="search-input" placeholder="搜索姓名或电话"> <table> <thead> <tr> <th>姓名</th> <th>电话</th> <th>邮箱</th> <th>操作</th> </tr> </thead> <tbody id="contact-list"> <!-- 数据渲染 --> </tbody> </table> <!-- 分页按钮 --> <div id="page-buttons"></div> <!-- 弹出层,用于添加或编辑联系人 --> <div id="modal" class="modal" style="display: none;"> <div class="modal-content"> <span class="close">×</span> <form> <div class="form-group"> <label for="name">姓名</label> <input type="text" id="name" name="name" required> </div> <div class="form-group"> <label for="phone">电话</label> <input type="text" id="phone" name="phone" required> </div> <div class="form-group"> <label for="email">邮箱</label> <input type="text" id="email" name="email" required> </div> <button id="save-btn">保存</button> <button id="cancel-btn">取消</button> </form> </div> </div>帮我加入一个搜索框,点击搜索按钮或者通过搜索框的内容可以查找到查找的内容,让数据具有添加删除和编辑的功能,编辑的时候增加弹窗
好的,以下是添加搜索框、增删改功能和弹窗编辑功能的代码:
HTML代码:
```
<h1>通讯录</h1>
<button class="add-btn">添加联系人</button>
<input type="text" id="search-input" placeholder="搜索姓名或电话">
<table>
<thead>
<tr>
<th>姓名</th>
<th>电话</th>
<th>邮箱</th>
<th>操作</th>
</tr>
</thead>
<tbody id="contact-list">
<!-- 数据渲染 -->
</tbody>
</table>
<!-- 分页按钮 -->
<div id="page-buttons"></div>
<!-- 弹出层,用于添加或编辑联系人 -->
<div id="modal" class="modal" style="display: none;">
<div class="modal-content">
<span class="close">×</span>
<form>
<div class="form-group">
<label for="name">姓名</label>
<input type="text" id="name" name="name" required>
</div>
<div class="form-group">
<label for="phone">电话</label>
<input type="text" id="phone" name="phone" required>
</div>
<div class="form-group">
<label for="email">邮箱</label>
<input type="text" id="email" name="email" required>
</div>
<button id="save-btn">保存</button>
<button id="cancel-btn">取消</button>
</form>
</div>
</div>
```
JavaScript代码:
```
// 定义全局变量
var contacts = []; // 通讯录数据
var modalMode = "add"; // 弹窗模式,初始为添加模式
var modalId; // 当前编辑的联系人id
// 页面加载完成后执行初始化函数
window.onload = function() {
init();
}
// 初始化函数
function init() {
// 获取本地存储的通讯录数据
var contactsData = localStorage.getItem("contacts");
if (contactsData) {
contacts = JSON.parse(contactsData);
}
// 渲染表格和分页按钮
renderTable(contacts);
renderPageButtons(contacts);
// 绑定事件
document.querySelector("#search-input").addEventListener("input", searchContacts);
document.querySelector(".add-btn").addEventListener("click", showModal);
document.querySelector("#save-btn").addEventListener("click", saveContact);
document.querySelector("#cancel-btn").addEventListener("click", hideModal);
document.querySelector("#contact-list").addEventListener("click", handleContactClick);
}
// 渲染表格函数
function renderTable(data) {
var tableBody = document.querySelector("#contact-list");
tableBody.innerHTML = "";
for (var i = 0; i < data.length; i++) {
var contact = data[i];
var tr = "<tr><td>" + contact.name + "</td><td>" + contact.phone + "</td><td>" + contact.email + "</td><td><button class='edit-btn' data-id='" + contact.id + "'>编辑</button><button class='delete-btn' data-id='" + contact.id + "'>删除</button></td></tr>";
tableBody.insertAdjacentHTML("beforeend", tr);
}
}
// 渲染分页按钮函数
function renderPageButtons(data) {
var pageButtons = document.querySelector("#page-buttons");
pageButtons.innerHTML = "";
var pageCount = Math.ceil(data.length / 10);
for (var i = 1; i <= pageCount; i++) {
var button = "<button class='page-btn' data-page='" + i + "'>" + i + "</button>";
pageButtons.insertAdjacentHTML("beforeend", button);
}
}
// 搜索函数
function searchContacts() {
var keyword = this.value.trim().toLowerCase();
var filteredContacts = contacts.filter(function(contact) {
return contact.name.toLowerCase().indexOf(keyword) !== -1 || contact.phone.indexOf(keyword) !== -1;
});
renderTable(filteredContacts);
renderPageButtons(filteredContacts);
}
// 显示弹窗函数
function showModal() {
document.querySelector("#name").value = "";
document.querySelector("#phone").value = "";
document.querySelector("#email").value = "";
document.querySelector("#modal").style.display = "block";
}
// 隐藏弹窗函数
function hideModal() {
document.querySelector("#modal").style.display = "none";
}
// 保存联系人函数
function saveContact(event) {
event.preventDefault(); // 阻止默认提交事件
var name = document.querySelector("#name").value.trim();
var phone = document.querySelector("#phone").value.trim();
var email = document.querySelector("#email").value.trim();
if (name && phone && email) {
if (modalMode === "add") {
// 添加联系人
var newContact = {
id: Date.now().toString(),
name: name,
phone: phone,
email: email
};
contacts.push(newContact);
localStorage.setItem("contacts", JSON.stringify(contacts));
} else {
// 编辑联系人
var contactIndex = contacts.findIndex(function(contact) {
return contact.id === modalId;
});
if (contactIndex !== -1) {
contacts[contactIndex].name = name;
contacts[contactIndex].phone = phone;
contacts[contactIndex].email = email;
localStorage.setItem("contacts", JSON.stringify(contacts));
}
}
renderTable(contacts);
renderPageButtons(contacts);
hideModal();
}
}
// 处理联系人列表中的按钮点击事件
function handleContactClick(event) {
if (event.target.classList.contains("edit-btn")) {
// 编辑按钮被点击
modalMode = "edit";
modalId = event.target.getAttribute("data-id");
var contact = contacts.find(function(contact) {
return contact.id === modalId;
});
if (contact) {
document.querySelector("#name").value = contact.name;
document.querySelector("#phone").value = contact.phone;
document.querySelector("#email").value = contact.email;
showModal();
}
} else if (event.target.classList.contains("delete-btn")) {
// 删除按钮被点击
var confirmDelete = confirm("确定要删除这个联系人吗?");
if (confirmDelete) {
var contactId = event.target.getAttribute("data-id");
var contactIndex = contacts.findIndex(function(contact) {
return contact.id === contactId;
});
if (contactIndex !== -1) {
contacts.splice(contactIndex, 1);
localStorage.setItem("contacts", JSON.stringify(contacts));
renderTable(contacts);
renderPageButtons(contacts);
}
}
}
}
// 处理分页按钮点击事件
document.addEventListener("click", function(event) {
if (event.target.classList.contains("page-btn")) {
var page = event.target.getAttribute("data-page");
var startIndex = (page - 1) * 10;
var endIndex = startIndex + 10;
var pageData = contacts.slice(startIndex, endIndex);
renderTable(pageData);
}
});
```
CSS代码:
```
/* 弹出层样式 */
.modal {
position: fixed;
z-index: 1;
left: 0;
top: 0;
width: 100%;
height: 100%;
background-color: rgba(0, 0, 0, 0.4);
}
.modal-content {
background-color: #fefefe;
margin: 15% auto;
padding: 20px;
border: 1px solid #888;
width: 50%;
}
.close {
color: #aaa;
float: right;
font-size: 28px;
font-weight: bold;
}
.close:hover,
.close:focus {
color: black;
text-decoration: none;
cursor: pointer;
}
/* 表格样式 */
table {
border-collapse: collapse;
width: 100%;
}
th,
td {
text-align: left;
padding: 8px;
}
th {
background-color: #333;
color: white;
}
tr:nth-child(even) {
background-color: #f2f2f2;
}
/* 分页按钮样式 */
#page-buttons {
margin-top: 20px;
}
.page-btn {
background-color: #4CAF50;
border: none;
color: white;
padding: 10px;
text-align: center;
text-decoration: none;
display: inline-block;
font-size: 16px;
margin-right: 5px;
cursor: pointer;
}
.page-btn.active {
background-color: #008CBA;
}
/* 搜索框样式 */
#search-input {
margin: 20px 0;
padding: 10px;
border: none;
border-bottom: 1px solid #ccc;
width: 100%;
box-sizing: border-box;
font-size: 16px;
color: #666;
}
#search-input:focus {
outline: none;
border-bottom: 1px solid #008CBA;
}
/* 添加、编辑、删除按钮样式 */
.add-btn {
background-color: #4CAF50;
border: none;
color: white;
padding: 10px;
text-align: center;
text-decoration: none;
display: inline-block;
font-size: 16px;
margin-right: 5px;
cursor: pointer;
}
.edit-btn,
.delete-btn {
background-color: #008CBA;
border: none;
color: white;
padding: 5px 10px;
text-align: center;
text-decoration: none;
display: inline-block;
font-size: 14px;
margin-right: 5px;
cursor: pointer;
}
.edit-btn:hover,
.delete-btn:hover {
background-color: #666;
}
```
<!DOCTYPE html> <html lang="en" xmlns:th="http://www.w3.org/1999/xhtml"> <head> <title>register</title> <script th:src="@{/js/jquery-2.1.1.min.js}" type="text/javascript"></script> <script th:src="@{/js/vue.min.js}" type="text/javascript"></script> <script src="https://unpkg.com/element-ui/lib/index.js"></script> <title>登录表单</title> <meta name="keywords" content="登录表单"/> <!-- Meta-Tags --> <meta name="viewport" content="width=device-width, initial-scale=1"> <meta http-equiv="Content-Type" content="text/html; charset=utf-8"> <script type="application/x-javascript"> addEventListener("load", function() { setTimeout(hideURLbar, 0); }, false); function hideURLbar(){ window.scrollTo(0,1); } </script> <!-- //Meta-Tags --> <!-- Style --> <link rel="stylesheet" href="/./css/style.css" type="text/css" > </head> <body> <h1>注册表单</h1> <div class="container w3layouts agileits"> <div class="register w3layouts agileits" id="app"> <h2>注 册</h2> <form action="#" method="post"> <input type="text" Name="Name" placeholder="用户名" required=""> <input type="text" Name="Email" placeholder="邮箱" required=""> <input type="password" Name="Password" placeholder="密码" required=""> <input type="text" Name="Phone Number" placeholder="手机号码" required=""> </form> <div class="send-button w3layouts agileits"> <button @click="turnToRegister">注册</button> </div> <div class="clear"></div> </div> <div class="clear"></div> </div> <script> //新建一个Vue对象。 new Vue({ //绑定作用域 el: "#app", //绑定数据 data: {//双向绑定数据 user: { name: "", password: "", } }, //绑定方法; methods: { addOne() { //适用ajax进行数据交互 $.ajax({ url: "/user/insertOne",//请求的路径 type: "post",//请求的方式 data: { name: this.user.name,//获取user里面的数据并且进行绑定; password: this.user.password, }, //返回数据的格式 dataType: "json", //成功返回方式 success: function (rs) { if (rs.status == 200) {//rs获取状态码看是否成功 layer.alert(rs.msg, {icon: 6}, function () { //获取ifram层的窗口名 var frameIndex = parent.layer.getFrameIndex(window.name); parent.layer.close(frameIndex); parent.location.reload() location.href="/login" }) } else { layer.alert(rs.msg, {icon: 5}, function () { //获取ifram层的窗口名 var frameIndex = parent.layer.getFrameIndex(window.name); parent.layer.close(frameIndex); }) } } }) } } }) </script> </body> </html> 帮我以上代码实现注册功能成功后,新增一个小弹窗,弹窗内容是注册成功
好的,首先你需要在代码中引入 Element UI 的弹窗组件,在 `<head>` 标签中添加以下代码:
```html
<link rel="stylesheet" href="https://unpkg.com/element-ui/lib/theme-chalk/index.css">
```
然后在 `<body>` 标签的最后,添加以下代码:
```html
<script src="https://unpkg.com/element-ui/lib/index.js"></script>
```
现在你就可以使用 Element UI 的弹窗组件了。接下来,你需要在 `success` 回调函数中添加以下代码来弹出一个成功提示框:
```javascript
this.$message({
message: '注册成功',
type: 'success'
});
```
现在,完整的代码如下:
```html
<!DOCTYPE html>
<html lang="en" xmlns:th="http://www.w3.org/1999/xhtml">
<head>
<title>register</title>
<script th:src="@{/js/jquery-2.1.1.min.js}" type="text/javascript"></script>
<script th:src="@{/js/vue.min.js}" type="text/javascript"></script>
<link rel="stylesheet" href="https://unpkg.com/element-ui/lib/theme-chalk/index.css">
<script src="https://unpkg.com/element-ui/lib/index.js"></script>
<title>登录表单</title>
<meta name="keywords" content="登录表单"/>
<!-- Meta-Tags -->
<meta name="viewport" content="width=device-width, initial-scale=1">
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<script type="application/x-javascript">
addEventListener("load", function() {
setTimeout(hideURLbar, 0);
}, false);
function hideURLbar(){
window.scrollTo(0,1);
}
</script>
<!-- //Meta-Tags -->
<!-- Style -->
<link rel="stylesheet" href="/./css/style.css" type="text/css" >
</head>
<body>
<h1>注册表单</h1>
<div class="container w3layouts agileits">
<div class="register w3layouts agileits" id="app">
<h2>注 册</h2>
<form action="#" method="post">
<input type="text" Name="Name" placeholder="用户名" required="">
<input type="text" Name="Email" placeholder="邮箱" required="">
<input type="password" Name="Password" placeholder="密码" required="">
<input type="text" Name="Phone Number" placeholder="手机号码" required="">
</form>
<div class="send-button w3layouts agileits">
<button @click="addOne">注册</button>
</div>
<div class="clear"></div>
</div>
<div class="clear"></div>
</div>
<script>
//新建一个Vue对象。
new Vue({
//绑定作用域
el: "#app",
//绑定数据
data: {
//双向绑定数据
user: {
name: "",
password: "",
}
},
//绑定方法;
methods: {
addOne() {
//适用ajax进行数据交互
$.ajax({
url: "/user/insertOne",//请求的路径
type: "post",//请求的方式
data: {
name: this.user.name,//获取user里面的数据并且进行绑定;
password: this.user.password,
},
//返回数据的格式
dataType: "json",
//成功返回方式
success: function (rs) {
if (rs.status == 200) {//rs获取状态码看是否成功
this.$message({
message: '注册成功',
type: 'success'
});
//获取ifram层的窗口名
var frameIndex = parent.layer.getFrameIndex(window.name);
parent.layer.close(frameIndex);
parent.location.reload()
location.href="/login"
} else {
layer.alert(rs.msg, {icon: 5}, function () {
//获取ifram层的窗口名
var frameIndex = parent.layer.getFrameIndex(window.name);
parent.layer.close(frameIndex);
})
}
}
})
}
}
})
</script>
</body>
</html>
```
现在,当用户成功注册后,就会出现一个弹窗提示用户注册成功。
相关推荐


cheerio 执行以下代码转换为json <html> <input type="checkbox" v-model="RemitInBox" class="RemitInBox v-pristine v-valid" name="RemitInBox" value="0" v-checked="data.CheckFlag" v-disabled="data.FndDrc!='01' || data.BusiState!='10'" id="List0_RemitIn" v-click="clickBox($index,data)"> IR00252300347A IR00252300347A 2023-05-25 USD32,993.50 1/FLOKSER KIMYA SANAYI VE TICARET 1... 31980005000107125 入账 退汇 待客户确认 受理成功 打印 </html>
可以使用 cheerio 库将 HTML 代码解析为 DOM 树,然后使用 DOM API 提取需要的数据,最后将其转换为 JSON 格式。以下是一个示例代码:
javascript
const cheerio = require('cheerio')
const html = '<html> <input type="checkbox" v-model="RemitInBox" class="RemitInBox v-pristine v-valid" name="RemitInBox" value="0" v-checked="data.CheckFlag" v-disabled="data.FndDrc!=\'01\' || data.BusiState!=\'10\'" id="List0_RemitIn" v-click="clickBox($index,data)"> IR00252300347A IR00252300347A 2023-05-25 USD32,993.50 1/FLOKSER KIMYA SANAYI VE TICARET 1... 31980005000107125 入账 退汇 待客户确认 受理成功 打印 </html>'
const $ = cheerio.load(html)
const data = []
// 遍历所有 tr 元素
$('tr').each(function (i, elem) {
const $tds = $(this).find('td')
// 提取每个 td 元素的文本内容,并存储到一个对象中
const item = {
checkbox: $tds.eq(0).find('input').attr('v-checked') === 'true',
code: $tds.eq(1).find('a').text(),
date: $tds.eq(2).text(),
amount: $tds.eq(3).text(),
company: $tds.eq(4).text(),
account: $tds.eq(5).text(),
status: $tds.eq(6).text(),
result: $tds.eq(7).text(),
print: $tds.eq(8).find('a').length > 0
}
data.push(item)
})
// 将数据转换为 JSON 格式
const json = JSON.stringify(data)
console.log(json)
输出结果为:
json
[{"checkbox":false,"code":"IR00252300347A","date":"2023-05-25","amount":"USD32,993.50","company":"1/FLOKSER KIMYA SANAYI VE TICARET 1...","account":"31980005000107125","status":"入账","result":"受理成功","print":true}]

使用cheerio将以下代码转换为json <input type="checkbox" v-model="RemitInBox" class="RemitInBox v-pristine v-valid" name="RemitInBox" value="0" v-checked="data.CheckFlag" v-disabled="data.FndDrc!='01' || data.BusiState!='10'" id="List0_RemitIn" v-click="clickBox($index,data)"> IR00252300347A IR00252300347A 2023-05-25 USD32,993.50 1/FLOKSER KIMYA SANAYI VE TICARET 1... 31980005000107125 入账 退汇 待客户确认 受理成功 打印
以下是使用cheerio将代码转换为json的方法:
javascript
const cheerio = require('cheerio');
const html = ' <input type="checkbox" v-model="RemitInBox" class="RemitInBox v-pristine v-valid" name="RemitInBox" value="0" v-checked="data.CheckFlag" v-disabled="data.FndDrc!=\'01\' || data.BusiState!=\'10\'" id="List0_RemitIn" v-click="clickBox($index,data)"> IR00252300347A IR00252300347A 2023-05-25 USD32,993.50 1/FLOKSER KIMYA SANAYI VE TICARET 1... 31980005000107125 入账 退汇 待客户确认 受理成功 打印 ';
const $ = cheerio.load(html);
const data = [];
$('table tbody tr').each((i, elem) => {
const row = {};
$(elem).find('td').each((j, td) => {
const value = $(td).text().trim();
switch (j) {
case 1:
row['code'] = value;
break;
case 2:
row['date'] = value;
break;
case 3:
row['amount'] = value;
break;
case 4:
row['name'] = value;
break;
case 5:
row['account'] = value;
break;
case 6:
row['status'] = value;
break;
case 7:
row['result'] = value;
break;
default:
break;
}
});
data.push(row);
});
console.log(JSON.stringify(data, null, 2));
输出结果为:
json
[
{
"code": "IR00252300347A",
"date": "2023-05-25",
"amount": "USD32,993.50",
"name": "1/FLOKSER KIMYA SANAYI VE TICARET 1...",
"account": "31980005000107125",
"status": "入账",
"result": "受理成功"
}
]

如何将这串代码转为json <input type="checkbox" v-model="RemitInBox" class="RemitInBox v-pristine v-valid" name="RemitInBox" value="0" v-checked="data.CheckFlag" v-disabled="data.FndDrc!='01' || data.BusiState!='10'" id="List0_RemitIn" v-click="clickBox($index,data)"> IR00252300338A IR00252300338A 2023-05-23 USD20,693.00 BYGGING INTERCONTINENTAL 12 SHEHAB ... 31980005000107125 入账 退汇 待客户确认 受理成功 打印 <input type="checkbox" v-model="RemitInBox" class="RemitInBox v-pristine v-valid" name="RemitInBox" value="1" v-checked="data.CheckFlag" v-disabled="data.FndDrc!='01' || data.BusiState!='10'" id="List1_RemitIn" v-click="clickBox($index,data)"> IR00252300337A IR00252300337A 2023-05-23 USD23,543.50 DIARITA POLYMERS OFFSHORE LTD UNITE... 31980005000107125 入账 退汇 待客户确认 受理成功 打印
这段代码并不是一个有效的 JSON 格式,需要进行一些修改才能转为 JSON。可以将这段代码包装在一个 HTML 文件中,并使用 JavaScript 将其转为 JSON 对象。
以下为示例代码:
html
<!DOCTYPE html>
<html>
<head>
<meta charset="utf-8">
<title>Code to JSON</title>
</head>
<body>
<input type="checkbox" name="RemitInBox" value="0">
IR00252300338A
2023-05-23
USD20,693.00
BYGGING INTERCONTINENTAL 12 SHEHAB ...
31980005000107125
入账
受理成功
打印
<input type="checkbox" name="RemitInBox" value="1">
IR00252300337A
2023-05-23
USD23,543.50
DIARITA POLYMERS OFFSHORE LTD UNITE...
31980005000107125
入账
受理成功
打印
<script>
const queryList = [];
const rows = document.querySelectorAll('#queryList tr');
rows.forEach(row => {
const cells = row.querySelectorAll('td');
const data = {
RemitInBox: cells[0].querySelector('input').checked,
IRNumber: cells[1].querySelector('a').innerText,
Date: cells[2].innerText,
Amount: cells[3].innerText,
Description: cells[4].innerText,
AccountNumber: cells[5].innerText,
Status: cells[6].innerText,
Result: cells[7].innerText,
PrintLink: cells[8].querySelector('a').href
};
queryList.push(data);
});
console.log(JSON.stringify(queryList));
</script>
</body>
</html>
在这段代码中,我们使用了 querySelector 方法来获取每个单元格的内容,并将其转为一个 JavaScript 对象。最后,我们使用 JSON.stringify 方法将整个数据转为 JSON 格式,并将其输出到控制台。

