期货、期权tick数据接收工具

2023-11-02 19:40

本文主要是介绍期货、期权tick数据接收工具,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

功能:

1、开启之后,7*24自动运行。

2、在共享内存中存放当个交易日的tick数据,方便随时取用。

3、支持多行情源取数据。经过测试一个行情源峰值带宽要求为20M,所以使用时要配合带宽限制。

4、夜盘结束时输出一下tick数据,白盘结束时输出所有tick。

5、支持查询指令:

 运行时如下:

代码

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

24

25

26

27

28

29

30

31

32

33

34

35

36

37

38

39

40

41

42

43

44

45

46

47

48

49

50

51

52

53

54

55

56

57

58

59

60

61

62

63

64

65

66

67

68

69

70

71

72

73

74

75

76

77

78

79

80

81

82

83

84

85

86

87

88

89

90

91

92

93

94

95

96

97

98

99

100

101

102

103

104

105

106

107

108

109

110

111

112

113

114

115

116

117

118

119

120

121

122

123

124

125

126

127

128

129

130

131

132

133

134

135

136

137

138

139

140

141

142

143

144

145

146

147

148

149

150

151

152

153

154

155

156

157

158

159

160

161

162

163

164

165

166

167

168

169

170

171

172

173

174

175

176

177

178

179

180

181

182

183

184

185

186

187

188

189

190

191

192

193

194

195

196

197

198

199

200

201

202

203

204

205

206

207

208

209

210

211

212

213

214

215

216

217

218

219

220

221

222

223

224

225

226

227

228

229

230

231

232

233

234

235

236

237

238

239

240

241

242

243

244

245

246

247

248

249

250

251

252

253

254

255

256

257

258

259

260

261

262

263

264

265

266

267

268

269

270

271

272

273

274

275

276

277

278

279

280

281

282

283

284

285

286

287

288

289

290

291

292

293

294

295

296

297

298

299

300

301

302

303

304

305

306

307

308

309

310

311

312

313

314

315

316

317

318

319

320

321

322

323

324

325

326

327

328

329

330

331

332

333

334

335

336

337

338

339

340

341

342

343

344

345

346

347

348

349

350

351

352

353

354

355

356

357

358

359

360

361

362

363

364

365

366

367

368

369

370

371

372

373

374

375

376

377

378

379

380

381

382

383

384

385

386

387

388

389

390

391

392

393

394

395

396

397

398

399

400

401

402

403

404

405

406

407

408

409

410

411

412

413

414

415

416

417

418

419

420

421

422

423

424

425

426

427

428

429

430

431

432

433

434

435

436

437

438

439

440

441

442

443

444

445

446

447

448

449

450

451

452

453

454

455

456

457

458

459

460

461

462

463

464

465

466

467

468

469

470

471

472

473

474

475

476

477

478

479

480

481

482

483

484

485

486

487

488

489

490

491

492

493

494

495

496

497

498

499

500

501

502

503

504

505

506

507

508

509

510

511

512

513

514

// FutureDataReceive.cpp : 定义控制台应用程序的入口点。

//

#include "stdafx.h"

#include "ThostFtdcMdSpiImpl.hpp"

#include "ThostFtdcTraderSpiImpl.hpp"

#include "future_helper.h"

#include "TinyConfig.h"

#include "FileMap.h"

#include <boost/lockfree/queue.hpp>

#include <iostream>

#include <conio.h>

CFileMap g_fileMap;

TinyConfig g_config;

CThostFtdcTraderSpiImpl g_trade;

vector<shared_ptr<CThostFtdcMdSpiImpl>> g_vecQuote;

int g_nPreTradingDay;

int g_nTradingDay;

bool g_bThread = true;

boost::lockfree::queue<CThostFtdcDepthMarketDataField> g_buffer(1000);

shared_ptr<thread> g_thdDealData = nullptr;

vector<CThostFtdcDepthMarketDataField> g_vecBuffer;

void OnLog(const char* p)

{

    printf(p);

    ofstream ofs_log("./log.data.receive.txt", ios_base::app);

    ofs_log << future_helper::get_local_datetime().c_str() << " " << p;

    ofs_log.close();

}

#pragma region trade module

///trade call back

bool g_bTradeLoginIn = false;

void OnTradeComplete()

{

    int nTradingDay = atoi(g_trade.GetTradingDay());

    if (g_nTradingDay != 0 && g_nTradingDay != nTradingDay)

        g_nPreTradingDay = g_nTradingDay;

    g_nTradingDay = nTradingDay;

    g_bTradeLoginIn = true;

    printf("交易日:%d-%d\n", g_nPreTradingDay, g_nTradingDay);

}

void OnTradeRspMessage(const char* from, const char* msg, future_msg_type msg_type)

{

    OnLog(future_helper::format_string("%s%s:%s\n", msg_type == future_msg_type::CTP_SUCCESS ? "" "*", from, msg).c_str());

}

void TradeLogin()

{

    int retry_time = 3;

    while (1)

    {

        g_bTradeLoginIn = false;

        g_trade.SetCallBackFunc(OnTradeComplete, nullptr, OnTradeRspMessage);

        g_trade.SetAuthenticate(g_config.GetValue("Trade""product").c_str(), g_config.GetValue("Trade""id").c_str(), g_config.GetValue("Trade""code").c_str());

        g_trade.InitParams(g_config.GetValue("Trade""ip").c_str(), g_config.GetValue("Trade""broker").c_str(),

            g_config.GetValue("Trade""user").c_str(), g_config.GetValue("Trade""password").c_str());

        int tick = GetTickCount();

        while (1)

        {

            if (g_bTradeLoginIn) break;

            this_thread::sleep_for(chrono::milliseconds(100));

            if (GetTickCount() - tick > 60 * 1000) break;

        }

        g_trade.Release();

        g_fileMap.SetTradingDay(g_nPreTradingDay, g_nTradingDay);

        if (g_bTradeLoginIn) break;

        retry_time--;

        OnLog("交易 登录超时[1分钟],重新登录\n");

        if (retry_time == 0)

        {

            OnLog("交易 登录次数达到3次,不再尝试重新登录!\n");

            break;

        }

    }

}

//

#pragma endregion trade module

///market call back

int g_nMarketLoginIn = 0;

void OnMarketComplete()

{

    g_nMarketLoginIn++;

}

void OnMarketRspMessage(const char* from, const char* msg, future_msg_type msg_type)

{

    OnLog(future_helper::format_string("%s%s:%s\n", msg_type == future_msg_type::CTP_SUCCESS ? "" "*", from, msg).c_str());

}

void OnDepthMarketData(CThostFtdcDepthMarketDataField* p)

{

    if (!p) return;

    g_buffer.push(*p);

}

void MarketLogin()

{

    int retry_time = 3;

    std::vector<CThostFtdcInstrumentField> vecTradingCode;

    g_trade.GetTradingCode(vecTradingCode, THOST_FTDC_PC_Futures);

    g_trade.GetTradingCode(vecTradingCode, THOST_FTDC_PC_Options);

    printf("订阅合约:%d\n", vecTradingCode.size());

    g_fileMap.SetTradingCode(vecTradingCode);

    while (1)

    {

        g_nMarketLoginIn = 0;

        for (int i = 1; i <= 3; i++)

        {

            string this_ip = g_config.GetValue("Market", future_helper::format_string("ip%d", i).c_str());

            if (this_ip == ""break;

            auto pMdSpi = make_shared<CThostFtdcMdSpiImpl>();

            g_vecQuote.push_back(pMdSpi);

            pMdSpi->SetTradingCode(vecTradingCode);

            pMdSpi->SetCallBackFunc(OnDepthMarketData, OnMarketRspMessage, nullptr, OnMarketComplete);

            pMdSpi->InitParams(this_ip.c_str(), "8888""88888888""88888888");

        }

        int tick = GetTickCount();

        while (1)

        {

            if (g_nMarketLoginIn == g_vecQuote.size()) break;

            this_thread::sleep_for(chrono::milliseconds(100));

            if (GetTickCount() - tick > 60 * 1000) break;

        }

        if (g_nMarketLoginIn > 0 && g_nMarketLoginIn != g_vecQuote.size())

        {

            int nUnconnectIndex = 1;

            OnLog("***********************\n");

            OnLog("*有未能正常登录的行情账号:\n");

            for (auto iter = g_vecQuote.begin(); iter != g_vecQuote.end(); iter++)

            {

                if (!(*iter)->IsConnected())

                {

                    OnLog(future_helper::format_string("%d、%s\n", nUnconnectIndex, (*iter)->GetFrontIP()).c_str());

                    nUnconnectIndex++;

                }

            }

            OnLog("***********************\n");

            OnLog("已有行情连接成功,未连接的不尝试重连\n");

        }

        if (g_nMarketLoginIn > 0) break;

        OnLog("行情 登录超时[1分钟],重新登录\n");

        retry_time--;

        if (retry_time == 0)

        {

            OnLog("行情 登录次数达到3次,不再尝试重新登录!\n");

            break;

        }

    }

}

void ThreadConsumeTick()

{

    OnLog("处理线程已启动\n");

    map<string, CThostFtdcDepthMarketDataField> m_mapShot;

    while (g_bThread)

    {

        if (g_buffer.empty())

        {

            this_thread::sleep_for(chrono::milliseconds(5));

            continue;

        }

        CThostFtdcDepthMarketDataField data;

        g_buffer.pop(data);

        if (data.UpdateTime[2] == ':') {

            data.UpdateTime[2] = data.UpdateTime[3];

            data.UpdateTime[3] = data.UpdateTime[4];

            data.UpdateTime[4] = data.UpdateTime[6];

            data.UpdateTime[5] = data.UpdateTime[7];

            data.UpdateTime[6] = 0;

        }

         

        if (atoi(data.UpdateTime) > 180000) {

            _snprintf_s(data.TradingDay, 9, "%d", g_nPreTradingDay);

        }

        else {

            _snprintf_s(data.TradingDay, 9, "%d", g_nTradingDay);

        }

        bool bNewTick = false;

        auto find_shot = m_mapShot.find(data.InstrumentID);

        if (find_shot == m_mapShot.end())

        {

            bNewTick = true;

            m_mapShot[data.InstrumentID] = data;

        }

        else

        {

            long long llThis = future_helper::to_longlong(atoi(data.TradingDay), atoi(data.UpdateTime)) * 1000 + data.UpdateMillisec;

            long long llLast = future_helper::to_longlong(atoi(find_shot->second.TradingDay), atoi(find_shot->second.UpdateTime)) * 1000 + find_shot->second.UpdateMillisec;

            if (llThis > llLast || find_shot->second.Volume < data.Volume)

            {//郑商所没有毫秒

                bNewTick = true;

                find_shot->second = data;

            }

        }

        if (bNewTick && g_fileMap.IsOK()) {

            g_fileMap.AddDepthData(&data);

        }

        else if (bNewTick) {

            g_vecBuffer.push_back(data);

        }

    }

    OnLog("处理线程已退出\n");

}

//bReset == true:清空共享内存中的tick数据

void OutPutTickData(bool bReset)

{

    unsigned int* exist_size;

    CThostFtdcDepthMarketDataField* p = g_fileMap.GetDepthData(&exist_size);

    if (!p || *exist_size <= 0) {

        OnLog("共享内存中无任何tick数据\n从内存中导出\n");

        if (g_vecBuffer.size() == 0)

        {

            OnLog("内存中无任何tick数据\n");

            return;

        }

        future_helper::safe_create_floder((g_config.GetValue("Path""tick_normal") + "\\" + future_helper::to_string(g_nTradingDay / 10000)).c_str());

        ofstream ofs_tick(g_config.GetValue("Path""tick_normal") + "\\" + future_helper::to_string(g_nTradingDay / 10000) +

            "\\data_" + future_helper::to_string(g_nTradingDay) + ".txt", ios_base::out);

        for (auto& field : g_vecBuffer)

        {

            char szBuf[1024];

            _snprintf_s(szBuf, 1024,

                //交易日,最后修改时间,最后修改毫秒,合约代码,

                //最新价,上次结算价,昨收盘,昨持仓量,

                //今开盘,最高价,最低价,数量,成交金额,持仓量,

                //涨停板价,跌停板价,

                //申买价一,申买量一,申卖价一,申卖量一,

                //当日均价

                "%s,%s,%d,%s,%.4f,%.4f,%.4f,%.4f,%.4f,%.4f,%.4f,%d,%.4f,%.4f,%.4f,%.4f,%.4f,%d,%.4f,%d,%.4f\n",

                field.TradingDay, field.UpdateTime, field.UpdateMillisec, field.InstrumentID,

                field.LastPrice, field.PreSettlementPrice, field.PreClosePrice, field.PreOpenInterest,

                field.OpenPrice, field.HighestPrice, field.LowestPrice, field.Volume, field.Turnover, field.OpenInterest,

                field.UpperLimitPrice, field.LowerLimitPrice,

                field.BidPrice1, field.BidVolume1, field.AskPrice1, field.AskVolume1,

                field.AveragePrice);

            ofs_tick << szBuf;

        }

        return;

    }

    OnLog(future_helper::format_string("输出共享内存中的tick数据 %d 个\n", *exist_size).c_str());

    future_helper::safe_create_floder((g_config.GetValue("Path""tick_normal") + "\\" + future_helper::to_string(g_nTradingDay / 10000)).c_str());

    ofstream ofs_tick(g_config.GetValue("Path""tick_normal") + "\\" + future_helper::to_string(g_nTradingDay / 10000) +

        "\\data_" + future_helper::to_string(g_nTradingDay) + ".txt", ios_base::out);

    for (int i = 0; i < *exist_size; i++)

    {

        auto& field = *(CThostFtdcDepthMarketDataField*)(p + i);

        char szBuf[1024];

        _snprintf_s(szBuf, 1024,

            //交易日,最后修改时间,最后修改毫秒,合约代码,

            //最新价,上次结算价,昨收盘,昨持仓量,

            //今开盘,最高价,最低价,数量,成交金额,持仓量,

            //涨停板价,跌停板价,

            //申买价一,申买量一,申卖价一,申卖量一,

            //当日均价

            "%s,%s,%d,%s,%.3f,%.4f,%.4f,%.4f,%.4f,%.4f,%.4f,%d,%.4f,%.4f,%.4f,%.4f,%.4f,%d,%.4f,%d,%.4f",

            field.TradingDay, field.UpdateTime, field.UpdateMillisec, field.InstrumentID,

            future_helper::check_double(field.LastPrice), future_helper::check_double(field.PreSettlementPrice), future_helper::check_double(field.PreClosePrice), future_helper::check_double(field.PreOpenInterest),

            future_helper::check_double(field.OpenPrice), future_helper::check_double(field.HighestPrice), future_helper::check_double(field.LowestPrice), field.Volume, future_helper::check_double(field.Turnover), future_helper::check_double(field.OpenInterest),

            future_helper::check_double(field.UpperLimitPrice), future_helper::check_double(field.LowerLimitPrice),

            future_helper::check_double(field.BidPrice1), field.BidVolume1, future_helper::check_double(field.AskPrice1), field.AskVolume1,

            future_helper::check_double(field.AveragePrice));

        ofs_tick << szBuf << endl;

    }

    ofs_tick.flush();

    ofs_tick.close();

    if (bReset)

        *exist_size = 0;

}

void Open()

{

    printf("%s\n", future_helper::get_local_datetime().c_str());

    g_nMarketLoginIn = 0;

    OnLog("区间交易开始!\n");

    if (!g_thdDealData) {

        g_bThread = true;

        g_thdDealData = make_shared<thread>(ThreadConsumeTick);

    }

    if (!g_fileMap.CreateFileMap(FILE_MAP_KEY))

    {

        OnLog("共享内存创建失败!直接存文件...\n");

    }

    else

    {

        g_fileMap.InitDefaultRange();

    }

    TradeLogin();

    unsigned int* exist_count;

    auto pTick = g_fileMap.GetDepthData(&exist_count);

    int local_time = atoi(future_helper::get_local_time(false).c_str());

    if ((!pTick || *exist_count == 0) && (local_time < 151500 || local_time > 180000))

    {

        ifstream ifs_tick(g_config.GetValue("Path""tick_normal") + "\\" + future_helper::to_string(g_nTradingDay / 10000) +

            "\\data_" + future_helper::to_string(g_nTradingDay) + ".txt", ios_base::in);

        if (ifs_tick.is_open())

        {

            OnLog("本地加载tick到共享内存:");

            int tick_count = 0;

            CThostFtdcDepthMarketDataField data;

            char szLine[1024];

            while (ifs_tick.getline(szLine, 1024))

            {

                future_helper::LineToStruct(szLine, data);

                g_fileMap.AddDepthData(&data);

                tick_count++;

            }

            OnLog(future_helper::format_string("%d条\n", tick_count).c_str());

        }

    }

    MarketLogin();

}

void Close()

{

    printf("%s\n", future_helper::get_local_datetime().c_str());

    int close_count = 0;

    for (auto& md : g_vecQuote)

    {

        if (md->IsConnected()) {

            close_count++;

            md->ReleaseAPI();

        }

    }

    g_vecQuote.clear();

    if (close_count > 0) {

        OnLog(future_helper::format_string("区间交易结束!关闭行情接收:%d\n", close_count).c_str());

        if (g_thdDealData && g_thdDealData->joinable()) {

            g_bThread = false;

            g_thdDealData->join();

            g_thdDealData = nullptr;

        }

    }

    g_nMarketLoginIn = 0;

    OnLog(future_helper::format_string("共享内存使用%d/%d(mb)=%.2f%%%%\n",

        g_fileMap.GetTotalUsedSpace() / 1024 / 1024, MAX_PAGE_SIZE / 1024 / 1024,

        (double)g_fileMap.GetTotalUsedSpace() * 100 / MAX_PAGE_SIZE).c_str());

}

int main()

{

    if (!g_config.Open((future_helper::GetWorkingDir() + "\\system.ini").c_str()))

    {

        OnLog("system.ini打开失败\n");

        system("pause");

    }

    OnLog("执行开启共享内存测试...");

    if (!g_fileMap.CreateFileMap(FILE_MAP_KEY))

    {

        OnLog("失败!");

        system("pause");

    }

    else

    {

        OnLog("成功!\n");

        g_fileMap.Release();

    }

    OnLog("==========start==========\n");

    printf("初次启动需要输入前交易日,用来更新夜盘的日期...");

    scanf_s("%d", &g_nPreTradingDay);

    int night_tick_count = -1;

    int last_local_time = atoi(future_helper::get_local_time(false).c_str());

    while (1)

    {

        if (_kbhit() != 0)

        {

            printf("**********不要长时间阻塞此处,这样将导致软件无法正常工作!***********\n");

            printf("**********记得输入完之后按回车键哦!                      ***********\n");

            string str;

            std::getline(std::cin, str);

            if (str == "quit")

            {

                Close();

                break;

            }

            else if (str == "help")

            {

                printf("quit:退出\n");

                printf("help:帮助\n");

                printf("open:手动开启接收\n");

                printf("close:手动关闭接收\n");

                printf("tradingday:交易日\n");

                printf("tradingcode:可交易合约\n");

                printf("tickdata:输出接收到的tick数据\n");

                printf("sharememory:共享内存使用率\n");

            }

            else if (str == "open")

            {

                Open();

            }

            else if (str == "close")

            {

                Close();

            }

            else if (str == "tradingday")

            {

                printf("交易日:%d-%d\n", g_nPreTradingDay, g_nTradingDay);

            }

            else if (str == "tradingcode")

            {

                printf("期货可交易合约:\n");

                map<string, vector<CThostFtdcInstrumentField>> mapClasses;

                vector<CThostFtdcInstrumentField> vec;

                g_trade.GetTradingCode(vec, THOST_FTDC_PC_Futures);

                for (auto& item : vec)

                {

                    mapClasses[item.ProductID].push_back(item);

                }

                for (auto iter = mapClasses.begin(); iter != mapClasses.end(); iter++)

                {

                    printf("%s:", iter->first.c_str());

                    for (auto& item : iter->second)

                    {

                        printf("%s ", item.InstrumentID);

                    }

                    printf("\n");

                }

            }

            else if (str == "tickdata")

            {

                OutPutTickData(false);

            }

            else if (str == "sharememory")

            {

                unsigned int* exist_size;

                CThostFtdcDepthMarketDataField* p = g_fileMap.GetDepthData(&exist_size);

                OnLog(future_helper::format_string("tick数据个数:%d\n共享内存使用%d/%d(mb)=%.2f%%%%\n",

                    p ? *exist_size : 0,

                    g_fileMap.GetTotalUsedSpace() / 1024 / 1024, MAX_PAGE_SIZE / 1024 / 1024,

                    (double)g_fileMap.GetTotalUsedSpace() * 100 / MAX_PAGE_SIZE).c_str());

            }

        }

        int local_time = atoi(future_helper::get_local_time(false).c_str());

        if ((local_time >= 23500 && last_local_time < 23500) ||

            (local_time >= 155000 && last_local_time < 155000))

        {

            unsigned int* exist_count;

            auto pTick = g_fileMap.GetDepthData(&exist_count);

            Close();

            if ((local_time >= 155000 && last_local_time < 155000)){

                OnLog("交易日结束了?...");

                if (night_tick_count == -1 || *exist_count > night_tick_count) {

                    OnLog("是的!\n");

                    OutPutTickData(true);

                    if (night_tick_count != -1) {

                        OnLog("打开TickToKline.exe\n");

                        ::ShellExecute(NULL, "open", (future_helper::GetWorkingDir() + "\\TickToKline.exe").c_str(), "1", NULL, SW_SHOW);

                    }

                     

                    night_tick_count = -1;

                }

                else

                {

                    OnLog(future_helper::format_string("没有!(共享内存的数据没有比夜盘多%d-%d)!\n",

                        night_tick_count, *exist_count).c_str());

                }

            }

            else

            {

                OnLog("夜盘结束了?...");

                if (night_tick_count == -1 && *exist_count > 0) {

                    OnLog("是的!输出一次夜盘数据\n");

                    night_tick_count = *exist_count;

                    OutPutTickData(false);

                }

                else

                {

                    OnLog("现在不是夜盘结束时间!(没有夜盘数据 或者 已经输出过一次夜盘数据了)\n");

                }

            }

        }

        if ((local_time >= 82000 && last_local_time < 82000) ||

            (local_time >= 202000 && last_local_time < 202000))

        {

            Close();

            Open();

        }

        last_local_time = local_time;

        this_thread::sleep_for(chrono::seconds(1));

    }

    return 0;

}

这篇关于期货、期权tick数据接收工具的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/332851

相关文章

Linux下利用select实现串口数据读取过程

《Linux下利用select实现串口数据读取过程》文章介绍Linux中使用select、poll或epoll实现串口数据读取,通过I/O多路复用机制在数据到达时触发读取,避免持续轮询,示例代码展示设... 目录示例代码(使用select实现)代码解释总结在 linux 系统里,我们可以借助 select、

基于Python开发Windows自动更新控制工具

《基于Python开发Windows自动更新控制工具》在当今数字化时代,操作系统更新已成为计算机维护的重要组成部分,本文介绍一款基于Python和PyQt5的Windows自动更新控制工具,有需要的可... 目录设计原理与技术实现系统架构概述数学建模工具界面完整代码实现技术深度分析多层级控制理论服务层控制注

C#使用iText获取PDF的trailer数据的代码示例

《C#使用iText获取PDF的trailer数据的代码示例》开发程序debug的时候,看到了PDF有个trailer数据,挺有意思,于是考虑用代码把它读出来,那么就用到我们常用的iText框架了,所... 目录引言iText 核心概念C# 代码示例步骤 1: 确保已安装 iText步骤 2: C# 代码程

Pandas处理缺失数据的方式汇总

《Pandas处理缺失数据的方式汇总》许多教程中的数据与现实世界中的数据有很大不同,现实世界中的数据很少是干净且同质的,本文我们将讨论处理缺失数据的一些常规注意事项,了解Pandas如何表示缺失数据,... 目录缺失数据约定的权衡Pandas 中的缺失数据None 作为哨兵值NaN:缺失的数值数据Panda

C++中处理文本数据char与string的终极对比指南

《C++中处理文本数据char与string的终极对比指南》在C++编程中char和string是两种用于处理字符数据的类型,但它们在使用方式和功能上有显著的不同,:本文主要介绍C++中处理文本数... 目录1. 基本定义与本质2. 内存管理3. 操作与功能4. 性能特点5. 使用场景6. 相互转换核心区别

python库pydantic数据验证和设置管理库的用途

《python库pydantic数据验证和设置管理库的用途》pydantic是一个用于数据验证和设置管理的Python库,它主要利用Python类型注解来定义数据模型的结构和验证规则,本文给大家介绍p... 目录主要特点和用途:Field数值验证参数总结pydantic 是一个让你能够 confidentl

基于Go语言开发一个 IP 归属地查询接口工具

《基于Go语言开发一个IP归属地查询接口工具》在日常开发中,IP地址归属地查询是一个常见需求,本文将带大家使用Go语言快速开发一个IP归属地查询接口服务,有需要的小伙伴可以了解下... 目录功能目标技术栈项目结构核心代码(main.go)使用方法扩展功能总结在日常开发中,IP 地址归属地查询是一个常见需求:

JAVA实现亿级千万级数据顺序导出的示例代码

《JAVA实现亿级千万级数据顺序导出的示例代码》本文主要介绍了JAVA实现亿级千万级数据顺序导出的示例代码,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面... 前提:主要考虑控制内存占用空间,避免出现同时导出,导致主程序OOM问题。实现思路:A.启用线程池

使用python制作一款文件粉碎工具

《使用python制作一款文件粉碎工具》这篇文章主要为大家详细介绍了如何使用python制作一款文件粉碎工具,能够有效粉碎密码文件和机密Excel表格等,感兴趣的小伙伴可以了解一下... 文件粉碎工具:适用于粉碎密码文件和机密的escel表格等等,主要作用就是防止 别人用数据恢复大师把你刚删除的机密的文件恢

SpringBoot分段处理List集合多线程批量插入数据方式

《SpringBoot分段处理List集合多线程批量插入数据方式》文章介绍如何处理大数据量List批量插入数据库的优化方案:通过拆分List并分配独立线程处理,结合Spring线程池与异步方法提升效率... 目录项目场景解决方案1.实体类2.Mapper3.spring容器注入线程池bejsan对象4.创建