如何访问监视器图像数据？
[英]How can I access to the monitor image data?
问题描述
1.我遇到的问题
您好，我目前正在使用 Electron.js 制作桌面应用程序。 同时，我需要截屏（包括鼠标光标）的功能，但这对我来说是个问题，因为我不知道该怎么做。
我认为我无法解决这个问题的原因是我对操作系统一无所知。 我认为“截取屏幕截图”的意思是“将图像数据显示在计算机显示器上”，但我如何访问它？
2. 我尝试过或考虑过的
起初我尝试Electron.BrowserWindow.capturePage()但它的结果不符合我的要求。 这是因为两个原因：1）我的应用程序有一个透明的背景，如果我截屏，任何透明区域都会变成黑色。 2）鼠标cursor没有被一起捕获。
同时，我知道一些 API 的存在，例如 Screen Capture API 和 Media Capture and Streams API（在 web 浏览器中），也许我可以尝试一下，因为我正在使用 Electron.js 和 Electron.js 使用 Chromium 88369888.js浏览器和 web 浏览器具有这些 API 的实现。
但是，这些 API 处理的是媒体流（= 视频）仍然是一个问题，这不适合我的情况。 当然，我认为可以以某种方式从媒体 stream 中只取出一帧（？），但我认为这是一种过度工作，因为我想要的只是一个屏幕截图。
同时，因为 Electron.js 也使用 Node.js，我认为也可以通过某种方式调用 Windows API（也许通过外部 Function 接口？）或调用child_process.exec()以截取屏幕截图。
3.我想问的问题
如何访问监视器图像数据？ 这样我就可以实现“满足我要求的截图功能——透视&鼠标光标”（如果需要使用第三方库，尽可能少）。
什么计算将要显示在我的计算机显示器上的最终图像数据？ 看来这是我的显卡的作品，因为我的显示器和显卡是通过电缆相互连接的。
4. 杂项好奇心（与题目关系不大）
...然而，透明区域如何、为何以及在何处处理为#000000颜色是另一个好奇心。
同时有趣的是，有些程序不允许我截取它们上面的内容——程序所在的区域看起来是黑色的。 此类程序的开发人员如何实现这一点？
感谢您阅读我的问题。
1 个解决方案
解决方案1
0 2023-02-02 10:08:25
经过一些 inte.net 搜索后，我发现很难访问和获取显示数据（特别是来自我的显卡的视频 ram数据）。 所以我决定使用一个变通办法——这是一句众所周知的格言，“万事通罗马”。
意思是，
- 可以通过“使用本机屏幕截图功能（PrintScreen 键）”或“使用一些为整个屏幕拍照的脚本”来实现透视屏幕截图。
- 鼠标 cursor 的屏幕截图可以通过在我的鼠标 cursor 所在的坐标处添加（= 覆盖）鼠标 cursor 图像来实现。
但是，在我的情况下，我实际上不需要将屏幕截图保存为文件，所以我认为只需绘制自定义鼠标 cursor 图像就足够了，隐藏原始鼠标 cursor 图像，使其跟随鼠标 cursor，然后截取屏幕截图手动按键。 （我认为使用 PrintScreen 按键截取屏幕截图，从剪贴板获取屏幕截图数据并进行一些图像处理，例如添加与鼠标相关的效果也是一个可行的选择 cursor。
※ 我看到一个模拟“按键”（ SendKey() ）的代码来截取屏幕截图，我认为这是一个很好的方法，因为不需要手动按键。
我想对这个主题感兴趣的人可能会从以下链接中找到帮助（数字顺序不代表重要性）：
提到的关键字： GetDC()、BitBlt()、CAPTUREBLT 标志、GDI
提到的关键字： DirectX，缓冲区
提到的关键字：鼠标cursor，cursor图像，热点
提到的关键词： PowerShell，CopyFromScreen()
Q/A 关于访问视频 memory
- DRM 访问整个视频 memory
- 原始视频memory，视频驱动通过OpenGL编程访问整个视频memory
- 图形 RAM API 获取图形或视频 memory
- 直接数据写入视频 memory 直接视频缓冲区访问
- 如何将数据直接写入视频memory？
- 是否可以直接访问视频卡？ （无 API）
如何在节点中访问此数据主体？
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.