node.js 实现远程桌面监控的方法步骤

 更新时间:2019年07月02日 09:02:20   作者:凌霄光   我要评论

这篇文章主要介绍了node.js 实现远程桌面监控的方法步骤,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧

描述

最近使用node实现了一个远程桌面监控的应用,分为服务端和客户端,客户端可以实时监控服务端的桌面,并且可以通过鼠标和键盘来控制服务端的桌面。

这里因为我是用的同一台电脑,所以监控画面是这样的,当然使用两台电脑一个跑客户端,一个跑服务端才有意义。

原理

其实这个应用的功能主要分为两部分,一是实现监控,即在客户端可以看到服务端的桌面,这部分功能是通过定时截图来实现的,比如服务端一秒截几次图,然后通过socketio发送到客户端,客户端通过改变img的src来实现一帧帧的显示最新的图片,这样就能看到动态的桌面了。监控就是这样实现的。

另一个功能是控制,即客户端对监控画面的操作,包括鼠标和键盘的操作都可以在服务端的桌面真正的生效,这部分功能的实现是在electron的应用中监听了所有的鼠标和键盘事件,比如keydown、keyup、keypress,mousedown、mouseup、mousemove、click等,然后通过socketio把事件传递到服务端,服务端通过 robot-js来执行不同的事件,这样就能使得客户端的事件在服务端触发了。

实现

原理讲完,来具体实现一下(源码链接在这)。

实现socket通信

首先,服务端和客户端分别引入socket.io和socket.io-client, 分别初始化

服务端:

const app = new koa();
const server = http.createserver(app.callback());
createsocketio(server);app.use((ctx): void => {
  ctx.body = 'please connect use socket';
});server.listen(port, (): void => {
  console.log('server started at https://localhost:' + port);
});//createsocketio
const io = socketio(server, {
    pinginterval: 10000,
    pingtimeout: 5000,
    cookie: false
  });io.on('connect', (socket): void => {
  socket.emit('msg', 'connected');
}

客户端:

var socket = this.socket = io('https://' + this.ip + ':3000')
socket.on('msg', (msg) => {
 console.log(msg)
})
socket.on('error', (err) => {
 //alert('出错了' + err)
})

这样,服务端和客户端就通过socketio建立了链接。

实现桌面监控

之后首先要在服务端来截图,使用screenshot-desktop这个包

const screenshot = require('screenshot-desktop')const screenshot_interval = 500;export const createscreenshot = (): promise<[string, buffer]> => {
  return screenshot({format: 'png'}).then((img): [string, buffer] => {
    return [ img.tostring('base64'), img];
  }).catch((err): {} => {
    console.log('截图失败', err);
    return err;
  })
}export const startscreenshottimer = (callback): {} => {
  return setinterval((): void => {
    createscreenshot().then(([imgstr, img]): void => {
      callback(['data:image/png;base64,' + imgstr, img]);
    })
  }, screenshot_interval)
}

然后通过socketio的emit来传到客户端:

startscreenshottimer(([imgstr, img]): void => {
  io.sockets.emit('screenshot', imgstr);
});

客户端收到图片后,设置到img的src上(这里是base64的图片url):

 <img 
  class="screenshot" 
  :src="screenshot"
/>
data () {
 return {
  screenshot: ''
 }
}
socket.on('screenshot', (data) => {
 this.screenshot = data
})

其实这样就已经实现了桌面监控了,有兴趣的同学可以照着这个思路实现看看,并不是很麻烦。

当然这样的方案是有问题的,因为需要知道服务端桌面尺寸的大小,然后根据这个来调整客户端显示的图片尺寸。

实现这个细节是使用的get-pixels这个库,可以读取本地图片文件的宽度高度等信息,所以我先把图片写入本地,然后又读取出来,这样获取到的屏幕尺寸。

interface screensize {
  width: number;
  height: number;
}function getscreensize(img): promise<screensize> {
  const imgpath = path.resolve(process.cwd(), './tmp.png');
  fs.writefilesync(imgpath, img);
  return new promise((resolve): void => {
    getpixels(imgpath, function(err, pixels): void {
      if(err) {
        console.log("bad image path")
        return
      }
      resolve({
        width: pixels.shape[0],
        height: pixels.shape[1]
      });
    });
  })
}

然后通过socektio传递给客户端

getscreensize(img).then(({ width, height}) => {
  io.sockets.emit('screensize', {
    width,
    height
  })
});

客户端收到之后调整图片大小就可以了

<img 
  class="screenshot" 
  :src="screenshot"
  :style="screenshotstyle"
/>
data () {
 return {
  screenshot: '',
  screenshotstyle: '',
 }
}
socket.on('screensize', (screensize) => {
 this.screenshotstyle = {'width': screensize.width + 'px', 'height': screensize.height + 'px'}
})

至此已经实现了桌面监控,并且图片尺寸和服务端屏幕的尺寸是一致的。

这里还有一个细节,就是获取到的图片大小是物理像素,而客户端设置的px是设备无关像素,也就是要除以dpr才是px的值。这里需要获取dpr,因为目前只是在mac下用,所以直接除以2了。

实现远程控制

代码写到这里,客户端的electron应用中已经可以实时显示服务端的桌面了。(当然像输入ip的弹框,以及electron-vue和typescript等和主要逻辑无关的细节就不展开了。)

接下来要实现远程控制,也就是监听事件,传递事件,执行事件这几部分。

首先定义一下传递的事件的格式:

interface mouseevent {
  type: string;
  buttontype: string;
  x: number;
  y: number;
}interface keyboardevent {
  type: string;
  keycode: number;
  keyname: string;
}

鼠标事件mouseevent,type为鼠标事件的类型,具体的值包括mousedown、mouseup、mousemove、click、dblclick,buttontype指的是鼠标的左键还是右键,值为 left 或 right,x和y是具体的坐标。

键盘事件keyboardevent,type为键盘事件的类型,具体的值包括keydown、keyup、keypress,keycode为键盘码,keyname为键的名字。

接下来要在客户端监听事件:

<img 
  class="screenshot" 
  :src="screenshot"
  :style="screenshotstyle"
  @mousedown="handlemouseevent"
  @mousemove="handlemouseevent" 
  @mouseup="handlemouseevent"
  @click="handlemouseevent"
  @dblclick="handlemouseevent"  
/>
window.onkeypress = window.onkeyup = window.onkeydown = this.handlekeyboardevent

通过socekt把事件传递到服务端

 handlekeyboardevent (e) {
  this.socket && this.socket.emit('userevent', {
   type: 'keyboard',
   event: {
    type: e.type,
    keyname: e.key,
    keycode: e.keycode
   }
  })
 },
 handlemouseevent (e) {
  this.socket && this.socket.emit('userevent', {
   type: 'mouse',
   event: {
    type: e.type,
    buttontype: e.buttons === 2 ? 'right' : 'left',
    x: e.clientx,
    y: e.clienty
   }
  })
 },

然后在服务端把事件取出来执行,执行事件使用的是robot-js

const { mouse, point, keyboard } = require('robot-js');interface mouseevent {
  type: string;
  buttontype: string;
  x: number;
  y: number;
}interface keyboardevent {
  type: string;
  keycode: number;
  keyname: string;
}export default class eventexecuter {
  public mouse;
  public keyboard;
  public constructor(){
    this.mouse = new mouse();
    this.keyboard = new keyboard();
  }  public executekeyboardevent(event: keyboardevent): void {
    switch(event.type) {
      case 'keydown':
        this.keyboard.press(event.keycode);
        break;
      case 'keyup':
        this.keyboard.release(event.keycode);
        break;
      case 'keypress':
        this.keyboard.click(event.keycode);
        break;
      default: break;
    }
  }  public executemouseevent(event): void {
    mouse.setpos(new point(event.x, event.y));
    const button = event.buttontype === 'left' ? 0 : 2
    switch(event.type) {
      case 'mousedown':
        this.mouse.press(button);
        break;
      case 'mousemove':
        break;
      case 'mouseup': 
        this.mouse.release(button);
        break;
      case 'click': 
        this.mouse.click(button);
        break;
      case 'dblclick': 
        this.mouse.click(button);
        this.mouse.click(button);
        break;
      default: break;
    }
  }  public exectue(eventinfo): void {
    console.log(eventinfo);
    switch (eventinfo.type) {
      case 'keyboard':
        this.executekeyboardevent(eventinfo.event);
        break;
      case 'mouse':
        this.executemouseevent(eventinfo.event);
        break;
      default: break;
    }
  }
}

至此,桌面监控和远程控制的客户端还有服务端的部分,以及两端的通信都已经实现了。思路其实并不麻烦,但细节还是很多的。有兴趣的同学可以把代码下下来跑跑试试,或者按着这个思路自己实现一遍,还是挺好玩的。

源码链接

remote-monitor-server

remote-monitor-client

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持脚本之家。

相关文章

  • node.js 多线程完全指南总结

    node.js 多线程完全指南总结

    这篇文章主要介绍了node.js 多线程完全指南总结,小编觉得挺不错的,现在分享给大家,也给大家做个参考。一起跟随小编过来看看吧
    2019-03-03
  • nodejs利用ajax实现网页无刷新上传图片实例代码

    nodejs利用ajax实现网页无刷新上传图片实例代码

    本篇文章主要介绍了nodejs利用ajax实现网页无刷新上传图片实例代码,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2017-06-06
  • node.js中的fs.existssync方法使用说明

    node.js中的fs.existssync方法使用说明

    这篇文章主要介绍了node.js中的fs.existssync方法使用说明,本文介绍了fs.existssync方法说明、语法、接收参数、使用实例和实现源码,需要的朋友可以参考下
    2014-12-12
  • nodejs模块载入运行原理

    nodejs模块载入运行原理

    本篇文章给大家详细分享了nodejs模块载入运行原理知识点,对此有兴趣的朋友可以跟着小编一起学习下。
    2018-02-02
  • node.js循环删除非空文件夹及子目录下的所有文件

    node.js循环删除非空文件夹及子目录下的所有文件

    这篇文章主要介绍了node.js循环删除非空文件夹及子目录下的所有文件及node.js递归删除非空文件夹的实例代码,需要的朋友可以参考下
    2018-03-03
  • nodejs简单实现tcp服务器端和客户端的聊天功能示例

    nodejs简单实现tcp服务器端和客户端的聊天功能示例

    这篇文章主要介绍了nodejs简单实现tcp服务器端和客户端的聊天功能,结合实例形式分析了nodejs基于tcp协议实现的聊天程序客户端与服务器端具体步骤与相关操作技巧,代码备有较为详尽的注释便于理解,需要的朋友可以参考下
    2018-01-01
  • node.js 的 gc 机制详解

    node.js 的 gc 机制详解

    随着 node 的发展,javascript 的应用场景早已不再局限在浏览器中。但随着 node 在服务端的广泛应用,javascript 的内存管理需要引起的重视。下面来一起学习一下吧
    2019-06-06
  • ubuntu编译nodejs所需的软件并安装

    ubuntu编译nodejs所需的软件并安装

    node 在 linux,macintosh,solaris 这几个系统上都可以完美的运行,linux 的发行版本当中使用 ubuntu 相当适合。这也是为什么要尝试在 ubuntu 上安装 node.js,
    2017-09-09
  • 新手必须知的node.js 4个javascript基本概念

    新手必须知的node.js 4个javascript基本概念

    本文介绍了4个基本javascript概念,它是你学习node.js所必需要掌握,下面就让来看一下具体是哪4个基本javascript概念
    2018-09-09
  • 在linux中使用包管理器安装node.js

    在linux中使用包管理器安装node.js

    这篇文章主要介绍了在linux中使用包管理器安装node.js的方法以及具体安装过程,非常详细,推荐给大家,有需要的小伙伴参考下吧。
    2015-03-03

最新评论