[질문] libpcap을 이용하여 패킷을 잡은 뒤 mysql5에 넣기만 했는데 cpu점유율이 엄청납니다.

visualplus의 이미지

질문은 제목 그대로입니다.
libpcap 예제 프로그램을 그대로 사용해서
패킷을 잡은 뒤 mysql 문법에 맞게 문자열을 생성하고,
mysql에 쿼리를 입력하였는데 cpu점유율이 엄청납니다.

22468 root      20   0  4248 1528 1212 R 48.2  0.3   5:24.52 lb_probe
 1814 mysql     20   0  365m  45m 5044 S 47.9  9.7   5:56.71 mysqld

lb_probe라는것이 제가 만든 캡쳐프로그램입니다.
위에보시면 lb_probe가 48.2%
mysql이 47.9% 차지하고.. 이것저것 사용하는 프로그램들 합치면
cpu사용율이 항상 90~100%입니다.

혹시.. 패킷캡쳐와 db쿼리 입력하는것을 한 프로그램에서 처리하면 안되는 이유가 있는것인가요?
아니면 좀 효율적인 방법이 있는것인가요?

저는 그냥 무식하게 패킷 들어오면 ETHERTYPE_IP패킷인지 확인해서
 
src_mac, dst_mac, src_ip, dst_ip, protocol, src_port, dst_port
이것을 추출하고, 현재시간을 timeval을 이용해서 구해온 뒤 
 
sprintf로 이것들을 mysql문법에 맞게 변수에 넣은 뒤
 
제가 만들어논 mysql함수에서 쿼리를 입력하는 방식입니다..

효율같은거 신경안써서(실력이 부족해서) 어느정도 cpu점유율이 높을거라곤 예상했지만
이정도까지 올라갈지는 예상 못했습니다.

테스트해본 환경은 제가 만들어논 프로그램 띄워놓고 리니지1 클라이언트 프로그램을 다운받아봤습니다.
( lan에는 pc1대만 있고 패킷잡는것은 lan에서만 잡았습니다 )

혹시 저에게 도움을 주실분 안계신가요?
제가 실력이 부족해서 이런건 어떻게해야할지 감도 안잡힙니다..
그냥 지나가지 마시고 댓글 하나라도 달아주심 감사히 생각하겠습니다..ㅠㅠ

참.. 제가만든 프로그램을 띄우지 않으면 cpu사용율은 1%정도밖에 안됩니다..

dong1036의 이미지

프로그램 다운이라면;;

엄청나게 tcp패킷이 많이 올텐데;;

그걸 잡아서 추출하고 타임도 DB에 넣으려고 하니..

cpu를 많이 잡아 먹는게 아닐까요?

뭐 자세히는 모르겠지만...

테스트를 클라이언트 다운보다는

그냥 메신저나 인터넷등.. 그나마 패킷이 덜 오는 것으로 테스트를 한번 해보세요 ;;

음 냐냐~

monovision의 이미지

해당 기능은 이미 iptables 에서 지원을 합니다.
iptables 의 ulog 를 알아보시기 바랍니다.
별도로 프로그램을 만들 필요도 없고, 시스템 부하도 거의 없습니다.

iptables -j ULOG --help

http://netfilter.org/projects/ulogd/index.html

vamf12의 이미지

gprof같은 프로파일링 툴로 어디서 문제가 되는가 확인하게 좋을듯 합니다.

댓글 달기

Filtered HTML

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

BBCode

  • 텍스트에 BBCode 태그를 사용할 수 있습니다. URL은 자동으로 링크 됩니다.
  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param>
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.

Textile

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • You can use Textile markup to format text.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Markdown

  • 다음 태그를 이용하여 소스 코드 구문 강조를 할 수 있습니다: <code>, <blockcode>, <apache>, <applescript>, <autoconf>, <awk>, <bash>, <c>, <cpp>, <css>, <diff>, <drupal5>, <drupal6>, <gdb>, <html>, <html5>, <java>, <javascript>, <ldif>, <lua>, <make>, <mysql>, <perl>, <perl6>, <php>, <pgsql>, <proftpd>, <python>, <reg>, <spec>, <ruby>. 지원하는 태그 형식: <foo>, [foo].
  • Quick Tips:
    • Two or more spaces at a line's end = Line break
    • Double returns = Paragraph
    • *Single asterisks* or _single underscores_ = Emphasis
    • **Double** or __double__ = Strong
    • This is [a link](http://the.link.example.com "The optional title text")
    For complete details on the Markdown syntax, see the Markdown documentation and Markdown Extra documentation for tables, footnotes, and more.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 사용할 수 있는 HTML 태그: <p><div><span><br><a><em><strong><del><ins><b><i><u><s><pre><code><cite><blockquote><ul><ol><li><dl><dt><dd><table><tr><td><th><thead><tbody><h1><h2><h3><h4><h5><h6><img><embed><object><param><hr>

Plain text

  • HTML 태그를 사용할 수 없습니다.
  • web 주소와/이메일 주소를 클릭할 수 있는 링크로 자동으로 바꿉니다.
  • 줄과 단락은 자동으로 분리됩니다.
댓글 첨부 파일
이 댓글에 이미지나 파일을 업로드 합니다.
파일 크기는 8 MB보다 작아야 합니다.
허용할 파일 형식: txt pdf doc xls gif jpg jpeg mp3 png rar zip.
CAPTCHA
이것은 자동으로 스팸을 올리는 것을 막기 위해서 제공됩니다.