pike.ida.liu.se
Search for
Home > Docs > Pike reference

[Top]

Modules
 ADT
 Arg
 Array
 Audio
 Bz2
 Cache
 Calendar
 Calendar_I
 Colors
 CommonLog
 Crypto
 DVB
 Debug
 DefaultCompilerEnvironment
 Error
 Filesystem
 Float
 Function
 Fuse
 GDK
 GL
 GLU
 GLUE
 GSSAPI
 GTK
 GTK2
 GTKSupport
 Gdbm
 Geography
 Getopt
 Gmp
 Gnome
 Graphics
 Gz
 Image
 Int
 Java
 Languages
 Local
 Locale
 MIME
 Mapping
 Math
 Msql
 Multiset
 Mysql
 Nettle
 Object
 PDF
 Parser
 Pike
 Pipe
 Postgres
 Process
 Program
 Protocols
 Regexp
 Remote
 SANE
 SDL
 SSL
 Shuffler
 Sql
 Standards
 Stdio
 String
 System
 Thread
 Tools
 Unicode
 Web
 Yp
 _Ffmpeg
 _Roxen
 spider

Classes
 Codec
 CompilationHandler
 CompilerEnvironment
 FacetGroup
 Iterator
 MasterObject
 mklibpike
 string_assignment

Methods
 __empty_program()
 __get_first_arg_type()
 __get_return_type()
 __low_check_call()
 __parse_pike_type()
 __soft_cast()
 _disable_threads()
 _do_call_outs()
 _dump_program_tables()
 _exit()
 _next()
 _prev()
 _refs()
 _typeof()
 `!()
 `!=()
 `%()
 `&()
 `()()
 `*()
 `+()
 `-()
 `->()
 `->=()
 `/()
 `<()
 `<<()
 `<=()
 `==()
 `>()
 `>=()
 `>>()
 `[..]()
 `[]()
 `[]=()
 `^()
 `|()
 `~()
 abs()
 acos()
 acosh()
 add_constant()
 aggregate()
 aggregate_mapping()
 aggregate_multiset()
 alarm()
 all_constants()
 allocate()
 array_sscanf()
 arrayp()
 asin()
 asinh()
 atan()
 atan2()
 atanh()
 atexit()
 backtrace()
 basename()
 basetype()
 call_function()
 call_out()
 call_out_info()
 callablep()
 cd()
 ceil()
 column()
 combine_path()
 combine_path_amigaos()
 combine_path_nt()
 combine_path_unix()
 compile()
 compile_file()
 compile_string()
 connect_lock()
 copy_value()
 cos()
 cosh()
 cpp()
 create()
 crypt()
 ctime()
 decode_value()
 delay()
 describe_backtrace()
 describe_error()
 destruct()
 destructedp()
 dirname()
 encode_value()
 encode_value_canonic()
 enumerate()
 equal()
 errno()
 error()
 exece()
 exit()
 exp()
 explode_path()
 file_stat()
 file_truncate()
 filesystem_stat()
 filter()
 find_call_out()
 floatp()
 floor()
 fork()
 function_name()
 function_object()
 function_program()
 functionp()
 gc()
 get_active_compilation_handler()
 get_active_error_handler()
 get_all_groups()
 get_all_users()
 get_backtrace()
 get_dir()
 get_groups_for_user()
 get_iterator()
 get_profiling_info()
 get_weak_flag()
 getcwd()
 getgrgid()
 getgrnam()
 gethrtime()
 gethrvtime()
 getpid()
 getpwnam()
 getpwuid()
 getxattr()
 glob()
 gmtime()
 has_index()
 has_prefix()
 has_suffix()
 has_value()
 hash()
 hash_7_0()
 hash_7_4()
 hash_value()
 indices()
 intp()
 is_absolute_path()
 kill()
 limit()
 listxattr()
 load_module()
 localtime()
 log()
 lower_case()
 m_delete()
 map()
 mappingp()
 master()
 max()
 min()
 mkdir()
 mkmapping()
 mkmultiset()
 mktime()
 multisetp()
 mv()
 next_object()
 normalize_path()
 object_program()
 object_variablep()
 objectp()
 pow()
 programp()
 query_num_arg()
 random()
 random_seed()
 random_string()
 remove_call_out()
 removexattr()
 replace()
 replace_master()
 reverse()
 rm()
 round()
 rows()
 search()
 set_priority()
 set_weak_flag()
 setxattr()
 sgn()
 signal()
 signame()
 signum()
 sin()
 sinh()
 sizeof()
 sleep()
 sort()
 sprintf()
 sqrt()
 sscanf()
 strerror()
 string_to_unicode()
 string_to_utf8()
 stringp()
 strlen()
 tan()
 tanh()
 this_object()
 throw()
 time()
 tokenize()
 trace()
 ualarm()
 undefinedp()
 unicode_to_string()
 upper_case()
 utf8_to_string()
 values()
 version()
 werror()
 write()
 zero_type()

tokenize()

Method tokenize

array(array(string)|string) tokenize(string code)

Description

Tokenize a string of C tokens.

Returns

Returns an array with C-level tokens and the remainder (a partial token), if any.

Method tokenize

array(array(string)|string) tokenize(string code)

Description

Tokenize a string of Pike tokens.

Returns

Returns an array with Pike-level tokens and the remainder (a partial token), if any.
Module reference for Pike v7.8 release 116, 2008-12-31